win10安装scrapy

前提已经安装好python2.7
背景:
scrapy框架，windows下的部署工作挺麻烦的。需要用的资源整合了一下可以为以后需要的同学节省不少时间。

相关文件：网盘链接: http://pan.baidu.com/s/1hrL8SFq

一、依赖包

  • 安装lxml-3.2.4.win-amd64-py2.7.exe)
  • 安装pywin32-218.win-amd64-py2.7.exe)
  • 安装Twisted-13.2.0.win-amd64-py2.7.exe)
  • 安装pyOpenSSL-0.13.1.win-amd64-py2.7.exe)
  • 安装zope.interface-4.2.0.win-amd64-py2.7.exe)

导入相关包，没有报错则安装成功

二、easy_install

1.w3lib 的安装

方式1：easy_install w3lib

方式2：下载压缩文件 解压之后在目录中执行cmd命令 Python setup.py install

全部下载安装成功后，在cmd命令中输入pip install scrapy 如果没有报错 则部署成功。

时间： 2024-12-14 16:36:36

win10安装scrapy的相关文章

win10下安装scrapy出现错误的处理

一.背景: 在win10的dos窗口下使用命令pip install scrapy安装scrapy时,出现“ error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": https://visualstudio.microsoft.com/downloads/”的错误提示,安装不成功. 二.处理过程: 1.根据提示在微软网站安装了Visual Studio套件

win10虚拟环境安装scrapy

说明:本人用的是python3.6版本,64位系统. 第一步:创建并激活虚拟环境 virtualenv scrapy scrapy\Scripts\activate 第二步:安装lxml pip install lxml 第三步:安装Twisted 这里可能需要你的Visual C++版本大于15,自行到下面网址下载即可 http://landinghub.visualstudio.com/visual-cpp-build-tools pip install twisted 第四步:安装pyop

win10在Pycharm中安装scrapy

查看官网说明 发现推荐是安装Anaconda 或 Miniconda,这东西有点大而全,感觉目前用不上.所以没这样做. 直接安装scrapy 如果直接装会报错的,参考文章就可以解决. 这里记一下组件下载网址. 完成安装 Pycharm的Terminal中输入scrapy命令,如果命令能找到,说明安装已成功. 原文地址:https://www.cnblogs.com/lyg-blog/p/10695284.html

96、python version 3.6 required,which was not fount in the registry（python3.6安装scrapy）

在安装scrapy时遇到问题 环境:win10(64位), Python3.6(64位) 安装scrapy: 1.安装wheel(安装后,便支持通过wheel文件安装软件) pip3 install wheel 2.安装lxml.pyopenssl lxml:解析XML的库,很强大,做爬虫BS4,selenium,XPATH都会用到 pip3 install lxml pip3 install pyopenssl 3.安装pywin32 下载网址: https://sourceforge.net

【Python3 爬虫】05_安装Scrapy

Scrapy简介 Scrapy是用纯Python实现一个为了爬取网站数据.提取结构性数据而编写的应用框架,用途非常广泛.框架的力量,用户只需要定制开发几个模块就可以轻松的实现一个爬虫,用来抓取网页内容以及各种图片,非常之方便. Scrapy Engine(引擎) : 负责 Spider . ItemPipeline . Downloader . Scheduler 中间的通讯,信号.数据传递等. Scheduler(调度器) : 它负责接受 引擎 发送过来的Request请求,并按照一定的方式进

python 3.6.1 安装scrapy踩坑之旅

系统环境:win10 64位系统安装 python基础环境配置不做过多的介绍 window环境安装scrapy需要依赖pywin32,下载对应python版本的exe文件执行安装,下载的pywin32版本不对安装会失败 下载依赖地址:https://sourceforge.net/projects/pywin32/files/pywin32/Build%20221/ 下载依赖安装完成后试下pip install scrapy,很显然失败了 发现网友的解决方案: 地址:https://blog.c

win10安装net 3.5

win10安装.net 3.5 首先,win10安装.net 3.5,通过网络在线安装,由于下载原因等不能正确安装,因此可以选择使用光盘镜像安装. 1.解压光盘镜像文件 2.进入到解压文件夹,下面为进入后的文件截图. 进入 sources找到sxs文件夹. 3.执行安装命令 在cmd(管理员权限)下运行以下命令 Dism /online /enable-feature /featurename:NetFX3 /All /Source:D:\sources\sxs /LimitAccess 其中,

mac os安装scrapy框架

因为Mac 自带了python 2.7 所以只需要安装pip包管理工具安装scrapy就可以了 sudo easy_install pip 然后 pip install Scrapy 但是报错了 显示了依赖satisfied 但是就是装不了 在网上找了各种资料 都是各种各样 最后一不小心 sudo rm -rf /usr/bin/python 干脆删除了python 使用homebrew 安装python3 brew install python3 在brew 的目录下发现pip3也安装好了 再

mac 安装scrapy

https://jingyan.baidu.com/article/14bd256e748346bb6d2612be.html 1.安装Python 安装完了记得配置环境,将python目录和python目录下的Scripts目录添加到系统环境变量的Path里.在cmd中输入python如果出现版本信息说明配置完毕(如下面截图).python下载网站,https://www.python.org/downloads/.请选择对应的Python版本安装.我装了2.7 (记得设置环境变量)   2.