win10下安装scrapy出现错误的处理

一、背景:

在win10的dos窗口下使用命令pip install scrapy安装scrapy时,出现“ error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": https://visualstudio.microsoft.com/downloads/”的错误提示,安装不成功。

二、处理过程:

1、根据提示在微软网站安装了Visual Studio套件中的C++build组件,仍未能解决问题。

2、网上寻找帮助,在“https://blog.csdn.net/doyanger/article/details/54235203”页面看到,出现错误提示主要是组件lxml组件未能安装成功(再查看安装的错误提示,发现在error前面有“building ‘lxml.etree‘ extension”的关键词,说明的确是在安装lxml组件时出现的问题),可在“http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml”网站直接下载对应版本的lxml组件进行安装。

3、在“http://www.lfd.uci.edu/~gohlke/pythonlibs”页面查找lxml的关键词,可看到一系列的lxml组件,选择“lxml?4.4.1?cp38?cp38?win_amd64.whl”组件下载,并放在目录“c:\Users\Administrator\”下。进入dos窗口(运行输入cmd,自动进入dos的管理员模式),输入命令“pip install ./lxml?4.4.1?cp38?cp38?win_amd64.whl”,即可完成lxml组件的安装。

4、在lxml组件安装完成后,重新执行pip insall scrapy命令,发现还需要安装twisted组件,安装上述方法下载“Twisted-19.7.0-cp38-cp38-win_amd64.whl”,执行“pip install ./Twisted-19.7.0-cp38-cp38-win_amd64.whl”安装。

5、上述组件安装完成后,继续执行pip install scrapy,不再出现红色错误提示,表明安装成功!

三、小结

  lxml和twisted组件都是scrapy的关键组件,win10下直接安装需要C++build编译支持,应该是安装的C++build工具不完整吧,未能直接安装成功,后续再找机会测试。使用网上的对应系统编译好的成品组件安装lxml和twisted也是好的办法,既解决了问题也节约了时间。 

原文地址:https://www.cnblogs.com/sfccl/p/11699621.html

时间: 2024-08-29 13:54:41

win10下安装scrapy出现错误的处理的相关文章

Python3下安装Scrapy

在windows下安装Scrapy的错误挺多的, 我将我安装成功的步骤发出来,供更多的人参考. 首先,直接进入Scrapy网站的文档Installation guide下的 Installing Scrapy下: https://doc.scrapy.org/en/1.2/intro/install.html 可以看到安装Scrapy所依赖的包. parsel, w3lib, cryptography, pyOpenSSL这些可以直接使用pip命令安装.如: pip install parsel

Win10 下安装 SQL server 2008

Win10 下安装 SQL server 2008安装时出现一下问题: 1.有时执行某些操作后,没有反应.多试几次吧 2.验证时,报重启失败. 运行注册表,找到HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Control\Session Manager目录,在右侧找到PendingFileRenameOperations,将其删除. 3.安装程序集“Microsoft.VC90.ATL,version="9.0.21022.8",...错误 解

【暂未解决】win10下安装VS2017 15.3版本 提示 未能安装包“Microsoft.NET.4.6.FullRedist.NonThreshold.Resources,version=4.6.81.9,language=zh-CN”。

win10下安装VS2017 15.3版本的时候,出现以上错误日志提示,请问如何解决的哇? 这个问题,开始我以为是我的安装包所在的路径问题引起的,但是我将安装包移动到了磁盘根目录进行安装,依然出现这个问题.目前该问题尚未解决,正在积极寻求解决办法. “ 安装出现问题. 可通过以下方式排查包故障问题: 1. 使用以下搜索 URL 来搜索针对每个包故障的解决方案 2. 针对受与影响的工作负荷或组件修改选项,然后重新尝试安装 3. 从计算机上删除产品,然后再次安装 如果 Developer Commu

Win10下安装Python3及Python2、数据类型、格式化输出、运算符

Win10下安装Python3及Python2 下载的官网地址: https://www.python.org/downloads/windows/ 安装Python3: 安装完成之后,在开始处输入 cmd ,测试Python是否安装成功. 输入: python -V ----> pip -v ----> pip 安装Python2: 安装完成之后,打开之前打开的命令提示符页面,测试Python是否安装成功. 输入: python -V ----> pip -v Python3.x与Py

python应用:爬虫框架Scrapy系统学习第二篇——windows下安装scrapy

windows下安装scrapy 依次执行下列操作: pip install wheel pip install lxml pip install PyOpenssl 安装Microsoft visual c++ build tools pip install twisted 当此处提示错误时,安装Microsoft Visual C++ Compiler for Python 2.7 下载地址:https://www.microsoft.com/en-us/download/confirmat

Win10下安装MySQL8

第一步:下载安装包 官网: https://dev.mysql.com/downloads/mysql/ 百度网盘:mysql-8.0.18-winx64.zip 第二步:解压 注意:解压到的目录不能出现中文或者空格等名称 第三步:配置 1.新建文件和文件夹 在解压目录下,新建 my.ini文件和 data 文件夹,如图: data文件夹保持为空就好,下面对 my.ini 进行配置: 解压目录就是安装目录,我的解压目录是D:\mysql-8.0.18-winx64,所以下面的目录都以这个路径为准

WIN10下安装python3.7.2出现“尝试创建C:\Users\XX\AppData\Roaming\Microsoft\Installer时出错”

WIN10下安装python3.7.2出现“尝试创建C:\Users\XX\AppData\Roaming\Microsoft\Installer时出错” 1.右键点击安装包以管理员身份安装,进度大概在1/4时报错. 2.尝试获取AppData文件夹的权限后再安装,依然报一样的错误. 3.进到C:\Users\XX\AppData\Roaming\Microsoft\下直接手工创建Installer文件夹,再进行安装,ok. 原文地址:https://www.cnblogs.com/fct-no

DELPHI7在WIN8和WIN10下安装和运行

DELPHI7在WIN8下安装后可以打开运行,但发现设置断点DEBUG运行DLL工程时会卡死(IDE长时间无反应,不报错). DELPHI7在WIN10下安装后打开的时候会报错,无法运行. 以上两种情况的解决办法: 设置DELPHI32.EXE以WINDOWS XP SP2的兼容模式下运行后一切正常. 也就是说WIN8和WIN10还是可以安装DELPHI7的.

win10下安装win7双系统

win10下安装win7双系统 相信很多人和博主一样,心血来潮就升级了win10(要不就被强制升级了),但是当我们做开发的,渐渐就发现问题了,各种开发软件各种不兼容(ietexter.myeclipse等)不要问博主是怎么知道的说起来都是泪啊!还有,身为一个骨灰级游戏玩家,看着那FPS简直就是惨不忍睹!咳咳,好像扯远了,接下来就进入咱们的正题-- 准备材料: 启动盘一个(U盘,移动硬盘什么的都可以,只要是启动盘就行,网上好多启动盘制作教材,在这里博主就不仔细阐述了) win7镜像文件一份 操作过