python 安装 scrapy 填坑

直接 pip install scrapy ,出大问题

缺 lxml, 那就去下 lxml ,又出大问题。(为什么总是有这么多坑要爬呢)

pip用的心态爆炸了,改用 pycharm 里的 Setting->Project Interpreter 下载拓展

找到大佬的填坑步奏:

1、先安装 pywin32

2、安装 lxml

3、安装 pyOpenSSL

4、安装 Scrapy 成功

原文地址:https://www.cnblogs.com/yxyun/p/11416414.html

时间: 2024-08-10 16:15:32

python 安装 scrapy 填坑的相关文章

python 3.6.1 安装scrapy踩坑之旅

系统环境:win10 64位系统安装 python基础环境配置不做过多的介绍 window环境安装scrapy需要依赖pywin32,下载对应python版本的exe文件执行安装,下载的pywin32版本不对安装会失败 下载依赖地址:https://sourceforge.net/projects/pywin32/files/pywin32/Build%20221/ 下载依赖安装完成后试下pip install scrapy,很显然失败了 发现网友的解决方案: 地址:https://blog.c

windows下python安装scrapy碰到的坑

1,提示没有找到vcvarsall.bat文件 确保安装了vs.我这边是win10系统,安装了vs2015,安装的时候要注意,自定义安装项,勾选上"编程语言"里面的库文件和python库支持 2,提示openssl的某个.h文件找不到 去openssl官网下载源码包,解压,把"openssl"整个目录扔到你的python安装目录的include里 3,提示lxml的某些文件找不到 http://www.lfd.uci.edu/~gohlke/pythonlibs/#

Python安装Scrapy

Python之Scrapy爬虫框架安装及简单使用:https://www.cnblogs.com/liruihua/p/5957393.html Scrapy安装错误:Microsoft Visual C++ 14.0 is required...:http://blog.csdn.net/nima1994/article/details/74931621?locationNum=10&fps=1

Python 安装Scrapy报错(已解决)

error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools 进入该网址http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 下载twisted对应版本的whl文件   Twisted-17.1.0-

python 安装scrapy

最近发现一个新的python万用库 地址 https://www.lfd.uci.edu/~gohlke/pythonlibs/ ctrl + f 搜索你要安装内容 例如 twisted 分别对应着 版本号 python版本 windows版本 选择相应的版本和操作系统 下载 .whl cmd命令行 执行    pip install  下载路径和文件名 好了 scrapy安装也是同理  这样就可以避免报错 缺少vc++ 等等一系列错误了. 原文地址:https://www.cnblogs.co

在CENTOS7下安装kubernetes填坑教程(原创)

kubernetes(以下简称"k8s")目前是公认的最先进的容器集群管理工具,在1.0版本发布后,k8s的发展速度更加迅猛,并且得到了容器生态圈厂商的全力支持,这包括coreos.rancher等,诸多提供公有云服务的厂商在提供容器服务时也都基于k8s做二次开发来提供基础设施层的支撑,比如华为.可以说k8s也是Docker进军容器集群管理和服务编排领域最为强劲的竞争对手. 现在的Red Hat centos7的用户,已经可以使用熟悉的yum来直接安装k8s,但是真要安装起来,还是有相

Windows安装Scrapy遇坑解决办

PS: Windows真心不适合开发.且行且珍惜.... 坑: error: Setup script exited with error: Microsoft Visual C++ 9.0 is required (Unable to find vcvarsall.bat). Get it from http://aka.ms/vcpython27 解决方法: Microsoft Visual C++ Compiler for Python 2.7

python 安装scrapy错误

安装方法 首先安装wheel pip install wheel 1 1 安装完成后验证是否成功 wheel 1 1 然后去 http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml 网站下载Twisted, 进到网站=>搜索'Twisted'=>挑选合适版本下载 把下载的.whl文件放在一个容易寻找的地址(我放在了D:\) 然后在控制台进入该地址 在该地址下输入 pip install [whl] 1 1 注:[whl]表示你的.whl文件,一定要全名,

廖雪峰js教程笔记6 generator一个坑 看完python在回来填坑

generator(生成器)是ES6标准引入的新的数据类型.一个generator看上去像一个函数,但可以返回多次. ES6定义generator标准的哥们借鉴了Python的generator的概念和语法,如果你对Python的generator很熟悉,那么ES6的generator就是小菜一碟了.如果你对Python还不熟,赶快恶补Python教程!. 我们先复习函数的概念.一个函数是一段完整的代码,调用一个函数就是传入参数,然后返回结果: function foo(x) { return