mac 安装scrapy

https://jingyan.baidu.com/article/14bd256e748346bb6d2612be.html

  1. 1.安装Python

    安装完了记得配置环境,将python目录和python目录下的Scripts目录添加到系统环境变量的Path里。在cmd中输入python如果出现版本信息说明配置完毕(如下面截图)。python下载网站,https://www.python.org/downloads/。请选择对应的Python版本安装。我装了2.7

    (记得设置环境变量)

  2.  

    2.安装lxml    lxml是一种使用 Python 编写的库,可以迅速、灵活地处理 XML。下载地址 https://pypi.python.org/pypi/lxml/3.3.1,可用pip下载,

    下载命令:python -m pip install lxml

  3.  

    3.安装setuptools  一般都已经安装了的,可在cmd中用 python -m pip list 查看是否已经安装,如果没安装,用下载命令:python -m pip install setuptools安装,下载地址https://pypi.python.org/packages/2.7/s/setuptools/

  4.  

    4.安装zope.interface

    可在cmd中用下载命令:python -m pip install zope.interface

    也可以使用第三步下载的setuptools来安装egg文件,现在也有exe版本,点击https://pypi.python.org/pypi/zope.interface/4.1.0#downloads下载。

  5.  

    5.安装Twisted

    可在cmd中用下载命令:python -m pip install Twisted,它是用Python实现的基于事件驱动的网络引擎框架。下载地址:

    http://twistedmatrix.com/trac/wiki/Downloads

  6.  

    6.安装pyOpenSSL

    pyOpenSSL是Python的OpenSSL接口, 可在cmd中用下载命令:python -m pip install pyOpenSSL安装,下载地址:https://launchpad.net/pyopenssl

  7. 7

    7.安装win32py  (未测试)        提供win32api,下载地址:https://sourceforge.net/projects/pywin32/files/

  8. 8

    8.安装Scrapy

    直接在cmd中输入easy_install scrapy回车即可。安装后在cmd命令行输入scrapy,如果出现下图,则安装成功。

时间: 2024-10-11 12:50:15

mac 安装scrapy的相关文章

mac os安装scrapy框架

因为Mac 自带了python 2.7 所以只需要安装pip包管理工具安装scrapy就可以了 sudo easy_install pip 然后 pip install Scrapy 但是报错了 显示了依赖satisfied 但是就是装不了 在网上找了各种资料 都是各种各样 最后一不小心 sudo rm -rf /usr/bin/python 干脆删除了python 使用homebrew 安装python3 brew install python3 在brew 的目录下发现pip3也安装好了 再

Mac OS安装Scrapy失败

报错: DEPRECATION: Uninstalling a distutils installed project (six) has been deprecated and will be removed in a future version. This is due to the fact that uninstalling a distutils project will only partially uninstall the project. Uninstalling six-1

Mac OS安装Scrapy

个人觉得掌握简单的爬虫知识非常有用,特别是想要从一些特定网站自动地下载一些资源或者统计一些数据,非常的有用.对于产品经理来说,如果要了解竞争产品.替代产品的价格,可以写一个爬虫脚本从各大电商网站爬取相关的资料,避免人工处理的麻烦. Python写爬虫可以从简单的Scrapy框架入手.对于Mac OS系统来说,由于系统本身会引用自带的python2.x的库,因此默认安装的包是不能被删除的.如果你使用python3.x可以使用homebrew来安装,但是如果你习惯使用python2.x,那么直接安装

mac 安装nginx

1.brew search nginx 2.brew install nginx 启动nginx ,sudo nginx ;访问localhost:8080 发现已出现nginx的欢迎页面了. 备注: ln -s  /usr/local/sbin/nginx /usr/bin/nginx 做个软连接.常用的指令有: nginx -V 查看版本,以及配置文件地址nginx -v 查看版本nginx -c filename 指定配置文件nginx -h 帮助 #重新加载配置|重启|停止|退出 ngi

安装 Scrapy python抓取工具

重点在于FQ1.安装 pywin32 从http://sourceforge.net/projects/pywin32/ 请确认下载符合您系统的版本(win32或者amd64)2.安装 pip 地址:https://pypi.python.org/pypi/pip#downloads 注意选择tar.gz包,目前最新版本: pip-7.1.0.tar.gz (md5, pgp) 解压安装包,使用CMD进入解压目录,然后使用如下命令进行安装 python setup.py install 添加wi

Centos 6.6, 64-bit 安装scrapy

1. 安装依赖包,yum install libxml2-devel openssl libxslt-devel python-devel libffi-devel 2. pip install lxml   3. 安装Twisted:     从官网下载源码: wget https://pypi.python.org/packages/source/T/Twisted/Twisted-15.5.0.tar.bz2#md5=0831d7c90d0020062de0f7287530a285;   

mac安装brew 软件包管理工具Homebrew

mac 安装 brew  Homebrew brew 全称Homebrew  是Mac OSX上的软件包管理工具 Homebrew 安装和卸载工具 只用一行命令就能完成 官方地址:    http://brew.sh/index.html mac 自带ruby 打开命令行  terminal 输入  : ruby -version 1) 安装命令 ruby -e "$(curl -fsSL https://raw.github.com/Homebrew/homebrew/go/install)&

mac安装mysql及终端操作mysql与pycharm的数据库可视化

一.Mac安装mysql 首先下载mysql,地址:https://dev.mysql.com/downloads/mysql/ 然后已知安装就好了,会出现让你记住密码的提示,然后就安装好了.... 更改密码,可以参考:http://blog.csdn.net/soft2buy/article/details/50223373 二.终端操作mysql 首先在系统偏好里面找到mysql,如下图左一,然后点开,运行mysql,使其呈现running,如下图右一.     然后打开终端,输入mysql

Mac安装MySQL

Mac安装MySQL没有Win下那么智能(无脑), 还须要一些配置步骤. 网上教程不够具体, 找了几篇综合起来才安装好, 因此留个印记, 帮其它人降低点时间损耗: 1. 去官网下一个mysql-*.*.*-osx10.9-x86_64.dmg, 注意选择对应CPU位数的 2. 安装完后, 改密码 :/usr/local/mysql/bin/mysqladmin -u root password YourPassword 3. 从这一步開始有差别了: (1) 假设你是用Mac自带的terminal