在linux服务器下部署python工程(爬虫)

---恢复内容开始---

这两天 部署 这个 工程 ,真的是 心力交瘁惹。

如果有用到爬虫的话,python环境 先配好,如果是 python3的话 beautifulsoup 可以参见

linux安装python3.6 及 beautifulsoup

http://www.cnblogs.com/clover-xuqi/p/7155496.html

= = 正题:

简单来说 ,只要 把整个工程文件夹,考过来,用 命令行 python3  main.py 就好了

请先保证,能在自己电脑上 能用命令行让工程跑起来。。。windows下 cmd 内 python3不能用的, 请百度,把python3 丢进环境变量里。

好了。

在 windows下 能跑起来了, 丢服务器。。

python3 main.py

如果能动,就哦了。。如果 遇到以下问题。。请参照着解决。

1、except Exception, x   invalid syntax错误 还特么 指着那个 逗号。

  解决方法: except Exception as x:  把逗号 改成as 。。

2、<urlopen error unknown url type: https>

  解决方法: 把 url 里的 https 改成 http。。相信我,这样 解决 最快!!!!。。我开始 也不肯认输的。现实教我做人了。。。如果非要用 https 参照4

3、if(data[‘cont‘] == ‘No Update Information!\n\n‘):
TypeError: tuple indices must be integers or slices, not str

  解决方法:好好的 字典 说特么 找不到东西 就找不到东西。。问题十有八九 是在 返回来的字典 特么是null。为啥是null呢。。自己一步步检查把。。

       我通过。40+的print 成功定位到 下载器 下不出页面 是 url https 错误,没错 就是2.好了。

4、对,不得不用https协议的。。网站。。orz。。可以先试一下 python3下能不能 import ssl 如果不行,恭喜,我们都是 ssl 缺失引起的悲剧。。

  解决方法:http://www.cnblogs.com/yuechaotian/archive/2013/06/03/3115472.html

  击掌~

时间: 2024-08-24 12:40:14

在linux服务器下部署python工程(爬虫)的相关文章

.Net Core 在Linux服务器下部署程序--(4). 前端ReactWeb应用部署

确认第二步中的软件已经安装完成 Nodejs前端Web服务器 Zip与UnZip压缩包软禁 nrm前端包源管理器 PM2前端Web程序守护进程 创建部署文件夹 如果已经执行过( 3. 租户平台后端程序部署 ),忽略此步骤 如果没有执行过第3篇,此处简单叙述下,详情看第3篇文档( 3. 租户平台后端程序部署 ) 进入usr文件夹 : cd /usr 创建publish文件夹 : sudo mkdir publish 进入publish文件夹 : cd publish/ 创建tenant租户平台程序

.Net Core 在Linux服务器下部署程序--(3). 部署.net Core程序

确认第二步中的软件已安装完成 lrzsz文件上传下载软件 zip与unzip压缩包软件 net core 相关软件 确认上述软件安装完成之后,开始部署程序 创建部署文件夹 我的习惯是在usr文件夹下新建publish文件夹,然后在publish文件夹中各创建各个程序对应的文件夹,在文件夹下back和front分别来存放前端和后端部署程序 由当前所在文件夹,进入usr文件夹 查看当前所在文件夹  进入usr文件夹 : cd /usr 创建publish文件夹,并查看文件夹是否创建成功 创建publ

在linux服务器下日志提取的python脚本(实现输入开始时间和结束时间打包该时间段内的文件)

1.需求:近期在提取linux服务器下的日志文件时总是需要人工去找某个时间段内的日志文件,很是枯燥乏味,于是乎,我就想着用python结合linux指令来写一个日志提取的脚本,于是就有了以下脚本文件: 2.代码:getlogzip.py 1 import time,sys,os 2 3 filename1 = time.strftime('%m%d',time.localtime(time.time())) 4 filename2 = "log" 5 servername = inpu

linux系统下安装Python环境

如何在Linux系统下搭建Python开发环境(http://www.maiziedu.com/course/python/)?Python在Linux系统中安装方法在Windows下是有很大的区别的,今天就具体记录一下关于 Python 环境软件包在Linux系统下的一些安装步骤 1.升级 Python 到 2.7.10( 默认 2.6.6 ) shell > yum -y install epel-release shell > yum -y install gcc wget readli

(转)LINUX CENTOS7下安装PYTHON

LINUX CENTOS7下安装PYTHON 原文:http://www.cnblogs.com/lclq/p/5620196.html Posted on 2016-06-27 14:58 南宫羽香 阅读(8506) 评论(5) 编辑 收藏 1.查看是否已经安装Python Centos7默认安装了python2.7.5 因为一些命令要用它比如yum 它使用的是python2.7.5. 使用python -V命令查看一下是否安装Python: 然后查看一下Python可执行文件的位置: 进入到

linux服务器批量部署应用系统shell脚本(Tomcat/jetty)

linux服务器批量部署应用系统shell脚本: 1.请更换代码内的服务器地址(Tomcat或jetty服务器) serverRoot=/home/undoner/java_tool/apache-tomcat-7.0.61 serverDir=/home/undoner/java_tool/apache-tomcat-7.0.61/webapps 2.请更换工程所属配置文件名称 /WEB-INF/classes/install.properties 3.请将war包上传至本命令同级的目录,执行

linux服务器下配置多tomcat

车辆交易用的系统模块,正在做.老板要看看,以便车城那边的人提出意见.于是在服务器上再次增加一个tomcat. 以前是配置过的,配置过程其实很简单,这次太大意了,找了半天问题. 首先是拷贝一个tomcat,放到一个新的位置,这个tomcat就是我要用的新的tomcat. 然后去配置一下日志的输出位置,在bin目录下的catalia.sh或者startup.sh.网上怎么样配置的都有,呵呵. 然后修改server.xml,配置好虚拟目录和端口信息.在此,connector节点下的protocol一定

用linux服务器下的/dev/shm/来释放磁盘的压力

巧用linux服务器下的/dev/shm/来释放磁盘的压力 浏览:646 | 更新:2013-06-18 18:08 | 标签: 磁盘 tmpfs是Linux/Unix系统上的一种基于内存的文件系统.tmpfs可以使用您的内存或swap分区来存储文件.由此可见,tmpfs主要存储暂存的文件.它有如下2个优势 : 1. 动态文件系统的大小.2. tmpfs 的另一个主要的好处是它闪电般的速度.因为典型的 tmpfs 文件系统会完全驻留在内存 RAM 中,读写几乎可以是瞬间的.同时它也有一个缺点  

linux系统下部署TOMCAT异常:java.net.UnknownHostException

原文出自:http://www.myexception.cn/operating-system/444024.html linux系统下部署TOMCAT错误:java.net.UnknownHostException今天在修改linux环境中 /etc/hosts文件时候,保存之后,访问页面的时候突然这个错,后来网上查了下,解决了java.net.UnknownHostException: vps**: vps**        at java.net.InetAddress.getLocalH