外卖订单爬虫(美团,饿了么,百度外卖)

这个程序是用来抓取外卖平台(美团,饿了么,百度)的商户订单开发,并不是一个通用库,而是为这个 特定场景进行开发的。 适用场景:餐饮企业拥有多家外卖门店,订单量非常大,有对订单进行数据分析的需求。 主要功能:每天定时启动,抓取三大外卖平台的订单,转成成excel文件,发邮件给需要的人

如何使用

修改config目录下的production.json


1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

{

  "log": {

    "level": "DEBUG"

  },

  "mail": {

    "from": "[email protected]", //邮件发送人

    "mailTo": "[email protected]", //邮件接收人

    "host":"smtp.xxx.com",

    "port":25,

    "secure":false,

    "user":"[email protected]",  //程序使用的邮件

    "pass":"程序使用的邮件的密码"

  },

  "imgCode":{

    "key":"xxxxxxxxxxxxxxxxxxxxxxxxxxxxx"   // https://www.juhe.cn/docs/api/id/60  识别验证码api的key

  },

  "account": [

    {

      "name": "美团xxx店",

      "username": "帐户名",

      "password": "账户密码",

      "type": "meituan"

    },

    {

      "name": "饿了么xxx店",

      "username": "帐户名",

      "password": "账户密码",

      "type": "eleme"

    },

    {

      "name": "百度xxx店",

      "username": "帐户名",

      "password": "账户密码",

      "type": "baidu"

    }

  ]

}

其中以下配置是程序中使用验证码识别的api服务, 美团,百度的商家后台都需要验证码登录 api服务使用的是聚合数据的验证码识别服务,你需要先 申请聚合数据的账号,得到key 填写到如下配置项中去。


1

2

3

"imgCode":{

    "key":"xxxxxxxxxxxxxxxxxxxxxxxxxxxxx"   // https://www.juhe.cn/docs/api/id/60  识别验证码api的key

  },

邮件功能需要配置详细的smtp服务地址、发件人账号名、密码、端口、是否使用ssl


1

2

3

4

5

6

7

8

9

"mail": {

    "from": "[email protected]", //邮件发送人

    "mailTo": "[email protected]", //邮件接收人

    "host":"smtp.xxx.com",

    "port":25,

    "secure":false,

    "user":"[email protected]",  //程序使用的邮件

    "pass":"程序使用的邮件的密码"

  },

GitHub地址:https://github.com/mudiyouyou/waimai-crawler

转:

http://www.cnblogs.com/annie00/p/6178185.html

时间: 2024-11-03 04:03:02

外卖订单爬虫(美团,饿了么,百度外卖)的相关文章

“饿了么+百度外卖”稳居第一 易观报告揭晓外卖下半场核心趋势

日前,易观发布的数据显示,2017年第3季度,中国互联网餐饮外卖市场整体交易规模达582.7亿元人民币,环比上涨26.8%,与去年同期相比,增幅达79.1%.在竞争格局方面,饿了么+百度外卖的市场交易份额占比达48.8%,位列市场第一. 饿了么+百度外卖,双品牌独立发展,这样的合并姿势,一开始就占据了接近半壁江山,而未来究竟发展空间多大?易观这份<互联网餐饮外卖用户专题分析2017>(以下简称"易观报告"),用数据说话,给出了答案. A+B还是A&B,这是一道细分用

美团外卖订单系统演进

美团外卖从2013年9月成交第一单以来,已走过了三个年头.期间,业务飞速发展,美团外卖由日均几单发展为日均500万单(9月11日已突破600万)的大型O2O互联网外卖服务平台.平台支持的品类也由最初外卖单品拓展为全品类. 随着订单量的增长.业务复杂度的提升,外卖订单系统也在不断演变进化,从早期一个订单业务模块到现在分布式可扩展的高性能.高可用.高稳定订单系统.整个发展过程中,订单系统经历了几个明显的阶段,下面本篇文章将为大家介绍一下订单系统的演进过程,重点关注各阶段的业务特征.挑战及应对之道.

百度外卖拿下人工智能最高奖,“人机混合”将成主流趋势?

12月23日,2017第七届"吴文俊人工智能科学技术奖"颁奖盛典上,百度外卖智能物流调度系统荣获科技进步奖(企业技术创新工程项目). 这个被外界誉为"中国智能科技最高奖"的获得背后,却是外卖平台以配送技术上快速迭代,进击下半场的关键所在. 或者说,人工智能将通过外卖场景,征服消费者的胃. 菜品难独家?先用人工智能来提速 据DCCI的<中国网络外卖服务白领市场价值研究报告>显示,已经有接近90%的用户已经将外卖平台作为全品类消费平台. 白领阶层,显然将成为

从“百度外卖GMV暴增9倍”透视外卖行业发展趋势

北京时间4月29日,全球最大中文搜索引擎百度公布了截至2016年3月31日第一季度未经审计的财务报告.财报数据显示,第一季度在本地生活服务领域,由百度糯米.百度外卖.百度钱包等共同构成的百度电商化交易总额(GMV)为160亿元,同比增长268%. 笔者从百度获悉,作为百度"航母计划"首批重点项目,百度外卖继续在白领外卖市场取得了亮眼佳绩.2016年Q1,百度外卖GMV同比增长860%,商户数量同比增长720%. 之所以百度外卖能够在O2O市场中开疆扩土,最主要的原因在于"白领

iOS-Andriod百度地图仿百度外卖-饿了么-选择我的地址-POI检索/

http://zanderzhang.gitcafe.io/2015/09/19/iOS-Andriod百度地图仿百度外卖-饿了么-选择我的地址-POI检索/ 百度外卖选择送货地址: 饿了么选择送货地址: 百度地图api官网 第一个图,就是放一个UIImageView在MapView的中间,然后我们拖动的时候下面地图在跑. -(void)addMiddleImage{ UIImageView *imaV=[UIImageView new]; imaV.center=_mapView.center

百度外卖拟融资5亿美元,补贴力度要加大?

[阅读原文] 作者:茱莉叶 IT战略家   外卖要烧钱, 资源靠硬拼 中国的互联网巨头们,以烧钱的方式来争夺消费者,蔚然成风.而现在百度正在规划为百度外卖开启新一轮高达5亿美元的融资.更多具体信息还处于保密阶段,但预计融资规模至少为3亿美元. 实际上才在7月,百度外卖宣布已完成B轮融资,估值24亿美元.短短几个月后,百度外卖为了与竞争对手争夺更多用户和资源,又开始发起新一轮融资.O2O领域的大举投资,促使企业通过加剧补贴抢占份额,从而极大推升运营成本,外卖市场的竞争已越来越激烈. 自2013年以

外卖决胜之战 看百度外卖如何死磕”准时”搞定用户

从e保养到百度外卖,从Airbnb到uber,不知不觉间O2O已经"渗入"到人们衣食住行的各个角落并形成了诸侯割据的局面.外卖O2O更甚,如今外卖行业已形成了百度外卖.美团外卖.饿了么三国鼎立之势,而且各自背靠BAT巨头,并在核心优势和主攻方向上都各有侧重,资本和市场也均趋于成熟,这所有的迹象都在表明,外卖O2O即将进入分水岭,那么今天我们就聊聊什么才是决定外卖平台生死的变量,谁又最可能成为"剩者为王"中的"王者". 从满足需求到理解需求  安全

新京报:百度外卖直营店月入350万,使用过期菜品内幕曝光

2016年7月20日晚,慈云寺北里110号楼 初禾生态厨房(四惠店) .男子正从箱式货车上往店里运货物,百度统一配送.新京报记者大路摄. 7月19日深夜23时50分,一辆厢货车司机搬着蓝色收纳筐,进了北京朝阳区八里庄路西侧一个小门脸. 门脸挂着简陋的喷绘布招牌,"初禾生态厨房". 第二天到了饭点,成群的百度外卖送餐车停在这家被定义为"厨房"的门外,骑手们从店内走出,拎着"17饭"."良记小龙虾"等多个品牌外卖的袋子. 这是个什

Android自定义下拉刷新动画--仿百度外卖下拉刷新

好久没写博客了,小编之前一段时间一直在找工作,从天津来到了我们的大帝都,感觉还不错.好了废话不多说了,开始我们今天的主题吧.现如今的APP各式各样,同样也带来了各种需求,一个下拉刷新都能玩出花样了,前两天订饭的时候不经意间看到了"百度外卖"的下拉刷新,今天的主题就是它–自定义下拉刷新动画. 看一下实现效果吧: 动画 我们先来看看Android中的动画吧: Android中的动画分为三种: Tween动画,这一类的动画提供了旋转.平移.缩放等效果. Alpha – 淡入淡出 Scale