外卖订单爬虫：美团、饿了么、百度外卖平台自动抓取工具

外卖订单爬虫（Waimai Crawler）是一个专门为餐饮企业设计的自动化订单数据抓取工具，主要使用JavaScript开发。该项目专门针对美团、饿了么和百度外卖三大平台的商家后台，帮助餐饮企业自动化收集和分析多门店的外卖订单数据。

项目核心功能

定时自动抓取订单：系统能够每天定时启动，自动登录三大外卖平台的商家后台，抓取最新的订单数据。通过配置定时任务，用户可以设置抓取频率和时间。

数据转换与邮件发送：抓取到的订单数据会自动转换成Excel格式，并通过邮件发送给指定的接收人。这极大方便了餐饮企业的财务和运营部门进行数据分析。

验证码识别支持：针对美团和百度外卖平台需要验证码登录的情况，项目集成了第三方验证码识别服务（聚合数据API），确保在需要验证码的情况下也能正常登录和抓取数据。

多平台账号管理：支持同时管理多个外卖平台的店铺账号，用户可以配置多个美团、饿了么和百度外卖的店铺信息，实现一站式管理。

技术架构与依赖

该项目基于Node.js开发，主要依赖以下核心模块：

• request：用于发送HTTP请求和获取页面内容
• nodemailer：处理邮件发送功能
• log4js：日志记录和管理
• config：配置文件管理
• csv-stringify：数据导出为CSV/Excel格式
• moment：时间日期处理

项目采用模块化设计，将不同平台的任务处理分离到独立的模块中：

• lib/meituan_task.js：美团外卖订单抓取
• lib/eleme_task.js：饿了么订单抓取
• lib/baidu_task.js：百度外卖订单抓取
• lib/fetch_task.js：通用抓取任务处理
• lib/mail.js：邮件发送功能
• lib/logger.js：日志记录

配置与使用

使用前需要修改config目录下的production.json配置文件，主要包括：

邮件配置：设置SMTP服务器信息、发件人账号、收件人列表等邮件相关参数。

验证码API配置：配置聚合数据验证码识别服务的API密钥，用于处理美团和百度平台的验证码登录。

账号管理：添加需要监控的外卖平台店铺账号信息，包括店铺名称、用户名、密码和平台类型。

适用场景

该项目特别适合以下场景使用：

• 餐饮企业拥有多家外卖门店，需要统一管理各平台的订单数据
• 订单量较大，人工统计和分析效率低下
• 需要对订单数据进行定期分析和报表生成
• 希望自动化处理外卖平台的日常数据收集工作

通过这个工具，餐饮企业可以大大减少人工处理订单数据的时间，提高数据分析的效率，为经营决策提供更及时准确的数据支持。