- 安装依赖
pip install -r requirements.txt
- 存放拥有企业信息的excel放到jobbole/qcc/excel目录下
- 修改配置文件jobbole/settings.py中的QCC_ACCOUNTS信息,可以添加多个账号
- 修改配置文件中的数据库信息
- 在指定数据库中执行jobbole/sql/qcc_*.sql
- 启动程序开始爬虫,执行命令行或者在idea中运行main程序
scrapy crawler qcc
pip install -r requirements.txt
scrapy crawler qcc