awsl-project / weibo-awsl

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

weibo 爬虫

本爬虫仅供学习交流,请不要非法使用(后果自负

自动爬取某个微博博主转发的微博,根据关键词匹配,记录匹配到的微博的图片

创建 .env 文件

cookie_sub=xxx
max_page=10(爬取的最大页数)
db_url=mysql+mysqlconnector://xxx:xxx/xxx(数据库地址)
pika_url=xxx://:xxx@localhost:6379/0(MQ)
bot_queue=xxx(MQ)

About


Languages

Language:Python 98.5%Language:Shell 1.5%