Beast code in Giters

xtuyaowu's starred repositories

天气爬虫（全国城镇天气自动定时抓取更新，并开放RESTful查询接口），附带代理IP池定时更新并检测其可用性

Language:Java36300

工作寻(JobHunter)是一款招聘信息整合的网站，目前固定的模板有拉勾网，中华英才网，前程无忧。工作寻可以在线通过关键字，工作经验，工作地点实时爬取，也可以创建任务爬取定数量的招聘信息用以统计，分析最高薪资，最低薪资，平均薪资等。该项目为本科毕业设计项目。

Language:Java4600

a smart stream-like crawler & etl python library

Language:PythonApache-2.0100

:zap: A distributed crawler for weibo, building with celery and requests.

Language:PythonMIT480700

python分布式任务框架，基于celery

Language:HTML1800

A Scrapy Project 中文门户网站新闻和评论抓取——重启维护工作

Language:PythonMIT1400