bytebuff / ScrapingOutsourcing

ScrapingOutsourcing专注分享爬虫代码 尽量每周更新一个

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

ScrapingOutsourcing

介绍

Scrapy爬虫项目!

软件架构

软件主要包含一下文件夹:

  • Code文件夹主要存放代码
  • Doc文件夹主要存放文档
  • Resource主要存放资源,包括数据等。

使用说明

  • 大部分程序是基于scrapy的爬虫项目
  • scrapy程序拿来即用,支持scrapy1.8.0版本
  • 非scrapy项目可能需要配合Selenium以及谷歌浏览器

参与贡献

About

ScrapingOutsourcing专注分享爬虫代码 尽量每周更新一个


Languages

Language:Julia 50.8%Language:Python 20.0%Language:HTML 16.7%Language:Jupyter Notebook 11.5%Language:JavaScript 0.6%Language:CSS 0.4%