kwb0716 / Python3Webcrawler

python3的网络爬虫实践:12306模拟登陆；B站滑块验证码破解；QQ付费音乐下载；Google单词；JD;淘宝信息采集

Python3Webcrawler

python3的网络爬虫实践

记录一下自己写Python爬虫的经过。

每一个项目内部附有主要爬取思路，位于“分析.txt”中。

IDE：Pycharm Python版本: 3.6

一：request 爬虫

• QQ音乐多线程下载 http://y.qq.com/

• 12306点击验证码模拟登录 https://kyfw.12306.cn

• google单词查询与记录 https://translate.google.cn/（做了个QT）

二：BeautifulSoup 爬虫

• JD数据爬取 https://www.jd.com/

三：selenium 爬虫

• B站滑块验证码模拟登录 https://www.bilibili.com