github爬取接口官方文档 https://developer.github.com
项目主要是爬取 github 上用户及用户仓库信息.最终分析各编程语言的流行度,趋势,应用领域等问题.本地数据库的创建方法在这里
项目用到的工具,框架主要有: maven,mybatis,jackson.
- 程序从 MasterCrawler.java 启动.终止
UserCrawler输入userstop, 终止RepoCrawler输入repostop,切勿强制终止程序,会使数据丢失一部分. 当提示结束时,输入任意字符退出程序.