搜索引擎演示 – 如何使用Java调用百度搜索和谷歌搜索以及数据采集
使用NekoHTML和XPath解析百度搜索返回结果
使用JSoup和CSSPath解析百度搜索返回结果
使用Google AJAX API获取谷歌搜索结果
采集人物信息
采集电子报纸
自己没搜索引擎，又想要大规模的数据源，怎么办？可以对百度搜索和谷歌搜索善加利用，以小搏大，站在巨人的肩膀上。有很多的应用场景可以很巧妙地借助百度搜索和谷歌搜索来实现，比如网站的新闻采集，比如技术、品牌的新闻跟踪，比如知识库的收集，比如人机问答系统等，我之前做的一个准确率达百分之九十几的人机问答系统的数据源，其中一部分就是充分利用了百度搜索和谷歌搜索。在此演示的技术的基础上，可以容易地扩展到其他的搜索引擎，可以借鉴使用的NekoHTML+XPath或JSoup+CSSPath技术，轻松获取页面的自定义的内容。