lanshiqin / lanshiqin-blog

我的Hexo博客

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

使用Python自动化获取全国每个城市的车牌代码 | 蓝士钦

lanshiqin opened this issue · comments

https://www.lanshiqin.com/675a168f/

最近有这样一需求,需要获取12123交管查询网站上的全国每个城市对应的城市id和车牌代码。最初的想法是直接用Python写个爬虫,遍历每个城市,然后用Xpath提取DOM节点数据就好了。然而在实际操作中发现城市id的DOM节点如果用简单的获取网页数据的爬虫是取不到id值的,这个城市id值必须用浏览器打开的方式去访问,然后网站的js脚本再动态的将城市id插入DOM节点。于是乎想到了用自动化测试工