利用python做一个关于300个地级市政府网站应急预案信息的爬虫

用python做一个关于300个地级市政府网站应急预案信息的爬虫。使用python对300个地级市政府网站应急预案信息的爬虫做一个简单的介绍。我们需要对全国近300个地级市的政府应急预案做一个爬虫。我们考虑用selenium调用网站搜索框，抓取网站和google site:三种方法，但主要问题是这些政府网站的具体页面代码设计根本不规范。