求助，爬虫问题

[juoyi]

求助：兄弟们，小弟遇到个问题
1 、爬取全国的国企名单（省、市级）
2 、爬取全国的公立医院名单（省、市级）
省级国企名单要到各省国资委网站查找，市级国企名单要到各市国资委网站查找
至于公立医院也是分别要到省卫健委和各市卫健委网站查找
问题是全国这么多省市，这个用爬虫咋做？不知道描述清楚没有，路过的兄弟有啥想法吗

ps
国企网站倒是找了这么个网站，但是好像不是很权威
http://www.guozi.org/certification/directory_index.php

丁香园医院汇好像又只能看到 10 页...
https://y.dxy.cn/hospital/?page=1&trade=1

[crab]

https://y.dxy.cn/hospital/id 递增（ 1~12812 ）

[juoyi]

@crab 感谢回复，这样确实可以看到更多数据，但是我后面发现丁香园的数据和卫健委官网上的有些出入，39 健康网上的数据更全一点，但是爬全国数据还是太多了，一个省可能就好几千家医院了，其实卫健委官网上并没有这么多

[wuxin987]

https://www.haodf.com/hospital/list.html