对于爬虫来说,第一步就是要找到靠谱的、专业的、量大的数据,而各类垂直导航网站,可以帮我们省去不少时间,欢迎批评指正。
1. 电影类http://www.dydh.org/
该网站收录了在线电影,电影预告、电影资讯、电影周边,等内容版块,甚至还提供了30个电影下载的网站。
2. 大数据类hao.199it.com/
大数据导航收录了各行各业的大数据分析网站和工具。
3. 医学类http://www.meddir.cn/
该网站涵盖了组织机构、资源分类、求职求学、学科分类和疾病大全六大主题版块。
4. 学术类kbs.cnki.net/
知网旗下的学术网站,是目前为最全面、最具权威的全球学术网站大全,在这里你可以搜集到到99%以上跟学术相关的资料。
5. 旅游类https://www.ctrip.com/
旅游类,感觉一个携程网就很全面了。
6. 新能源电池研发http://www.cbea.com/zixun/index.html
电池中国,是比较专业的新能源电池网站,包含了新能源电池相关的咨询,财经,政策,产业链等信息。
7.水处理
水处理-北极星水处理网-专业的水处理行业垂直门户网站,北极星水处理网是专门针对水处理行业的最新企业信息,最新技术的网站,可以获取相关专业信息。
8.专利查询
专利之星检索系统,是中国专利信息中心旗下的专利检索网站。
WIPO - World Intellectual Property Organization,是世界知识产权组织关于知识产权服务、政策、合作与信息的全球论坛。是一个自筹资金的联合国机构,到2014年4月为止,有187个成员国。世界知识产权组织是一个致力于促进使用和保护人类智力作品的国际组织。
9.公司查询
https://www.qcc.com/、https://aiqicha.baidu.com/
10. 科研表征网站
11. 新型纳米材料购买网站
12. 诊所/医院设备转让网站
(以上,仅供个人参考,不喜勿喷)