weixin_52359459的博客

原创 爬虫初步认识

数据来源 1.企业产生的用户数据 2.政府、机构提供的公开数据 3.第三方数据平台购买的数据 4.爬虫爬取数据 爬虫的定义 网络爬虫是伪装成客户端与服务端进行数据交互的程序. 爬虫的工作流程 1.确定需要爬取的URL地址 2.通过HTTP/HTTPS协议获取对应的HTML页面 3.提取HTNL页面有用的数据 ...