weixin_45009770的博客

原创 【Python爬虫】一，爬虫简介及安装Python3环境

爬虫，一般指网络爬虫（web crawler），也叫网络蜘蛛（web spider）或自动索引程序（automatic indexer）。百度百科定义为。目前网络爬虫的实现语言大多为python。一般的网站搜索引擎等站点可以通过爬虫软件更新自身的网站内容或其对其他网站的索引。网络爬虫可以将自己所访问的页面保存下来，以便搜索引擎事后生成索引供用户搜索。而一般人可以通过爬虫程序来从互联网上获取自己想要的资源或者数据，在大数据时代，不管是工程领域，经济领域还是研究领域，数据就是一切的根源。