hhxb369的博客

原创 爬虫学习一

什么是爬虫？ 网络爬虫（web crawler）也叫网页蜘蛛，网络机器人，是一种用来自动浏览万维网的程序或者脚本。爬虫可以验证超链接和HTML代码，用于网络抓取（Web scraping）。网络搜索引擎等站点通过爬虫软件更新自身的网站内容（Web content）或其对其他网站的索引。 爬虫基本流程 准备工作：通过浏览器查看分析目标网页，学习编程基础规范。 获取数据：通过HTTP库向目标站点发...