CapCreed的博客

原创 Python Crawler爬虫实战公式-表格数据

那么首先就需要读取首页里面的国家列表，之后分别进入每个国家的超链接，读取里面每个港口的信息。这里以上Unlocode网页抓取港口坐标为例，先后设置Unlocode主页和子网页，实际网址根据所需要抓取数据的网页进行更改。这个网页的数据性质是首页包含国家超链接，分别点进国家列表之后可以看到一个表格，包含这个国家所有的港口信息。以上便完成了爬虫过程，可以在4.4中自由添加其他需要的数据或删除不需要的数据，根据自己的需求来。3.2检查请求是否成功，若未成功，则无法抓取到国家信息，返回值；4.4抓取需要的表格内容。