python（网络爬虫），第二部分---对URL的认识

 一：URL举例
 就以下面这个URL为例，介绍下普通URL的各部分组成
 
 http://www.aspxfans.com:8080/news/index.asp?boardID=5&ID=24618&page=1#name
 
 从上面的URL可以看出，一个完整的URL包括以下几部分（如图）：
 
 

二：URL通用格式

URL的语法：大多数URL语法都建立在9个部分构成的通用格式上，而其中最重要的是方案(scheme)、主机(host)和路径(path)

通用格式：方案://用户名:密码@主机名:端口/服务器上资源的路径;参数?查询#片段

 三、URL的分类

 URL可以分为绝对URL和相对URL

相对URL中的基础URL：转换相对URL的第一步就是找到基础U