今天在使用python进行爬虫的时候,遇到了一个小问题:
AttributeError: module 'urllib' has no attribute 'request'
AttributeError: module 'urllib' has no attribute 'parse'
urllib作为Python爬虫的基础包,经常被直接引用
import urllib
今天写一个百度搜索的爬虫时,遇到了上面的属性错误
url = "http://www.baidu.com/s?"
keyword = input("输入要搜索的信息>>")
wd = {"wd": keyword} # 定义一个字典,或者两个元素的元组
wd = urllib.parse.urlencode(wd) # 将wd的数据做urlencode转码
fullURL = url + wd
环境:linux虚拟机终端,换成虚拟机的spyder3运行正常,我就奇了怪了,怎么环境会有问题?
最后上https://stackoverflow.com/ 找到了答案,stackoverflow真是个好地方!
python的urllib不会自动导入其under层的包,需要手动导入,也就是需要单独进行
import urllib
import urllib.parse
import urllib.request
操作,这样就可以直接使用了。