爬虫
周传伦
测试开发一枚,平时喜欢钻研技术,代码不重要,重要的是思想和思路
展开
-
ssl.SSLCertVerificationError: [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: unable to
最近再用mac下的pycharm编写python文件,在抓取制定网站的错误提示每次运行都直接报错如下:ssl.SSLCertVerificationError: [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: unable to get local issuer certificate (_ssl.c:1076)During handling of the above exception, another exception occ原创 2020-08-07 14:54:54 · 16682 阅读 · 13 评论 -
python数据类型报错:TypeError: can only concatenate tuple (not “str“) to tuple
最近在爬完网站数据之后,往excel表格里面插入数据,一直报错:TypeError: can only concatenate tuple (not “str”) to tuple后来发现插入的数据为元组类型,需要转换为列表,才能直接插入,直接上代码如下:from urllib import requestimport csvimport timeimport reimport randomclass MaoyanSpider(object):def init(self):self.ur原创 2020-08-06 17:05:31 · 10457 阅读 · 0 评论 -
UnicodeEncodeError: ‘gbk‘ codec can‘t encode character ‘\u10e6‘ in position 181: illegal multibyte s
最近再写一个爬虫程序,读取请求地址时用到了html=res.read().decode(“utf-8”)里的decode方法,但是一直报错如下:UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\u10e6’ in position 181: illegal multibyte sequence然后自己查询资料,发现需要更改decode方法为decode(“gbk”,“ignore”),然后就解决了,直接上代码如下:from urllib原创 2020-08-05 15:29:29 · 317 阅读 · 0 评论