![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
小兴安岭mx
取乎其下,则不知所得也。
展开
-
使用scrapy框架出现callback指定的函数不被调用的情况
1.问题:在学习scrapy框架时,写了一个爬虫,在parse函数里使用yield语句重新请求该网页结果中包含的链接,但是试了好几次parse2函数都不会被调用2.原因:因为自己写了allowed_domains,但是少写了一个r,将"xiaohuar.com"错写成"xiaohua.com",所以导致这些请求不会执行3.解决方法:删掉allowed_domains属性,或者把域名写正确修改完毕后...原创 2018-07-01 18:45:24 · 7603 阅读 · 5 评论 -
python中无法创建包含中文路径的文件
1.问题:在学习python时使用urllib下载文件到本地时,总是无法创建带有中文的文件名,源码如下ab_stc = 'http://www.xiaohuar.com' + src[0] # 相对路径拼接 # 文件名,因为python27默认编码格式是unicode编码,因此我们需要编码成utf-8 file_name = '%s_%s_%s.jpg' % (i-1,school[0].enc...原创 2018-07-01 20:41:13 · 4126 阅读 · 0 评论 -
windows环境下python2.7连接mysql插入数据乱码问题
1.问题:在windows环境下使用PyCharm时,我想向mysql的一张表中插入数据,代码如下import MySQLdb from scrapy.conf import settings class XiaoHuar_Pipeline(object): def process_item(self, item, spider): host = settings['MYS...原创 2018-07-02 09:33:49 · 369 阅读 · 0 评论 -
李宏毅机器学习实战代码篇——作业笔记
1.python的一些用法 np.arange(start,stop,step,dtype):return array Return evenly spaced values within a given interval. Values are generated within the half-open interval [start, stop) np.zeros(shape,...原创 2018-11-05 21:19:02 · 2029 阅读 · 0 评论