python
小刀砸儿
这个作者很懒,什么都没留下…
展开
-
Win7下 python安装Scrapy
其实Scrapy的安装已经有很多人总结了,这是我主要参照的几个方法:http://cuiqingcai.com/912.htmlhttp://www.cnblogs.com/pang1567/p/4168768.html下面说我主要遇到的问题:✿ 在最后一步: pip install scrapy 是出现一个问题✿ 打开 pip.log 提出错误:原创 2016-03-21 21:32:31 · 645 阅读 · 0 评论 -
关于python csv文件打开错误:_csv.Error: line contains NULL byte
当用python读取csv文件时,出现错误test =open(r'E:\test\deep_learning\test.csv','rb')reader = csv.reader(test)headers = reader.next()print(headers)错误提示为:_csv.Error: line contains NULL byte;译为: CS原创 2016-06-06 21:22:28 · 7447 阅读 · 3 评论 -
python简单正则的爬取
这是做的第一个任务,爬取 http://www.thebigdata.cn/ 中的标题和链接。 红框中为要爬取的部分: 以下为部分源代码: 1、 我一开始是在linux系统下做的,因为是跟着视频学习,然而遇到一些问题,所以改为在PYcharm里,练习的时候是链接和标题分开爬取的,所以将写的代码复制粘贴,运行,然而并没有出现什么,失败。当时是正则的问题。但原创 2015-11-18 18:43:56 · 1652 阅读 · 0 评论 -
Python中遇到的错误(一)
对于这段时间遇到的问题,在多次感到记忆力无能时,觉得很有必要记下来!1、UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-1: ordinal not in range(128)可以试着在导入sys模块import sysreload(sys)sys.setdefaultencoding(原创 2015-11-24 20:33:26 · 2287 阅读 · 0 评论 -
python中遇到的错误(二)
错误提示:501 Not Implemented错误解释:服务器不支持实现请求所需要的功能。 据说这个错误很罕见...... 错误解决:这是在爬虫请求页面时出现的,我一开始用 requests 模块,换成urllib2 请求就好了!原创 2017-04-25 20:20:13 · 916 阅读 · 0 评论 -
AttributeError: type object '_multiprocessing.win32' has no attribute 'WAIT_OBJECT_0'
错误:安装celery运行时出错AttributeError: type object '_multiprocessing.win32' has no attribute 'WAIT_OBJECT_0'原因:windows 对celery的版本支持不高解决方式:降低版本,目前用的是3.1.25...原创 2018-03-27 19:36:31 · 2091 阅读 · 0 评论 -
python操作MySQL 模拟简单银行转账操作
一、基础知识1、MySQL-python的安装下载,然后 pip install 安装包2、python编写通用数据库程序的API规范(1)、数据库连接对象 connection,建立python客户端与数据库的网络连接,创建方法为 MySQLdb.Connect(参数) 参数有六个: host(MySQL服务器地址,一般本地为127.0.0.1)原创 2016-05-10 22:08:34 · 2419 阅读 · 2 评论 -
python爬取返利网(完善)
哈哈,要做勤劳的小蜜蜂~上一篇返利网并没有爬好 http://blog.csdn.net/tt_258/article/details/50300643在高人的指点下,我又回来了,下面是改后的代码:#coding=utf-8import urllib2from bs4 import BeautifulSoupimport timeclass FLW(): def __i原创 2015-12-17 21:39:14 · 1065 阅读 · 0 评论 -
python爬取返利网
最近一段时间试着爬取了返利网的【今日值得买网页】http://zhide.fanli.com/p1?spm=global.pc.buid-todayworth1、找到源代码:首先返利网的网页是动态的,一个网页共有50个商品,平均每次加载5个,因为之前有爬过网易,所以以为它网页与网易一样是json加载,然而当用一样的方法找时并没有找到,无奈只好把每个类型都试一下,最后发现了是XHR类型的,如原创 2015-12-14 21:17:23 · 1242 阅读 · 0 评论 -
python爬取网易评论
最近学习了json模块,并用它爬取了网易的评论。1、首先获取json格式的文件,我用的是360浏览器(貌似用谷歌比较好,但我谷歌出了点问题所以用的360,不过没啥影响)打开评论的网页原创 2015-12-09 20:08:16 · 1287 阅读 · 1 评论 -
Python爬取豆瓣电影top250
其实这个代码挺简单的,跟上一个药智网爬取没太大区别。1、想说一下豆瓣的URL的问题,开始的时候总是链接失败,想说代码没问题,最有可能的就是网址的问题了 发现我的网址是直接从任务那复制粘贴的,而真正豆瓣的网址与所给的是有区别的:#我一开始写的网址http://movie.douban.com/top250?#正确的网址http://movie.douban.com/top250?s原创 2015-11-30 19:44:57 · 2100 阅读 · 0 评论 -
Python爬取药智网的中药材图谱网页
这次学习了python中的BeautifulSoup模块,并用bs爬取的药智网。网址:http://db.yaozh.com/tupu?p=首先要安装bs,要注意版本问题,我一开始用的beautifulsoup4-4.4.1版本装不上,换成beautifulsoup4-4.2.0就可以了。这是我写的爬取药智网的代码:#coding=utf-8from bs4 import Beaut原创 2015-11-28 14:12:14 · 3285 阅读 · 0 评论 -
python Scrapy安装、教程、及爬虫
1、首先要安装好scrapy模块,讲真,真的要找到一个好的安装教程,你会省很大力 传送门 b( ̄▽ ̄)d2、Scrapy是一个用python编写的,很轻巧方便的网络爬虫。 简单的理解,它可以爬取某一个网页的所需信息和链接传回并储存,然后本地代码可以继续访问爬取到的链接,并获取所需信息继续传回储存。 这里有比较严谨的解释 http://hao.jobbol原创 2016-04-15 17:42:35 · 1214 阅读 · 0 评论 -
opencv-python 摄像头的简单应用
1、安装下载安装包pip install opencv_python-2.4.12-cp27-none-win_amd64.whl2、代码#coding=utf-8import cv2import timecap=cv2.VideoCapture(0)#读取摄像头,0表示系统默认摄像头while True: ret,photo=cap.read()原创 2016-05-10 20:55:22 · 3358 阅读 · 0 评论 -
Microsoft Visual C++ 9.0 is required. Get it from http://aka.ms/vcpython27
错误:Microsoft Visual C++ 9.0 is required. Get it from http://aka.ms/vcpython27解决:https://www.microsoft.com/en-us/download/confirmation.aspx?id=44266下载安装原创 2018-05-13 14:51:54 · 996 阅读 · 0 评论