技术总结
文章平均质量分 70
南歌子
责任心强,喜欢钻研,喜欢读书
展开
-
python爬虫技术总结
最近用python做爬虫研究了一段时间,感觉太好了,下面和大家分享一下依旧是以伯乐在线网站作为抓取的例子,从最新文章专栏抓取他们的文章,可以获取网站的分页来获取更多的内容下载打包起来。下面是代码:import urllib2,urllibimport threadingfrom bs4 import BeautifulSoupimport reimport sy原创 2013-07-03 15:04:48 · 1264 阅读 · 0 评论 -
python爬虫抓取图片
关于python一直以来是很著名的,林林总总也有很多方法,大致起来也就是一个原理。下面我来介绍一下我用的BeautifulSoup获取的,正则获取也很简单,在这里只说一下BeautifulSoup方法,使用伯乐在线网站作为参考的例子代码如下#encoding:UTF-8import urllib2,urllib,random,threadingfrom bs4原创 2013-07-03 14:54:55 · 2934 阅读 · 0 评论 -
关于python的多线程问题
在网上看到了好多关于python的thread的问题,关于多线程的爬虫,我发现网上一些论坛的代码实际上是单线程的,而我也是刚刚开始搞多线程,这是我的理解,请各位高手多多指教,前面是论坛代码,后面是我自己写的代码,新手,还请指点一下,一起进步~论坛代码(自己研究了一下,大体是这样):# encoding: UTF-8import threadingimport urllib,原创 2013-05-13 12:33:26 · 1070 阅读 · 0 评论 -
mongodb学习(一)
mongodb的基础安装入门原创 2013-10-07 16:19:13 · 1218 阅读 · 0 评论 -
mongodb学习(二)
大概的说下基本的“增删查改“原创 2013-10-09 19:34:40 · 2436 阅读 · 0 评论 -
mongodb学习(三)
细说mongodb的的某些操作原创 2013-10-12 10:11:37 · 1067 阅读 · 0 评论 -
mongodb学习(四)
mongodb的正则表达式原创 2013-10-13 10:39:42 · 1497 阅读 · 1 评论 -
Angular.js学习笔记
前几天想用phonegap开发一些HTML5应用,选择了ionic框架,觉得ionic框架的感觉很舒服,不想是用bootstrap开发的应用似的手机网站的感觉。ionic是基于Angular.js开发的,我对前端的认识也不是很深刻,还是停留在Node.js的认知,虽然听说过Angular.js也没有精力去研究一下,这次写一下Angular.js的学习过程。共勉。通常我们会有HTML原创 2015-01-04 11:26:15 · 883 阅读 · 0 评论