- 博客(5)
- 资源 (14)
- 收藏
- 关注
原创 Python爬虫爬民主湖(5)-------------爬回复内容
mainjun提议我实现一下回复功能,本来最近比较忙,没想着现在做的,不过既然有人捧场,想想又不是太难,就试了一下,目测是可以工作的,但不是特别健全,就先贴上晚一点时间在慢慢修改更新。
2015-03-20 18:30:41 1115 4
原创 python爬虫爬学校民主湖论坛(3)----------多线程搜索帖子
本文提到的功能已经在上一篇文章中实现 过。这次则是尝试用线程池来加速访问,一则是练习一下线程池使用的方法,而是为下一步实现回复内容的爬取做准备。首先,感谢Adam_Kevint对我的关注,本来只是想写个爬虫练习一下自己的Python编程的,没想到还有人关注。先透露一下,帖子回复的搜索已经大致实现了,不过还没实现线程池功能搜索速度很慢,另外民主湖模拟登陆也实现了,整理整理,有时间就上传上去。
2015-03-19 16:39:19 1030
原创 Python爬学校论坛民主湖(2)---------实现多个版块搜索
前两天实习了一个版块的搜索,但是多要想全面的了解某个人全面信息,肯定是不够的。一开始打算用正则来正则出所有版块的FID值,后来发现没必要这么麻烦,本来版块就不多,而且有些板块也没多大意思,比如公告版块,所以我就直接将FID保存成一个字典结构,如果你对某个版块感兴趣,还可以添加该版块的FID值。另外说一下本程序改变了停止策略,由于某个版块日发表量很少,有些却很多,如果同等页数搜索,就会造成搜索不平衡
2015-03-08 17:20:59 1812 12
原创 Python爬虫爬学校论坛民主湖-------------一个版面的搜索
我们学校有个民主湖论坛,但是发现功能好不健全。比如你想看一个用户发的所有帖子是不可能的事,这可让很多想认识妹子的汉子,苦恼的不行。最近学Python爬虫程序,于是就写了个爬虫爬一下民主湖论坛,找到你想找的人的贴子。不过前提你必须先有他或她的一个帖子,然后把鼠标放到他的头像上,浏览器左下角有个UID值,记录下来,然后就可以在我们的爬虫中爬到你想要的人的所有帖子了。 本文先做了一个很简陋
2015-03-06 20:58:46 1239
FrameLayout动态布局
2016-05-14
STM32F0系列参考例程
2012-08-30
c#串口配置窗体(可用于继承窗体)serialport类
2012-02-25
单片机钢琴protel+keil仿真程序 下下来即可运行
2011-05-05
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人