Python
文章平均质量分 78
nianhua120
这个作者很懒,什么都没留下…
展开
-
Python爬虫爬学校论坛民主湖-------------一个版面的搜索
我们学校有个民主湖论坛,但是发现功能好不健全。比如你想看一个用户发的所有帖子是不可能的事,这可让很多想认识妹子的汉子,苦恼的不行。最近学Python爬虫程序,于是就写了个爬虫爬一下民主湖论坛,找到你想找的人的贴子。不过前提你必须先有他或她的一个帖子,然后把鼠标放到他的头像上,浏览器左下角有个UID值,记录下来,然后就可以在我们的爬虫中爬到你想要的人的所有帖子了。 本文先做了一个很简陋原创 2015-03-06 20:58:46 · 1240 阅读 · 0 评论 -
Python爬虫爬学校民主湖(4)------------模拟登录
本次,我试验了模拟登陆民主湖论坛。原创 2015-03-19 18:38:59 · 1305 阅读 · 0 评论 -
Python爬虫爬民主湖(5)-------------爬回复内容
mainjun提议我实现一下回复功能,本来最近比较忙,没想着现在做的,不过既然有人捧场,想想又不是太难,就试了一下,目测是可以工作的,但不是特别健全,就先贴上晚一点时间在慢慢修改更新。原创 2015-03-20 18:30:41 · 1123 阅读 · 4 评论 -
Python爬学校论坛民主湖(2)---------实现多个版块搜索
前两天实习了一个版块的搜索,但是多要想全面的了解某个人全面信息,肯定是不够的。一开始打算用正则来正则出所有版块的FID值,后来发现没必要这么麻烦,本来版块就不多,而且有些板块也没多大意思,比如公告版块,所以我就直接将FID保存成一个字典结构,如果你对某个版块感兴趣,还可以添加该版块的FID值。另外说一下本程序改变了停止策略,由于某个版块日发表量很少,有些却很多,如果同等页数搜索,就会造成搜索不平衡原创 2015-03-08 17:20:59 · 1813 阅读 · 12 评论 -
民主湖-大数据(1)-------------------你最喜欢哪个版块
本文根据点击打开链接 进行修改而成。在爬虫爬民主湖 中,仅仅是记录了想要查询作者的帖子,并未对帖子的分布做统计。本文将实现作者在每个版块发帖数量的统计。这个实现上非常简单,原创 2015-04-10 15:11:32 · 923 阅读 · 0 评论