python爬虫 爬取知乎用户的用户信息

最新推荐文章于 2024-07-11 20:20:14 发布
最新推荐文章于 2024-07-11 20:20:14 发布
阅读量5.3k 收藏 1
点赞数 2
分类专栏： python 文章标签： python 知乎网 爬虫 session url
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_21970857/article/details/46536923
版权
博主利用Python爬虫技术，通过知乎用户分享的文章找到其ID，尽管用户已更改名字，但无法改变ID。通过尝试不同ID组合，最终成功找到心仪女生的知乎主页，从而更深入地了解她的兴趣和关注点。
摘要由CSDN通过智能技术生成

我用python爬虫找到了不想告诉我她知乎ID的妹纸的ID…….

在我做了这件事情之后 , 她觉得我越来越懂她了 , 嘻嘻

有一天 , 我发现我心仪已久的妹纸在朋友圈里分享了知乎专栏的文章 , 就知道她也刷知乎 . 如果在知乎上关注她 , 我就能知道 , 她最近关注什么 , 心里想些什么 , 了解了解她喜欢的方面 , 还能作为谈资 , 简直太赞了 (*^^)v .
但是输入她的名字…… 在知乎上根本找不到好吗 (๑`灬´๑)
我们两个聊天的时候 , 刚好说到了她分享的那篇文章 ,
我很自然的说: “知乎上你用的不是真名呀, 就我这么天真用了真名..”
她笑着说:”那个可以改呀” ,
“凭什么知乎团队不让我改啊!!! “,我答道,” 不如我们互粉吧^_- ”
哎 , 于是她打开zhihu , 看了看我的主页 , 并没有关注我…… 可能是赞太少了吧… 达不到她的要求 , 或者她不想让我知道她在看什么吧 , 也许她希望自己的知乎是交浅言深 , 不希望被身边人看见… (๑-﹏-๑) 失望.

我回去想了想 , 她说名字可以改 , 那她可能以前也用的是真名 , 找到破绽了!
知乎的名字可以改 , 但是id是改不了的 !
每个人的主页地址 , people后面那个就是TA的id,
http://www.zhihu.com/people/zhang-san-12-45
例如张三同名很多 , 后面就会加上数字. 她的名字拼音相同的较多 , 我试了一下 , 这个数字是不超过100的. 它的组合方式有 zhang-san , zhang-san-1 zhang-san-12-43 依次类推.

好 , 现在我就可以开始寻找她的账号了! 既然她改名了 , 那她名字满足的条件一定是: 昵称的拼音不是真名. 这个用pypinyin模块可以解决 , 这样子 , 需要我人工查看的主页就少很多了.

  1. 在github上 下
最低0.47元/天 解锁文章
Yihui_He
关注
  • 2
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Python爬虫爬取知乎用户信息+寻找潜在客户
彼岸花开的彼岸
07-27 1万+
【Python应用】寻找社交网络中的目标用户 这是我们学校的软件工程课程设计的题目，要求自行编写爬虫或者利用开放的API获取新浪微博、知乎等社交网站的用户信息，利用数据挖掘的相关算法进行分析, 从大规模的用户群体中, 分别找出其中具有海淘或母婴购物意向的用户。
用python爬取一个人所有信息_Python之爬虫（二十） Scrapy爬取所有知乎用户信息(上)...
weixin_39984201的博客
11-20 377
爬取的思路首先我们应该找到一个账号，这个账号被关注的人和关注的人都相对比较多的，就是下图中金字塔顶端的人，然后通过爬取这个账号的信息后，再爬取他关注的人和被关注的人的账号信息，然后爬取被关注人的账号信息和被关注信息的关注列表，爬取这些用户的信息，通过这种递归的方式从而爬取整个知乎的所有的账户信息。整个过程通过下面两个图表示：爬虫分析过程其次我们要获取这个账号的关注列表和被关注列表这里我们需要通过抓...
Python爬虫从入门到入狱之爬取知乎用户信息
Avaricious_Bear的博客
06-24 814
这些字段的是在用户详细信息里找到的，如下图所示，这里一共有58个字段，可以详细研究每个字段代表的意思：这段代码是非常重要的，主要的处理逻辑其实都是在这里 上述的代码的主要逻辑用下图分析表示：关于上图的一个简单描述： 1. 当重写start_requests，一会有三个yield，分别的回调函数调用了parse_user,parse_follows,parse_followers，这是第一次会分别获取我们所选取的大V的信息以及关注列表信息和粉丝列表信息 2. 而parse分别会再次回调parse_follow
Python知乎爬虫——爬取知乎用户简单数据信息
05-08
萌新入坑代码，大佬勿喷
知乎爬取评论（不是回答）的Python代码，无套路，完全免费获取。
weixin_44335331的博客
07-11 635
安装Python/Anaconda，以及Python的IDE，Pycharm是用的最多的Python。爬虫需要你自己粘贴替换cursor信息，cookie缓存信息，以及问题的编码。将我的代码从网站上复制到你的Python IDE里。学Python 3天也够了，至少可以爬取知乎的回答和评论了。阅读本教程之前，请你确定你还能进入你想阅读的问题。找到你想爬取评论的问题，并在问题中定位问题的编号。然后，你在里面搜你的ID，就可以看到你的评论了。在py所在的文件夹的地址栏输入cmd，回车，cookie缓存信息，
Python爬虫抓取知乎所有用户信息
weixin_33937499的博客
03-14 680
今天用递归写了个抓取知乎所有用户信息的爬虫，源代码放在了github上，有兴趣的同学可以上去下载一下看看，这里介绍一下代码逻辑以及分页分析，首先看网页，这里本人随便选了一个大V作为入口，然后点开他的关注列表，如图 注意，本人爬虫的全称都是处于非登录状态的。这里的粉丝列表以及关注者列表都是后台ajax请求得到的数据（没有听过ajax的童鞋别慌，aja...
pythonrequests爬取知乎个人信息_用PYTHON中的requests模块爬知乎用户信息
weixin_39887748的博客
12-08 360
最近在自学python爬虫，就会那么几个常用的库的基本动作，拿来爬知乎试一下效果，发现还能爬下来点数据，当然，只是娱乐级别。首先想了一下爬用户的思路。先选一个优质用户，从他的粉丝列表或者关注的人列表中获取用户，鉴于有很多像我这样并没有粉丝的账号，因此选择从关注的人列表中下手。从这位大号关注的人列表中获取每一位用户，再查找每位用户关注的人。。。以此类推。老子曰“道生一，一生二，二生三，三生万物”？ ...
python3.6爬取知乎用户信息代码
04-19
利用python3 和scrapy框架爬取知乎的用户信息并存储到MongoDB的源码。
python爬虫源码爬取知乎内容python爬虫源码爬取知乎内容
最新发布
08-03
python爬虫案例，python爬虫源码爬取知乎内容python爬虫源码爬取知乎内容
利用python爬取知乎评论_一个简单的python爬虫,爬取知乎
weixin_39830020的博客
12-13 1750
一个简单的python爬虫,爬取知乎主要实现 爬取一个收藏夹 里 所有问题答案下的 图片文字信息暂未收录，可自行实现，比图片更简单具体代码里有详细注释，请自行阅读项目源码：1 # -*- coding:utf-8 -*-23 from spider import spiderhtml4 from multiprocessing import pool5 import sys,urllib,http...
Python爬取知乎用户
吉他程序员的博客
09-19 9451
1.今天来介绍下用scrapy爬取知乎某个人圈子的用户信息。本文需要懂scrapy框架，不懂的请先自学，爬取结果如下图: 图片详细地址: http://img.blog.csdn.net/20170919091840064watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvTHVvWmhlbmc0Njk4NzI5/font/5a6L5L2T/fontsize
python scrapy爬虫爬取虎扑NBA新闻前十页，以及所有现役球星信息虎扑
10-31
运行scrapy，可获得虎扑NBA新闻前十页信息以及现役所有NBA球员信息，还有flask把获取的数据渲染出来
简单的python3.5爬取知乎用户基本信息
sanchen的博客
12-19 2740
简单的知乎用户信息爬取。   用到python3.5，mysql数据库，需要自行准备好环境   代码在windows上测试成功（没钱买mac，逃）   插入数据库时，写了两个版本，一个正常查询，一个协程查询（主要比较看看这两者的性能如何）   由于是个python渣，代码有点乱。   好了不多废话，现在开始：   全局变量： # 提交头数据 headers = { "Us
python爬取知乎用户信息_Python——十行批量爬取知乎用户信息
weixin_26776943的博客
02-10 582
加油鸭接着上个内容，做了一点改进，可以批量爬取知乎用户信息。实现思路：加一个id数组，循环访问获取id，然后输入到网址中，读取信息。import requests# 将浏览器复制出来的requests headers参数赋值给一个变量，一般直接用headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebK...
python爬取知乎用户信息泄露_scrapy实战--爬取知乎用户信息(上)
weixin_30082211的博客
12-28 476
背景使用Scrapy分布式爬取知乎所有用户个人信息!项目地址 爬取知乎所有用户大规模抓取静态网页Scrapy绝对是利器!当然也可以使用requests库来自己实现,但是要自己写过滤器等组件,既然有现成的轮子并且还是很好的轮子就没必要再造一个了!image使用Scrapy时单一进程抓取的时候速度太慢,可以使用多进程,但是如果觉得还是慢,那么我们可以使用基于redis的分布式抓取,几台电脑或则服务器同...
python爬取知乎用户信息_python爬取知乎用户总结
weixin_39805732的博客
11-26 353
看了崔老师的微课录播 | 03月17日 爬取知乎所有用户详细信息视频，跟着学习顺便复习使用Scrapy练习，然后写个小总结，当然这里不会详细介绍每一步操作，还是跟着视频学吧。本人电脑64位win7 python2.7。要在知乎爬取所有用户详细信息，一开始要先找个大V，因为关注大V的人比较多，而且大V自己关注别人也基本是大V，这样下去几轮一个庞大的数据网就出来了，我就继续按照视频中选择start_u...
用Python Requests抓取知乎用户信息
xiaosong的博客
11-08 2936
转自：http://zihaolucky.github.io/using-python-to-build-zhihu-cralwer/ 写在前面 最早接触的爬虫是GitHub上非常有名的开源爬虫框架Scrapy，到后面接触一个短小的zhihu-to-renren，再到最近接触@苏莉安同学的js代码。不过要熟悉爬虫还是建议从自己手写开始。这篇文章将向大家介绍如何用Pyth
Python selenium爬取知乎用户信息存入Excel表格
阿优乐扬的博客
08-25 1470
知乎介绍： 知乎是网络问答社区，连接各行各业的用户。用户分享着彼此的知识、经验和见解，为中文互联网源源不断地提供多种多样的信息。准确地讲，知乎更像一个论坛：用户围绕着某一感兴趣的话题进行相关的讨论，同时可以关注兴趣一致的人。对于概念性的解释，网络百科几乎涵盖了你所有的疑问；但是对于发散思维的整合，却是知乎的一大特色。2017年11月8日，知乎入选时代影响力·中国商业案例TOP30。 知乎官网： ...
用Python Requests抓取知乎用户信息（二）
xiaosong的博客
11-08 791
转自：http://zihaolucky.github.io/mutilthread-crawler/ 你可以先读一下用Python Requests抓取知乎用户信息了解文章的背景和细节；这篇文章主要关注对爬虫性能的改造。 为什么提出多线程？ 这部分的知识是从麦兜兜的博客中搬过来的，例子非常棒！ 为什么要提出多线程呢？我们首先看一个单线程的例子。 from time
python爬虫爬取知乎用户信息
05-21
可以使用 Python 的 Requests 和 BeautifulSoup 库来爬取知乎用户信息。首先需要登录知乎获取 cookie，然后通过模拟登录获取到用户的个人主页，再使用 BeautifulSoup 解析页面获取用户信息。 以下是示例代码： ```python import requests from bs4 import BeautifulSoup # 登录知乎并获取 cookie session = requests.Session() headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'} login_url = 'https://www.zhihu.com/signin' response = session.get(login_url, headers=headers) soup = BeautifulSoup(response.text, 'html.parser') _xsrf = soup.find('input', attrs={'name': '_xsrf'})['value'] captcha_url = soup.find('img', attrs={'class': 'Captcha-englishImg'})['src'] # 模拟登录获取用户信息 login_data = { '_xsrf': _xsrf, 'email': 'your_account', 'password': 'your_password', 'captcha': input('请输入验证码' + captcha_url), 'remember_me': 'true' } session.post(login_url, headers=headers, data=login_data) user_url = 'https://www.zhihu.com/people/username' response = session.get(user_url, headers=headers) soup = BeautifulSoup(response.text, 'html.parser') # 解析页面获取用户信息 name = soup.find('span', attrs={'class': 'ProfileHeader-name'}).text headline = soup.find('span', attrs={'class': 'RichText ztext ProfileHeader-headline'}).text description = soup.find('div', attrs={'class': 'ProfileHeader-infoItem ProfileHeader-description'}).find('span', attrs={'class': 'RichText ztext'}).text.strip() location = soup.find('div', attrs={'class': 'ProfileHeader-infoItem ProfileHeader-location'}).find('span', attrs={'class': 'ProfileHeader-detailValue'}).text.strip() business = soup.find('div', attrs={'class': 'ProfileHeader-infoItem ProfileHeader-business'}).find('span', attrs={'class': 'ProfileHeader-detailValue'}).text.strip() employment = soup.find('div', attrs={'class': 'ProfileHeader-infoItem ProfileHeader-employment'}).find('span', attrs={'class': 'ProfileHeader-detailValue'}).text.strip() position = soup.find('div', attrs={'class': 'ProfileHeader-infoItem ProfileHeader-position'}).find('span', attrs={'class': 'ProfileHeader-detailValue'}).text.strip() education = soup.find('div', attrs={'class': 'ProfileHeader-infoItem ProfileHeader-education'}).find('span', attrs={'class': 'ProfileHeader-detailValue'}).text.strip() major = soup.find('div', attrs={'class': 'ProfileHeader-infoItem ProfileHeader-major'}).find('span', attrs={'class': 'ProfileHeader-detailValue'}).text.strip() ``` 以上代码中，需要替换 `your_account` 和 `your_password` 为你的知乎登录账号和密码，并将 `username` 替换为你要爬取的用户的用户名。另外，为了防止被知乎反爬虫机制检测到，最好加上一些随机的等待时间和 User-Agent 等信息。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值