python爬虫基础--爬取人人网的登录方式

最新推荐文章于 2021-02-22 21:02:01 发布
最新推荐文章于 2021-02-22 21:02:01 发布
阅读量353 收藏
点赞数 1
分类专栏： 爬虫 文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/D_wart/article/details/103609970
版权

******换成自己的账号密码 大体结构不会变，但是后续代码需要根据自己账号变动

import requests

base_url = 'http://www.renren.com/PLogin.do'
headers = {
   
    'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36',
    'Referer': 'http://www.renren.com/971682585/newsfeed/photo',
}
#session 记录状态<
最低0.47元/天 解锁文章
D_dalei
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
python爬取文库,python爬取文库ppt的简单实现
weixin_39731782的博客
03-26 2141
背景：最近在看各种金融相关的文档，觉得还是课件ppt上讲的逻辑清晰，好理解一些，但是各个网站下载很贵，总是在线看又怕找不着了，看着这些ppt就流口水，这就想办法简单的爬下来。实验目标下载百度文库ppt问题：1、https连接请求2、页面存在未完全展开情况，即【继续阅读】需要点击3、存在浏览器js渲染，ppt的图片连接渲染后能得到真实的成果下载目标：转换结果思想：1、使用selenium调用谷歌浏览...
Python实现人人网爬虫，爬取用户所有状态信息。
xge的专栏
12-01 9235
之前没有怎么用过python，也没写过爬虫，最近几天抽空学习了一下，写了个人人网的爬虫练了练手。     用了BeautifulSoup4包来解析HTML标签，Beautiful Soup 是用 Python 写的一个 HTML/XML 的解析器，它可以很好的处理不规范标记并生成剖析树。通常用来分析爬虫抓取的web文档。对于不规则的 Html文档，也有很多的补全功能，节省了开发者的时间和精力。使
python爬虫模拟登录人人网
zep
02-22 1790
1. 对http://www.renren.com/发送请求，拿到下面这个页面的源码 2. 对页面中的验证码图片进行定位，获取到img标签中的src属性的值，再对src中的网址发送get请求，将验证码图片保存到本地，后面会使用超级鹰打码平台将保存到本地的验证码图片进行识别 3. 通过对网站登录的抓包，发现了请求的url为：http://www.renren.com/974713149，响应回来的就是我们所需要的登录成功之后的个人主页。所以对这个url发送请求，并注意模拟请求头User-Agent、Ref
人人网用户信息爬虫
王泉的专栏
08-31 2286
人人网用户信息爬虫一直想做一个项目，爬取各个社交网站上与我们学校有关的用户的各种信息，然后分析用户行为。由于人人网的爬虫比较简单，所以最先从人人网爬起。import re import urllib2 import mechanize import cookielib import HTMLParser from BeautifulS
Python爬虫、反爬与应对
04-29
本课程讲述爬虫、反爬虫以及应对策略。整个课程以实际案例为主线，由浅入深，既适合新手也适合有一定爬虫经验的开发人员学习和借鉴。课程中使用了http请求库requests和selenium自动化测试框架，也使用了正则、lxml等解析库。网站数据爬取过程中遇到反爬措施不能爬取到需要的数据，这是大家经常遇到的问题。那么本课程主要讲解网站的常用反爬措施以及应对策略，解决数据爬取的痛点。
Python-友好爬取了人人影视资源列表按影片等级倒序排序
08-12
在Python编程领域，Web爬虫是一项重要的技能，用于自动化地从互联网上抓取大量数据。人人影视（原名Zimuzu、YYeTs）是一个知名的字幕分享...对于想要学习和提升Python爬虫技能的开发者来说，这是一个很好的实践案例。
两万字博文教你python爬虫requests库详解篇.pdf
05-23
- **实战项目二：**利用 Session 维持人人网登录状态，进行登录并执行特定操作。 实战项目能够帮助理解如何在实际场景中运用 Requests 库，包括处理登录状态、分页爬取等复杂情况。 ### 小结 掌握 Requests 库是 ...
python小爬虫集锦（百度斗鱼京东人人网内涵段子喜马拉雅果壳网猫眼电影百度贴吧豆瓣等）.zip
最新发布
03-05
Python编程语言在IT行业中因其简洁明了的语法和强大...学习这些示例，有助于提升Python爬虫技能，更好地理解和应用到实际项目中。同时，也要注意遵循网站的robots.txt文件和相关法律法规，合法合规地进行网络爬虫活动。
人人网好友相册采集器
03-26
通过模拟登录人人网，获取登录状态，然后遍历用户好友列表，逐个访问每个好友的相册页面，提取图片链接。 2. **图片下载与处理**：采集器需要能够下载图片，并可能涉及图片的重命名、压缩、格式转换等功能。这通常...
抓取网上信息，抓取人人网院校
03-27
标题中的“抓取网上信息，抓取人人网院校”指的是网络爬虫技术在特定场景的应用，即通过编程方式从人人网这样一个社交平台获取与院校相关的信息。网络爬虫是自动化地从互联网上提取大量数据的一种程序，它通常由网页...
python爬虫 模拟登录人人网过程解析
12-31
requests 提供了一个叫做session类，来实现客户端和服务端的会话保持 使用方法 1.实例化一个session对象 2.让session发送get或者post请求 session = requests.session() session.get(url,headers) 下面就用人人网来实战一下 # coding=utf-8 import requests session = requests.session() # 登录的表单url post_url = http://www.renren.com/PLogin.do post_data = {email: your_
人人网python爬虫
09-13
获得人人网网站上的好友列表的爬虫代码，可以分析人人网上每个人的好友信息，以便画社交网络图来进一步分析
人人网爬虫文件
06-22
人人网资源爬取，Http协议是一个无状态的面向连接的协议，Http协议是基于tcp/ip协议层之上的协议，当客户端与服务器建立连接之后，它们之间的TCP连接一直都是保持的，至于保持的时间是多久，是通过服务器端来设置的，当客户端再一次访问该服务器时，会继续使用上一次建立的连接，但是，由于Http协议是无状态的，WEB服务器并不知道这两个请求是否同一个客户端，这两次请求之间是独立的。 为了解决这个问题， Web程序引入了Cookie机制来维护状态.cookie可以记录用户的登录状态，通常web服务器会在用户登录成功后下发一个签名来标记session的有效性，这样免去了用户多次认证和登录网站。记录用户的访问状态。 　　比如说有些网站需要登录后才能访问某个页面，在登录之前，你想抓取某个页面内容是不允许的，那么我们可以利用Urllib2库保存我们登录的Cookie，然后再抓取其他页面就达到目的了
人人网普通登录源码爬取
chengjintao1121的博客
08-17 1008
**人人网普通登录源码爬取** import requests,json from urllib import request def renren(url,headers)： res=request.Request(url,headers=headers) response=request.urlopen(res) html_bytes=re...
Python笔记：网络爬虫之模拟人人网登录及获取数据的过程详解
Wang的专栏
11-04 1311
概述 使用urllib模拟人人网的登录的过程 使用urllib模拟人人网登录后获取个人数据的过程 使用urllib模拟登录及获取个人数据的过程 使用requests模拟登录及获取个人数据的过程 重点了解其中用于状态维持和会话跟踪的技术 此文档具有时效性, 只针对当前人人网有效；在代码中模拟的数据并非真实数据, 如要正确运行, 请替换成自己的数据 此文档的目的：仅提供积累知识、运用相关库解决问题的...
爬虫人人网站
Doraemon_meow_meow的博客
08-15 299
from Day1.tuozhan_all import post, get import json from urllib import request, parse # 保存cookie from http import cookiejar # 通过对象保存cookie cookie_object = cookiejar.CookieJar() # handler 对应着一个操作 handl...
python爬虫 --爬取药网的药品信息-写入excel表中
D_wart的博客
12-21 2659
import requests from lxml import etree def get_text(text): if text: return text[0] return '' def parse_page(html_str): tree = etree.HTML(html_str) li_list = tree.xpath('//ul[@...
python爬虫--房产数据爬取并保存本地
06-08
好的，我可以为您介绍一下如何使用 Python 爬虫来爬取房产数据并保存到本地。 首先，您需要选择一个合适的网站来进行爬取。例如，可以选择链家网、安居客等房产网站。然后，您需要分析该网站的页面结构和数据请求...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值