chrome扩展抓取请求数据返回的内容

最新推荐文章于 2024-05-09 09:00:00 发布
最新推荐文章于 2024-05-09 09:00:00 发布
阅读量1.7w 收藏 38
点赞数 4
分类专栏： chrome 扩展开发
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sw_onload/article/details/115250322
版权
参考文档链接chrome.webRequest.onCompleted可以获得网络请求返回的header,但无法获取返回的内容，经过多方研究发现可以用chrome.devtools.network来获取，这丫的也搞了好久呢，一开始根本不知道怎么入手，还是看了这篇文章才有点头绪Chrome插件(扩展)开发全攻略（干货）这个开发者工具做出来需要在控制台才能看到，话说我也是找了很久，就是可以自定义的面板，跟vue,react那些的开发工具其实是一样的，不过由于只是讲如何抓取数据，这个页面就随便啦，长什么样子都
摘要由CSDN通过智能技术生成

参考文档链接
chrome.webRequest.onCompleted可以获得网络请求返回的header,但无法获取返回的内容，经过多方研究发现可以用chrome.devtools.network来获取，这丫的也搞了好久呢，一开始根本不知道怎么入手，还是看了这篇文章才有点头绪Chrome插件(扩展)开发全攻略（干货）
这个开发者工具做出来需要在控制台才能看到，话说我也是找了很久，就是可以自定义的面板，跟vue,react那些的开发工具其实是一样的，不过由于只是讲如何抓取数据，这个页面就随便啦，长什么样子都无所谓，像上面那篇链接的文章里说的只是要一个html文件来引入真正需要用到的js文件
哦，说下用的版本是2的，“manifest_version”: 2, 虽然说现在出了3
在这里插入图片描述
首先在配置文件中配置开发工具页面，必须是html文件，虽然它好像除了引入js文件外并没什起到什么用处
在这里插入图片描述
下图是完整是配置文件

最低0.47元/天 解锁文章
猛男找1
关注
  • 4
    点赞
  • 踩
  • 38
    收藏
    觉得还不错? 一键收藏
  • 16
    评论
专栏目录
chrome 插件 页面请求转发_收到响应后使用Chrome webRequest进行网址转发
weixin_39700394的博客
12-19 892
I am attempting to create a Chrome extension that utilizes Chrome's webRequest module to perform a redirect to a URL obtained from an initially accessed URL. For this I would like to utilize only Chro...
chrome 插件 页面请求转发_关于javascript：收到响应后，使用Chrome webRequest进行URL转发...
weixin_39613291的博客
12-19 990
我正在尝试创建一个Chrome扩展程序，该扩展程序利用Chrome的webRequest模块执行对从初始访问的URL获得的URL的重定向。为此，我只想利用Chrome的webRequest函数(例如onBeforeSendHeaders，onHeadersReceived)，而不是简单地使用获得的URL调用$ .ajax()。所需的功能是：用户在地址栏中输入URL发出请求并从HTTP响应中提取辅助...
chrome扩展插件获取ajax请求记录
04-06
chrome扩展插件获取ajax请求记录
getURL:Chrome Chrome扩展程序，可从单击的链接中提取URL参数
05-01
getURL 查询参数提取器 发行版本 Chrome网上应用店： 如何使用 执照 麻省理工学院许可。 有关详细信息，请参见
别出心裁的自动化网页数据采集：Chrome插件和mitmproxy
苟日新，日日新，又日新!!!
05-09 1043
使用自动刷新网页的Chrome插件与 mitmproxy相结合，是一个令人耳目一新的数据采集方式！
chrome插件webRequest拦截请求并获取post请求体requestBody数据raw内容，解决中文乱码问题
03-06 2374
中文乱码主要出现是因为 String.fromCharCode.apply 引起的。可以看到requestBody内容是raw格式数据： 里面是bytes字节类型。拦截请求代码放在background.js里面：（想要看到原始内容，需要解析raw数据：（下面代码解析中文乱码。
Chrome Extension 的 webRequest模块的解读
justdoshare的博客
12-05 1766
1，为了使用webRequest，首先需要在配置文件manifest.json中加入类似的内容： { “name": "My extension", ... "permissions": { "webRequest", "*://*.google.com" }, .... } 这里的意思是说，只允许这个extension对*.google.com的域名使用webRequest，如果这个字符串替换为其它格式的，比如*://*，就可以支持所有
Chrome 插件开发覆写xhr请求
leaon的博客
06-26 2130
最开始的时候想用chrome.webRequest.onCompleted.addListener去实现拦截，注入后发现最多只能取到header信息，回调函数里面的对象并不携带responsetext的信息，如果要取到返回值还需要改写xhr请求。这几天搞chrome谷歌浏览器插件遇到个问题 我想拦截网页请求，并把数据传递到下一个子窗口。重新整理思路，改写xhr ，首先注入jquery 文件，记得在manifest.json 配置一下。上述代码并不能实现取到responsetext的功能。
TorrentFinder:一个 chrome 扩展，用于在 torrent 站点中快速查找选定的文本并将结果返回到当前页面
07-03
洪流查找器 一个 chrome 扩展，可缩短您对种子的搜索 工作进展通知： 该项目处于开发的早期阶段（尽管它已经是一个工作原型），因此在检查时代码可能处于不太理想的状态。 指示 安装 crx（最新版本可从下载） 浏览任何网站 (http/s) 右键单击您的目标搜索查询 搜索种子链接 贡献 如果您想为 TorrentFinder 做出贡献，您可以打开问题并提交拉取请求！ 图标 感谢。
WebRequest,WebResponse发送请求并接受返回结果
Wayne_C的Blog
02-23 2545
有时候，我们需要在我们的项目中对某些地址发送一个请求，并且要接受返回的结果来做逻辑处理，本文以我在做一个物流功能使用快递100提供的API接口来说说是如何实现的。 在做物流查询的时候，快递100官方有提供这样的一个请求地址并且说明参数。（详情请参考快递100官方网站） 如：http://api.kuaidi100.com/api?id=【apiKey】&com=【快递公司代号】&nu=【运
谷歌浏览器插件 chrome.webRequest 技术深度解析
王森的博客
04-19 8081
使用 chrome.webRequest API 观察和分析流量并拦截、阻止或修改正在进行的请求，针对于认证和代理认证做了深入讲解
Rockstat-Chrome-Extension:Chrome扩展程序提供了直观的方式来跟踪t4k请求，而无需打开chrome控制台
05-10
【Rockstat Chrome扩展程序】是针对开发者的一款高效工具，它为跟踪t4k请求提供了一种直观且便捷的方式。在日常的Web开发过程中，尤其是在进行性能优化或问题排查时，通常需要频繁地打开Chrome浏览器的开发者工具来...
chrome资源嗅探扩展
最新发布
05-14
1. **Chrome扩展开发**： Chrome资源嗅探扩展是基于Chrome的扩展开发框架构建的，利用了Chrome提供的API来实现对浏览器行为的增强。开发者通过编写JavaScript和HTML，结合manifest.json文件定义扩展的功能、权限和...
定时采集数据并发送到指定接口的Chrome扩展机器人.zip
01-04
标题 "定时采集数据并发送到指定接口的Chrome扩展机器人.zip" 暗示了这是一个用于自动化数据采集的Chrome浏览器扩展程序。它具有定时任务功能，能够定期从网页中抓取数据，并将这些数据发送到预设的API接口。这样的...
getscreen-plugin:用于抓取屏幕流的 chrome 扩展
07-13
《getscreen-plugin：Chrome扩展实现屏幕流捕获的探索》 在互联网技术日新月异的今天，开发者们经常需要处理各种数据传输和交互问题。其中，屏幕共享和屏幕流捕获是远程协作、在线教育、游戏直播等领域的重要功能。...
Chrome扩展插件开发Manifest V3案例:把某招聘网站上的招聘信息导出Excel
05-27
总结来说，这个案例涵盖了Chrome扩展插件开发的多个核心知识点，包括Manifest V3的新特性、Service Worker的使用、网页数据抓取、数据处理以及文件导出。通过实践这个案例，开发者不仅可以掌握基本的插件开发技能，...
chrome扩展(插件)开发（五）监听网页的ajax请求
热门推荐
joy1793的博客
12-08 1万+
1 chrome 自有api 2 ; (function () { function ajaxEventTrigger(event) { var ajaxEvent = new CustomEvent(event, { detail: this }); window.dispatchEvent(ajaxEvent); } var oldXHR = window.XMLHttpRequest; function newXHR(
谷歌扩展开发v3版本，自动请求接口
酱子
05-19 1806
pc端项目要是1个小时不动不请求，token会过期，写个插件每隔一段时间自动取请求一个接口，让token不过期。
Chrome插件 WEB 网页数据采集和爬虫程序_chrome插件爬虫开发
weixin_58085973的博客
04-17 2167
常用应对方式是更换终端IP，比如用代理。最近遍览了各种网络安全类的文章，内容参差不齐，其中不伐有大佬倾力教学，也有各种不良机构浑水摸鱼，在收到几条私信，发现大家对一套完整的系统的网络安全从学习路线到学习资料，甚至是工具有着不小的需求。不过，无论是何种方式，都要随着目标网站的更新迭代，做相应的适配，否则会出现程序无效的情况，而这是一个耗时耗力的过程🙂。验证码就是用来拦截爬虫程序的，常见有字符图片验证码（数字+字母+中文，再来点干扰线跟字符变形，增加识别成本），也会有逻辑交互类，以及手机/邮箱接收验证码。
python爬虫抓取网易云
07-29
你可以使用Python编写爬虫来抓取网易云音乐的数据。以下是一个简单的示例代码，可以帮助你开始： ```python import requests from bs4 import BeautifulSoup # 设置请求头 headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/88.0.4324.190 Safari/537.36', 'Referer': 'https://music.163.com/', 'Host': 'music.163.com' } # 定义要抓取的歌单ID playlist_id = '歌单ID' # 构造URL url = 'https://music.163.com/playlist?id=' + playlist_id # 发送请求 response = requests.get(url, headers=headers) # 解析响应 soup = BeautifulSoup(response.text, 'html.parser') # 提取歌曲信息 songs = soup.find_all('span', class_='txt') # 打印歌曲信息 for song in songs: print(song.text.strip()) ``` 请注意，上述代码中的`playlist_id`需要替换为你要抓取的具体歌单ID。此外，还需要安装`requests`和`beautifulsoup4`库，你可以使用以下命令进行安装： ``` pip install requests pip install beautifulsoup4 ``` 这只是一个简单的示例，你可以根据需要进行修改和扩展。希望对你有帮助！如果你有其他问题，请继续提问。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 16
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值