- 博客(25)
- 问答 (1)
- 收藏
- 关注
原创 js逆向七麦网站
大数据时代的到来,人们对于数据的需求越来越大,但对于数据的获取不再像以前那么简单。各大网站都对数据进行了加密处理来保护数据的安全。但是上有政策,下有对策。今天带来逆向的第一个案例。Let's Go!按F12进行常规抓包,发现这是一个url参数加密,只要我们破解了该参数,就可以正常获取数据啦!一般查找加密位置有三种基本方法:关键字搜索Hook方法XHR断点当前前提是网站走的XHR(XMLHttpRequest)请求,今天我们采取XHR断点方式来找加密位置。
2023-02-23 19:55:20 1222 7
原创 解决scrapy框架命令执行(scrapy crawl xx)代码报错问题
解决scrapy命令执行代码(scrapy crawl xxx)运行报错问题
2023-07-17 18:52:35 808
原创 解决Pycharm中使用matplotlib绘制中required_interactive_framework报错问题
解决pycharm中使用matplotlib绘图中的required_interactive_framework属性的FigureCanvas报错问题
2023-05-27 13:22:57 1989 1
原创 解决django版本与simpleui不兼容问题
如果更新后仍然无法解决问题,你可以考虑降级 Django 版本,或者使用其他类似的 UI 库。SimpleUI 是一个独立的 UI 库,而 Django-simpleui 是基于 SimpleUI 的 Django 插件,可以方便地集成到 Django 项目中。解决这个问题的方法是将 SimpleUI 更新到最新版本,或者将使用的 Django 版本降级到 Django 3.0 或以下版本。如果你的 Django 版本是 4.0 或以上,而 SimpleUI 已经更新到最新版本,但仍出现无法导入。
2023-05-03 20:32:56 2628 1
原创 解决selenium.common.exceptions.ElementNotInteractableException: Message: element not interactable报错
解决selenium.common.exceptions.ElementNotInteractableException: Message: element not interactable报错
2023-04-22 17:00:59 5991 3
原创 HTTP详解
中,URL 的开头会有 http 或 https,这个就是访问资源需 要的协议类型,有时我们还会看到 ftp、sftp、smb 开头的 URL,那么这里的 ftp、sftp、smb 都是指 的协议类型。HTTP/2 的初稿使用 SPDY 作为其规范草案的工作基础。未来的还会有哪些HTTP协议,我们无法预知,但是可以想到的是,一定会有新的协议出现,因为技术前进的脚步是从来不会停止的。但是在爬虫中,爬虫只会请求url地址,对应的拿到url地址对应的响应(该响应的内容可以是html,css,js,图片等)
2023-04-18 15:13:51 251 1
原创 协程爬取小说
我们的目标是爬取千千小说网站上的小说章节内容(而且能够实现章节的顺序排放哦)然后保存到本地文件。在main方法中,我们首先获取小说目录页的内容,然后提取出所有章节的链接。接着,我们创建一个任务列表,将下载章节的任务添加到列表中。其中,url是我们要爬取的小说网址,headers则是请求头信息,让我们的爬虫更像一个正常的用户。这个类就是我们的爬虫主体,RIGHT属性用来记录成功下载的章节数量。最后,我们创建一个Novel对象,并运行main方法,启动我们的爬虫。到此,我们的爬虫教程就结束了。
2023-03-27 10:05:01 111
TA创建的收藏夹 TA关注的收藏夹
TA关注的人