新工具上线!只需2步助你轻松学Python爬虫!

文章介绍了curl2pyreqs这款工具,用于将curl请求转换为Python-requests代码,帮助Python初学者快速入门爬虫。文章详细讲解了系统要求、安装步骤、使用方法以及Termux的特别处理。
摘要由CSDN通过智能技术生成


你还在为Python爬虫入门发愁么?

你还在构建requests请求发愁么?

它来了!它就是curl2pyreqs库。

curl2pyreqs是一款基于 Python 实现的 curl 转换工具,可以直接将 curl 请求转换为使用 python-requests 的 Python 脚本。

Github:https://github.com/knightz1224/curl2pyreqs/

只需2步自动生成requests文件:

1. 复制

2. 运行


接下来让我们体验一下~


一、系统要求

版本:Python 3.8+

依赖:pyperclip >= 1.8.0

Linux下需安装X剪贴板组件,如xclip或xsel。

二、安装方法(推荐使用清华源安装)

Windows 下,在命令行输入:

> pip install curl2pyreqs  

Mac OS 或 Linux 下,在终端输入:

$ pip3 install curl2pyreqs  


三、使用方法

1. 复制

在Chrome或Firefox浏览器中,按F12,打开开发者模式,复制curl请求;

2. 运行

运行curl2pyreqs,即可生成对应的requests代码,并且直接复制到了剪贴板中。

最后,粘贴到Python文件中即可修改代码。


四、Termux补丁

Termux 是一款支持 Linux 环境的 Android 终端模拟器APP。你无需对手机进行root或额外设置即可使用。Termux的环境配置请参见相关教程:《手把手教你在手机或平板上配置Python环境!》

由于pyperclip暂时不支持Termux的复制粘贴,所以张老师为大家做了一个补丁,这个补丁为pyperclip添加了Termux支持。具体安装方法如下:

安装Termux:API,下载地址:

https://f-droid.org/repo/com.termux.api_47.apk

安装termux-api依赖包

pkg install termux-api

下载补丁并安装:



git clone https://github.com/knightz1224/termux\_pyperclip\_patch  
cd termux\_pyperclip\_patch  
python setup.py


安装完成后,我们就可以使用curl2pyreqs了


五、其他使用方法

如无法调用剪贴板,可以通过将curl请求存入文本文件进行转换:

以UTF-8编码格式存入文本,如example.curl

运行curl2pyreqs -F example.curl,即可生成对应的example.py文件。

最后,查看example.py文件,里面已经是完整的代码了。


六、结语

其他使用方法请参见项目Github:

https://github.com/knightz1224/curl2pyreqs/

爱点赞的人,运气都不会太差********

---------------------------END---------------------------

题外话

当下这个大数据时代不掌握一门编程语言怎么跟的上脚本呢?当下最火的编程语言Python前景一片光明!如果你也想跟上时代提升自己那么请看一下.

在这里插入图片描述

感兴趣的小伙伴,赠送全套Python学习资料,包含面试题、简历资料等具体看下方。

一、Python所有方向的学习路线

Python所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

img
img

二、Python必备开发工具

工具都帮大家整理好了,安装就可直接上手!img

三、最新Python学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。

img

四、Python视频合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

img

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。

img

六、面试宝典

在这里插入图片描述

在这里插入图片描述

简历模板在这里插入图片描述
若有侵权,请联系删除
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值