Python零基础入门二十之爬虫之抓取有道词典

最新推荐文章于 2020-12-08 13:45:36 发布
VIP文章 最新推荐文章于 2020-12-08 13:45:36 发布
阅读量5.8k 收藏
点赞数 1
分类专栏： Python 文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/bemorequiet/article/details/54616527
版权

这篇博客在上一篇的基础上，继续深入学习爬虫的技巧。上一篇博客中通过从网页上抓取一张简单的图片简单了解了urllib.request中的模块的用法，今天在学习一个有道词典的例子。

这个例子主要是实现我们在Python中实现有道词典的功能，还是通过抓取有道词典的翻译的核心代码来实现。

首先我们先打开有道词典的网页来踩踩点。

这里写图片描述
有了url之后还不行，我们这次不是抓取图片，而是要向网页中发送数据，所以要找到网页提交的表单。

继续往下看，便找到了我们的表单数据

这里写图片描述

这样之后，我们的踩点工才完成了，下面开始代码的编写。在编写代码之前，我们再说一下urlopen这个函数：

最低0.47元/天 解锁文章
耀相惜
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
python命令行有道词典（使用requests库查询）
08-27
从有道翻译网页上扒下来的词典查询接口，使用requests提交数据，并处理返回的查询结果（json格式），主要作为类似程序的demo，也可以是作为命令行词典来使用，代码很少，但基本具有代表性，可以作为类似程序的参考。基本使用方法，运行一下就明白了。另：使用了linux输出格式控制来调整输出的颜色，暂时不知道windows下效果，当然估计win下没人注意这种东西。
python有道-Python爬取有道词典
q6q6q的专栏
10-28 317
from urllib import request,parseimport hashlibimport randomimport timeimport json#定义md5加密函数def getMD5(value):aa = hashlib.md5()aa.update(bytes(value,encoding="utf-8"))sign = aa.hexdigest()re...
Python爬取有道词典，有道的反爬很难吗？也就这样啊！
pythonlaodi的博客
12-08 291
前言 大家好 ​ 最近python爬虫有点火啊，啥python爬取马保国视频……我也来凑个热闹，今天我们来试着做个翻译软件……不是不是，说错了，今天我们来试着提交翻译内容并爬取翻译结果 主要内容 PS：如有需要Python学习资料的小伙伴可以加点击下方链接自行获取 python免费学习资料以及群交流解答点击即可加入 材料 1.Python 3.8.4 2.电脑一台（应该不至于有”穷苦人家“连一台电脑都没有吧） 3.Google浏览器（其他的也行，但我是用的Google） 写程序前准备
python爬取有道词典
Spiderman_Feng的博客
12-05 3482
python爬取有道词典 文章目录python爬取有道词典前言大家好主要内容材料写程序前准备开始编写爬虫代码运行结果 前言 大家好 ​ 最近python爬虫有点火啊，啥python爬取马保国视频……我也来凑个热闹，今天我们来试着做个翻译软件……不是不是，说错了，今天我们来试着提交翻译内容并爬取翻译结果 主要内容 材料 1.Python 3.8.4 2.电脑一台（应该不至于有”穷苦人家“连一台电脑都没有吧） 3.Google浏览器（其他的也行，但我是用的Google） 写程序前准备 打开Google浏览器
[python] python抓取有道词典并格式化输出的程序
村雨其实没有雨
02-01 1273
费死劲了。。。。 终于做完了这个 但是还有瑕疵，有的地方不能完全输出清楚，格式有点问题。 说下思路吧，首先抓取有道词典网页版的html源代码，然后用BeautifulSoup去分析和格式化输出 分析和自学了了两天的html语言之后终于找到了需要那部分内容的tag，我喜欢科林斯词典，所以抓取了id=‘collinsResult’的数据 然后其中就遇到一个问题，  这个加粗的格式把词
零基础写python爬虫之爬虫的定义及URL构成
12-23
一、网络爬虫的定义 网络爬虫，即Web Spider，是一个很形象的名字。 把互联网比喻成一个蜘蛛网，那么Spider就是在网上爬来爬去的蜘蛛。 网络蜘蛛是通过网页的链接地址来寻找网页的。 从网站某一个页面（通常是首页...
零基础写python爬虫之抓取糗事百科代码分享
12-23
用Python写的糗事百科的网络爬虫。 使用方法： 新建一个Bug.py文件，然后将代码复制到里面后，双击运行。 程序功能： 在命令提示行中浏览糗事百科。 原理解释： 首先，先浏览一下糗事百科的主页：...
python爬虫零基础入门.mp4
05-11
python爬虫零基础入门，带你步入Python爬虫的大门。简单的爬虫小案例，让你清晰的了解爬虫的过程、思路、步骤
python零基础入门资料 python基础
最新发布
01-08
python零基础入门资料 python基础
零基础写python爬虫之使用urllib2组件抓取网页内容
12-25
版本号：Python2.7.5，Python3改动较大，各位另寻教程。 所谓网页抓取，就是把URL地址中指定的网络资源从网络流中读取出来，保存到本地。  类似于使用程序模拟IE浏览器的功能，把URL作为HTTP请求的内容发送到...
python读音有道-Python版有道翻译
q6q6q的专栏
10-28 171
做过爬虫的朋友应该很通俗易懂，话不多说 亮代码吧。需要用到的模块：UrllibtimehashlibrandomjsonCode：#encoding:utf-8#__Author__ = Search__#_PlugName_ = YouDaoDictimport urllib.requestimport urllib.parseimport timeimport randomimport has...
有道词典爬虫
Joovo的博客
12-11 1789
文章目录有道词典爬虫代码实现 有道词典爬虫 构造url对单个单词的释义及例句进行爬虫。 查询界面不需要登陆操作，用 GET 方法获取源代码。 对于上图所示的单词查询界面，简单地对单词’scene’ 进行替换即可。 很久没有用xpath解析，有点生疏。 从审查元素可以看到每个例句都被<div class='ol'>包含 ，遍历他的子节点即可。 代码实现 import requests...
爬虫——爬取有道词典
weixin_39338645的博客
10-12 2637
1打开有道词典-有道翻译-右键审查元素-Network-Headers-找到General下面的URL,写入代码 import urllib.request import urllib.parse url='http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule' data={} data['i']='...
手把手教学--Python爬取有道词典
weixin_43844937的博客
03-10 2414
本篇文章做法参考了https://www.bilibili.com/video/av4050443/?p=55这个视频中的方法，并在此基础上加以修改，最终实现的结果如下： 在爬取有道词典之前，我们应该先打开有道词典的网址:http://fanyi.youdao.com/ ， 然后 右键检查—>network—>translate 一项。 然后在有道翻译界面输入要翻译的内容，点击翻译...
用python写一个命令行有道翻译
Pegasus (http://ningning.today)
12-02 2333
平常都是用终端敲， 有时候不会的词语也懒得打开词典了，干脆搞了个简单的查词命令.思路也很简单，直接调用有道的api，解析下返回的json就ok了。只用到了python原生的库，支持python2和python3.#!/usr/bin/env python # -*- coding:utf-8 -*-# API key：273646050 # keyfrom：11pegasus11import jso
Python——网络爬虫抓取有道词典
l769440473的博客
04-30 2430
今天我们来谈谈python的网络爬虫抓取有道词典 抓取有道词典之前，我们需要对有道词典的网页进行分析，在这里我们需要得到有道网页的请求网址，这里的状态码显示200即为表示正常访问。 url = 'http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule' 在请求头的地方我们可以看到'User...
Python 有道词典爬虫
北宸不错呦的博客
07-16 301
import urllib.request import urllib.parse import json import sys while 1: content = input('请输入要翻译的内容：') if content == ' ': print('程序结束') sys.exit() url = 'http://fanyi.yo...
python有道翻译
harhy的专栏
01-29 623
肆虐中国的2019肺炎病毒到处都是只能呆在家中，无聊浏览网页，发现python挺流行的，看了几页，写个处女python程序：“有道翻译”。 这个程序挺有意思的，不过还有很多问题，很多疑问，例如，我在有道翻译网页查到的 url 是这个： “Request URL:http://fanyi.youdao.com/translate_o?smartresult=dict&smartresul...
python零基础入门
08-18
如果你是零基础入门Python，我建议你按照以下学习路线进行学习。首先，你可以通过参考中提供的详细教程来系统学习Python的基础知识。该教程从Python基础、文件操作、函数等方面进行了讲解。你可以下载并安装Pycharm...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值