猫哥教你写爬虫 037--爬虫-宝宝要听歌

最新推荐文章于 2024-09-21 22:46:33 发布
最新推荐文章于 2024-09-21 22:46:33 发布
阅读量243 收藏
点赞数
文章标签： 爬虫 json javascript ViewUI
原文链接：https://juejin.im/post/5cfc4adc5188250640006a23
版权

戴上耳机, 这个世界与我无关...

让我们用音乐洗涤心灵吧...
我们从哪个网站爬取资源呢?

专治各种不服...
打开酷狗官网, 可以看到搜索框，我们要爬取的数据就是搜索歌曲后，
酷狗后台返回的歌曲列表以及每首歌的歌曲信息(歌词、作者、url等)

敲F12键进入开发者模式，选择Network - All (这里就是酷狗前后台交互的所有请求列表）

这么多请求, 我应该选哪个? 一个一个试?

然后查看返回的json数据
{
    "status": 1,
    "error_code": 0,
    "data": {
        "page": 1,
        "tab": "全部",
        "lists": [
            {
                "SongName": "雨一直下",
                "OwnerCount": 61910,
                "MvType": 2,
                "TopicRemark": "",
                "SQFailProcess": 4,
                "Source": "",
                "Bitrate": 128,
                "HQExtName": "mp3",
                "SQFileSize": 37489904,
                "ResFileSize": 0,
                "AudioCdn": 100,
                "MvTrac": 3,
                "SQDuration": 293,
                "ExtName": "mp3",
                "Auxiliary": "",
                "SongLabel": "",
                "Scid": 339102,
                "OriSongName": "雨一直下",
                "FailProcess": 4,
                "SQBitrate": 1022,
                "HQBitrate": 320,
                "Audioid": 339102,
                "HiFiQuality": 2,
                "Grp": [
                    {
                        "SongName": "雨一直下",
                        "OwnerCount": 31,
                        "MvType": 2,
                        "TopicRemark": "",
                        "SQFailProcess": 4,
                        "Source": "",
                        "Bitrate": 128,
                        "HQExtName": "mp3",
                        "SQFileSize": 37489904,
                        "ResFileSize": 0,
                        "AudioCdn": 100,
                        "MvTrac": 3,
                        "SQDuration": 293,
                        "ExtName": "mp3",
                        "Auxiliary": "",
                        "SongLabel": "",
                        "Scid": 339102,
                        "OriSongName": "雨一直下",
                        "FailProcess": 4,
                        "SQBitrate": 1022,
                        "HQBitrate": 320,
                        "Audioid": 339102,
                        "HiFiQuality": 2,
                        "OriOtherName": "",
                        "AlbumPrivilege": 8,
                        "TopicUrl": "",
                        "SuperFileHash": "",
                        "ASQPrivilege": 10,
                        "M4aSize": 1225472,
                        "IsOriginal": 0,
                        "Privilege": 8,
                        "ResBitrate": 0,
                        "FileHash": "8AA6B442D0541FE6645611A108E6FD32",
                        "SQPayType": 3,
                        "HQPrice": 200,
                        "Type": "audio",
                        "trans_param": {
                            "cid": 5111971,
                            "pay_block_tpl": 1,
                            "musicpack_advance": 0,
                            "display_rate": 0,
                            "display": 0
                        },
                        "SourceID": 0,
                        "A320Privilege": 10,
                        "FileName": "张宇 - 雨一直下",
                        "AlbumID": "973971",
                        "ID": "32163792",
                        "SuperFileSize": 0,
                        "QualityLevel": 3,
                        "SQFileHash": "7F0933165786A9BC9858A8B56EED0D43",
                        "AlbumName": "男人的好 新歌+精选",
                        "HQPrivilege": 10,
                        "SuperBitrate": 0,
                        "SuperDuration": 0,
                        "MixSongID": "32163792",
                        "ResFileHash": "",
                        "PublishAge": 255,
                        "SuperExtName": "",
                        "HQFileHash": "32CB70DDFF57B235550C75B5FC46D030",
                        "HQPkgPrice": 1,
                        "Duration": 293,
                        "FileSize": 4694905,
                        "OtherName": "",
                        "SQPkgPrice": 1,
                        "PkgPrice": 1,
                        "HQFileSize": 11735431,
                        "HQFailProcess": 4,
                        "OldCpy": 1,
                        "SQPrivilege": 10,
                        "SQPrice": 200,
                        "ResDuration": 0,
                        "SingerId": [
                            3537
                        ],
                        "Price": 200,
                        "HQPayType": 3,
                        "SingerName": "张宇",
                        "Publish": 1,
                        "MvHash": "E8BD1926CF6298D452E16F8904CB795A",
                        "SQExtName": "flac",
                        "HQDuration": 293,
                        "PayType": 3,
                        "HasAlbum": 1,
                        "mvTotal": 0,
                        "Accompany": 1
                    },
                    {
                        "SongName": "雨一直下",
                        "OwnerCount": 12,
                        "MvType": 2,
                        "TopicRemark": "",
                        "SQFailProcess": 4,
                        "Source": "",
                        "Bitrate": 128,
                        "HQExtName": "mp3",
                        "SQFileSize": 37489904,
                        "ResFileSize": 0,
                        "AudioCdn": 100,
                        "MvTrac": 3,
                        "SQDuration": 293,
                        "ExtName": "mp3",
                        "Auxiliary": "",
                        "SongLabel": "",
                        "Scid": 339102,
                        "OriSongName": "雨一直下",
                        "FailProcess": 4,
                        "SQBitrate": 1022,
                        "HQBitrate": 320,
                        "Audioid": 339102,
                        "HiFiQuality": 2,
                        "OriOtherName": "",
                        "AlbumPrivilege": 8,
                        "TopicUrl": "",
                        "SuperFileHash": "",
                        "ASQPrivilege": 10,
                        "M4aSize": 1225472,
                        "IsOriginal": 0,
                        "Privilege": 8,
                        "ResBitrate": 0,
                        "FileHash": "8AA6B442D0541FE6645611A108E6FD32",
                        "SQPayType": 3,
                        "HQPrice": 200,
                        "Type": "audio",
                        "trans_param": {
                            "cid": 31864779,
                            "pay_block_tpl": 1,
                            "musicpack_advance": 0,
                            "display_rate": 0,
                            "display": 0
                        },
                        "SourceID": 0,
                        "A320Privilege": 10,
                        "FileName": "张宇 - 雨一直下",
                        "AlbumID": "2400135",
                        "ID": "62076604",
                        "SuperFileSize": 0,
                        "QualityLevel": 3,
                        "SQFileHash": "7F0933165786A9BC9858A8B56EED0D43",
                        "AlbumName": "重拾男人心",
                        "HQPrivilege": 10,
                        "SuperBitrate": 0,
                        "SuperDuration": 0,
                        "MixSongID": "62076604",
                        "ResFileHash": "",
                        "PublishAge": 255,
                        "SuperExtName": "",
                        "HQFileHash": "32CB70DDFF57B235550C75B5FC46D030",
                        "HQPkgPrice": 1,
                        "Duration": 293,
                        "FileSize": 4694905,
                        "OtherName": "",
                        "SQPkgPrice": 1,
                        "PkgPrice": 1,
                        "HQFileSize": 11735431,
                        "HQFailProcess": 4,
                        "OldCpy": 1,
                        "SQPrivilege": 10,
                        "SQPrice": 200,
                        "ResDuration": 0,
                        "SingerId": [
                            3537
                        ],
                        "Price": 200,
                        "HQPayType": 3,
                        "SingerName": "张宇",
                        "Publish": 1,
                        "MvHash": "E8BD1926CF6298D452E16F8904CB795A",
                        "SQExtName": "flac",
                        "HQDuration": 293,
                        "PayType": 3,
                        "HasAlbum": 1,
                        "mvTotal": 0,
                        "Accompany": 1
                    }
                ],
                "OriOtherName": "",
                "AlbumPrivilege": 8,
                "TopicUrl": "",
                "SuperFileHash": "",
                "ASQPrivilege": 10,
                "M4aSize": 1225472,
                "IsOriginal": 1,
                "Privilege": 8,
                "ResBitrate": 0,
                "FileHash": "8AA6B442D0541FE6645611A108E6FD32",
                "SQPayType": 3,
                "HQPrice": 200,
                "trans_param": {
                    "cid": 2456823,
                    "pay_block_tpl": 1,
                    "musicpack_advance": 0,
                    "display_rate": 0,
                    "display": 0
                },
                "Type": "audio",
                "FoldType": 0,
                "SourceID": 0,
                "A320Privilege": 10,
                "FileName": "张宇 - 雨一直下",
                "AlbumID": "982663",
                "ID": "32243475",
                "SuperFileSize": 0,
                "QualityLevel": 3,
                "SQFileHash": "7F0933165786A9BC9858A8B56EED0D43",
                "AlbumName": "雨一直下",
                "HQPrivilege": 10,
                "SuperBitrate": 0,
                "SuperDuration": 0,
                "MixSongID": "32243475",
                "ResFileHash": "",
                "PublishAge": 255,
                "SuperExtName": "",
                "HQFileHash": "32CB70DDFF57B235550C75B5FC46D030",
                "HQPkgPrice": 1,
                "Duration": 293,
                "FileSize": 4694905,
                "OtherName": "",
                "SQPkgPrice": 1,
                "PkgPrice": 1,
                "HQFileSize": 11735431,
                "HQFailProcess": 4,
                "OldCpy": 1,
                "SQPrivilege": 10,
                "SQPrice": 200,
                "ResDuration": 0,
                "SingerId": [
                    3537
                ],
                "Price": 200,
                "HQPayType": 3,
                "SingerName": "张宇",
                "Publish": 1,
                "MvHash": "E8BD1926CF6298D452E16F8904CB795A",
                "SQExtName": "flac",
                "HQDuration": 293,
                "PayType": 3,
                "HasAlbum": 1,
                "mvTotal": 0,
                "Accompany": 1
            }
        ],
        "chinesecount": 4,
        "searchfull": 1,
        "correctiontype": 0,
        "subjecttype": 0,
        "aggregation": [
            {
                "key": "DJ",
                "count": 0
            },
            {
                "key": "现场",
                "count": 0
            },
            {
                "key": "广场舞",
                "count": 0
            },
            {
                "key": "伴奏",
                "count": 0
            },
            {
                "key": "铃声",
                "count": 0
            }
        ],
        "allowerr": 0,
        "correctionsubject": "",
        "correctionforce": 0,
        "total": 36,
        "istagresult": 0,
        "istag": 0,
        "correctiontip": "",
        "pagesize": 20
    }
}
复制代码
requests的json()方法, 可以把json字符串, 转成python可以识别的dict或者list

这些数据使我们通过访问一下链接获得的
https://songsearch.kugou.com/song_search_v2?callback=jQuery112409264783558861354_1559273651647&keyword=%E9%9B%A8%E4%B8%80%E7%9B%B4%E4%B8%8B&page=1&pagesize=30&userid=-1&clientver=&platform=WebFilter&tag=em&filter=2&iscorrection=1&privilege_filter=0&_=1559273651658
复制代码

这也太长了, 有些参数是不是没有必要啊?
我们通过postman筛一下...
postman, 接口测试工具, 最好的接口测试工具, 不怕违反广告法...

安装之后打开, 粘贴我们之前的url

然后点击音乐详情页

我们使用hash值8AA6B442D0541FE6645611A108E6FD32来搜索请求...

我们找到了请求数据的url
https://wwwapi.kugou.com/yy/index.php?r=play/getdata&callback=jQuery19101729051683512821_1559276678103&hash=8AA6B442D0541FE6645611A108E6FD32&album_id=982663&dfid=3d7kV00OqOe70A00N74FV8Ue&mid=15b47ea8a82b0a8111b91cccb1c52055&platid=4&_=1559276678104
复制代码
参数依旧很多, 我们使用postman过滤一下参数...

我们找到了想要的参数, play_url

mid是从cookie中获得的, 变化的频率不高

整理一下思路:

完整源码

import requests
res = ''
def get_music_list(music_name):
    music_list = []
    print('歌曲[{}]的列表如下, 请选择序号:'.format(music_name))
    res = requests.get('https://songsearch.kugou.com/song_search_v2?keyword='+music_name).json()['data']['lists']
    for i,music in enumerate(res):
        print('{} -- {}'.format(i+1,music['FileName']))
        music_list.append({'name':music['FileName'],'hash':music['FileHash'],'aid':music['AlbumID']})
    return music_list
def get_play_url(music_hash,music_aid):
    '''
    获取歌曲的url
    '''
    aid = ''
    if music_aid:
        aid = '&album_id='+music_aid
    url = "https://wwwapi.kugou.com/yy/index.php?r=play/getdata&hash={}&mid=4d9f1c937f33674bb55a4fa9096e97e8".format(music_hash)+aid
    return requests.get(url).json()['data']['play_url']
def download_music(name,url):
    '''
    根据url下载歌曲
    '''
    print('[{}] 正在下载...'.format(name))
    with open('{}.mp3'.format(name),'wb') as file:
        file.write(requests.get(url).content)
    print('[{}] 已经下载完毕!'.format(name))
if __name__ == "__main__":
    music_name = input('请输入你想听的歌曲: ')
    music_list = get_music_list(music_name)
    music_index = input('请输入序号: ')
    music_play_url = get_play_url(music_list[int(music_index)-1]['hash'],music_list[int(music_index)-1]['aid'])
    music_name = music_list[int(music_index)-1]['name']
    download_music(music_name,music_play_url)
复制代码

have fun !!! o(*￣︶￣*)o

快速跳转:

猫哥教你写爬虫 000--开篇.md
猫哥教你写爬虫 001--print()函数和变量.md
猫哥教你写爬虫 002--作业-打印皮卡丘.md
猫哥教你写爬虫 003--数据类型转换.md
猫哥教你写爬虫 004--数据类型转换-小练习.md
猫哥教你写爬虫 005--数据类型转换-小作业.md
猫哥教你写爬虫 006--条件判断和条件嵌套.md
猫哥教你写爬虫 007--条件判断和条件嵌套-小作业.md
猫哥教你写爬虫 008--input()函数.md
猫哥教你写爬虫 009--input()函数-人工智能小爱同学.md
猫哥教你写爬虫 010--列表,字典,循环.md
猫哥教你写爬虫 011--列表,字典,循环-小作业.md
猫哥教你写爬虫 012--布尔值和四种语句.md
猫哥教你写爬虫 013--布尔值和四种语句-小作业.md
猫哥教你写爬虫 014--pk小游戏.md
猫哥教你写爬虫 015--pk小游戏(全新改版).md
猫哥教你写爬虫 016--函数.md
猫哥教你写爬虫 017--函数-小作业.md
猫哥教你写爬虫 018--debug.md
猫哥教你写爬虫 019--debug-作业.md
猫哥教你写爬虫 020--类与对象(上).md
猫哥教你写爬虫 021--类与对象(上)-作业.md
猫哥教你写爬虫 022--类与对象(下).md
猫哥教你写爬虫 023--类与对象(下)-作业.md
猫哥教你写爬虫 024--编码&&解码.md
猫哥教你写爬虫 025--编码&&解码-小作业.md
猫哥教你写爬虫 026--模块.md
猫哥教你写爬虫 027--模块介绍.md
猫哥教你写爬虫 028--模块介绍-小作业-广告牌.md
猫哥教你写爬虫 029--爬虫初探-requests.md
猫哥教你写爬虫 030--爬虫初探-requests-作业.md
猫哥教你写爬虫 031--爬虫基础-html.md
猫哥教你写爬虫 032--爬虫初体验-BeautifulSoup.md
猫哥教你写爬虫 033--爬虫初体验-BeautifulSoup-作业.md
猫哥教你写爬虫 034--爬虫-BeautifulSoup实践.md
猫哥教你写爬虫 035--爬虫-BeautifulSoup实践-作业-电影top250.md
猫哥教你写爬虫 036--爬虫-BeautifulSoup实践-作业-电影top250-作业解析.md
猫哥教你写爬虫 037--爬虫-宝宝要听歌.md
猫哥教你写爬虫 038--带参数请求.md
猫哥教你写爬虫 039--存储数据.md
猫哥教你写爬虫 040--存储数据-作业.md
猫哥教你写爬虫 041--模拟登录-cookie.md
猫哥教你写爬虫 042--session的用法.md
猫哥教你写爬虫 043--模拟浏览器.md
猫哥教你写爬虫 044--模拟浏览器-作业.md
猫哥教你写爬虫 045--协程.md
猫哥教你写爬虫 046--协程-实践-吃什么不会胖.md
猫哥教你写爬虫 047--scrapy框架.md
猫哥教你写爬虫 048--爬虫和反爬虫.md
猫哥教你写爬虫 049--完结撒花.md

转载于:https://juejin.im/post/5cfc4adc5188250640006a23

weixin_34384681
关注
html5酷狗音乐网页代码,酷狗音乐
weixin_42364040的博客
06-04 3408
ECAT翼少年 - 关键任务{"pay_type_320":3,"m4afilesize":0,"price_sq":200,"first":1,"filesize":3265721,"bitrate":128,"trans_param":{"cid":152574646,"cpy_attr0":0,"pay_block_tpl":1,"musicpack_advance":0,"display_...
jq ajax请求失败、返回code！=0 统一处理方法
kinding的博客
06-01 1万+
请求失败处理function requesFail(xhr){ var status = xhr.status; if (status) { showNotify("error", "网络错误", "发生网络错误，错误码为：" + xhr.status); } else { showNotify("error", "网络错误", "未知网络错误, 请确保设备处在联网状态&a
回调函数callback()的学习
weixin_46037781的博客
08-05 876
文章目录一、什么事回调函数？二、异步回调2.1、javascript中内置异步处理模式Promise三、`callback && callback(data)`什么意思 一、什么事回调函数？ 官方是这样写的： 被作为实参传入另一函数，并在该外部函数内被调用，用以来完成某些任务的函数，称为回调函数. 官方示例 function greeting(name) { alert('Hello ' + name); } function processUserInput(callback)
音乐API调用以及分析（以酷狗音乐为例）
颤动的小胖纸
11-22 8507
音乐排行榜列表： 接口地址： http://m.kugou.com/rank/list&json=true 请求方式：Get 返回数据：（这里本编使用只截取了5条数据） { "JS_CSS_DATE": 20130320, "kg_domain": "http://m.kugou.com", "...
酷狗接口api记录
侠亦狐的博客
04-25 3677
1、歌名、歌手搜索接口： http://songsearch.kugou.com/song_search_v2?keyword=歌曲名称&page=1&pagesize=1&userid=-1&clientver=&platform=WebFilter&tag=em&filter=2&iscorrection=1&priv...
猫哥教你写爬虫 031--爬虫基础-html
weixin_34367845的博客
06-09 215
回顾 浏览器原理 爬虫工作原理 可以requests.get() 来获取网上的数据 HTML回顾 HTML的学习依序分为三个层次，应该是读懂、修改、编写 只有读懂了HTML，才能看得懂网页结构，才有可能运用Python的其他模块去解析数据和提取数据 什么是html HTML（Hyper Text Markup Language）是用来描述网页的一种语言，也叫超文本标记语言 HT...
猫哥教你写爬虫 027--模块介绍
weixin_34362875的博客
06-09 118
time模块 import time # 时间对象转美式时间字符串 print(time.asctime()) # Wed May 29 09:25:07 2019 print(time.asctime((2019, 5, 4, 12, 8, 23,0,0,0))) # Mon May 4 12:08:23 2019 # 时间戳转美式字符串 print(time.ctime()) # Wed...
猫哥教你写爬虫 000--开篇
weixin_34220834的博客
05-18 689
写在前面 快速跳转: 猫哥教你写爬虫 000--开篇.md 猫哥教你写爬虫 001--print()函数和变量.md 猫哥教你写爬虫 002--作业-打印皮卡丘.md 猫哥教你写爬虫 003--数据类型转换.md 猫哥教你写爬虫 004--数据类型转换-小练习.md 猫哥教你写爬虫 005--数据类型转换-小作业.md 猫哥教你写爬虫 006--条件判断和条件嵌套.md 猫哥教你写爬虫 007-...
（68）-- 爬取糗百信息
Fredreck1919的博客
04-08 408
# 爬取糗百信息import threading from queue import Queue import requests from lxml import etree import time # 最大开启采集线程数（并发数） concurrent = 3 # 解析并发数 conparse = 3 class Crawl(threading.Thread): def __init...
python唐诗分析综合_Python利器之胎教《唐诗三百首》文本分析
weixin_39640417的博客
12-21 1535
事情是这样的，你们听我讲：有一天，孕妈妈在家庭群里对准爸爸说，在某猫上买本《唐诗三百首》吧，每天给宝宝读一首唐诗，作为胎教。有图有真相：作为好吃懒做的准爸爸，听到这个消息的瞬间，表情是这样的：准爸爸马上在网上找资料，不料看到了一个相关问题：为何胎教要听莫扎特，小朋友反而要听儿歌呢？2014年，美国权威的神经脑科学家约翰·梅迪纳撰文称，尚没有任何科学证据表明莫扎特音乐对促进胎儿大脑发育有任何作用。约...
2019最新版QQ音乐api调用(原创)
热门推荐
xiayiye5的博客
03-08 7万+
下载QQ音乐任意歌曲方法： 1.首先在QQ音乐任意播放页面 2.进入开发者模式按F12即可 3.选择network，按ctrl+R进行筛选多媒体文件 4.优先选择大小排序右击最大的多媒体文件出来快捷菜单，选择如下图的选项即可进入歌曲播放页面 5.如下链接就是播放个去链接：其中这是歌曲名称：C1L0001ApDs72gYqUk.m4a 名称里面的C1代表...
python爬虫初体验（一）
书呆子ITme
09-20 1947
爬虫（Web Scraping）是一种从网站自动提取数据的技术。简单来说，它就像是一个自动化的“浏览器”，能够按照设定的规则，访问网页并提取其中的关键信息。对于我们前端开发者来说，爬虫可以帮助我们抓取一些数据进行可视化或前端展示，非常实用。Python爬虫是一个非常强大的工具，能帮助我们自动化地从网页中提取数据。作为前端开发者，掌握一点爬虫技术，不仅能帮助我们快速获取前端展示所需的数据，还能为项目中的API数据源提供备选方案。不过，在使用爬虫时，一定要遵守目标网站的使用条款和隐私政策，避免滥用。
常见的反爬虫和应对方法
sheji888的专栏
09-16 1381
在网络爬虫技术日益成熟的今天，反爬虫技术也随之发展，以应对日益增长的爬虫访问。以下是对常见反爬虫技术及其应对方法的详细概述。
Python实现一个简单的爬虫程序（爬取图片）
月亮的技术博客
09-14 2046
进入spiders目录，创建baiduSpider.py，域名是要爬取的网站，写错了就无法爬取图片。首先查看请求的URL：在图片搜索框中输入”壁纸“，鼠标往下滚动，可以看到右侧”网络“中多次发送请求，响应中的”data“即是搜索出来的图片。百度搜索出来的图片是动态的，随着鼠标的动作自动发送下一页的请求，本文的目的是快速写出一个爬虫程序，实现爬取功能，所以在此忽略一些技术细节，不仔细去分析它的请求机制。首先贴出baiduSpider.py完整代码，一共30多行代码，就能实现自动爬取30张图片的功能。
代理IP对于网络爬虫业务的重要性
Proxy711的博客
09-19 328
对于企业来说，代理IP已经成为网络爬虫业务中不可或缺的工具，特别是在大规模、高并发的数据采集中，代理IP能显著提升爬虫的成功率和数据质量。通过代理IP，尤其是高匿名代理，爬虫可以隐藏自身的真实IP，避免被网站检测到是自动化程序。这种隐匿性对于爬虫的长期运行尤其重要，能够降低被发现的风险。在这一过程中，代理IP发挥着至关重要的作用，特别是对于高频率的数据抓取任务，代理IP能够有效提升爬虫的成功率和安全性。使用高质量的代理IP，可以确保网络连接的稳定性，减少因网络波动或延迟而导致的数据抓取中断或丢失。
数据爬虫中遇到验证码的解决方法
sheji888的专栏
09-17 1468
数据爬虫中遇到验证码是一个复杂而常见的问题，需要综合考虑多种因素并采取合适的解决策略。通过避免触发验证码、手动输入验证码、使用验证码识别技术、绕过验证码机制以及采用分布式爬虫和代理IP等方法，可以在一定程度上提高爬虫的稳定性和效率。然而，需要注意的是，爬虫的使用必须遵守相关法律法规和网站爬虫协议的要求，确保数据抓取活动的合法性和合规性。
Python3网络爬虫开发实战（17）爬虫的管理和部署（第一版）
bigcrab的博客
09-17 1917
第一版的爬虫的管理和部署，有时间更新第二版的
Python爬虫-Post请求中，参数只有value没有key，如何正确处理？
最新发布
Python进阶专栏《爬虫实战进阶》，《数据分析入门与实战》原创作者
09-21 148
本文是该专栏的第38篇，后面会持续分享python爬虫干货知识。在处理爬虫项目的时候，相信有些同学遇到过如下所示的情况：确定接口请求为post请求之后，它的请求参数只有一个value值，并没有key值。换言之，通常情况下，请求参数一般是“key：value”，而你看到的请求参数只有一个“value”。对此，当你遇到这种情况的时候，需要怎么去解决呢？而本文，笔者将针对上述问题，将在正文详细介绍“完整解决方案”并附带“项目案例完整代码”。废话不多说，具体实现思路和详细逻辑，跟着笔者直接往下看正文详细内容。（附带
"Python学习-爬虫爬数据进MySQL！快速实践指南
这篇文章将教你如何迅速写一个爬虫，并将数据爬取进MySQL里。 首先，我们需要决定要爬取哪个页面的数据。举例来说，我们可以选择爬取http://html-color-codes.info/color-names/这个网站的数据。通过查看源代码或者...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值