Python喜马拉雅免费音频数据爬取部署

最新推荐文章于 2024-05-07 15:40:42 发布

陌上阳光

最新推荐文章于 2024-05-07 15:40:42 发布

阅读量483

点赞数 2

分类专栏： Linux 文章标签： python 爬虫

本文链接：https://blog.csdn.net/weixin_42831564/article/details/137272203

版权

Linux 专栏收录该内容

18 篇文章 0 订阅

订阅专栏

1. 代码下载

github代码 https://github.com/toilaj/xmly-downloader/tree/main
只能下载免费音频，vip不能下载。

2. 环境部署

下载miniconda3

wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh

或者链接下载，寻找linux版本 https://docs.anaconda.com/free/miniconda/

miniconda3 安装
开发机不能源码安装python环境，可以直接使用miniconda或者conda，从conda里面创建虚环境的时候安装Python。

bash Miniconda3-latest-Linux-x86_64.sh -p dest_dir

-p 指定目录安装，如果不指定则默认安装到home目录下，dest_dir要没有创建，安装会自动创建。
所有安装选项全部yes。

source dest_dir/bin/activate  # 激活conda环境
conda env list  # 查看conda有多少个虚环境

创建python3.11版本虚环境

conda create -n python311 python=3.11  # -n 指定虚环境的名字   python=3.11指定安装Python的版本
conda activate python311  # 切换到python311 环境中

安装指定版本py包

pip install -r requirements.txt

环境部署 https://stackoverflow.com/questions/58568175/upgrade-to-python-3-8-using-conda

优惠劵

陌上阳光

关注关注

2
点赞
踩
5

收藏

觉得还不错? 一键收藏
0
评论
Python喜马拉雅免费音频数据爬取部署

github代码只能下载免费音频，vip不能下载。
复制链接

扫一扫

专栏目录

喜马拉雅音频文件爬取python

02-25

能学到什么：①python爬取喜马拉雅音频文件，修改专辑id即可。②循环依赖都是如何设计和实现的。阅读建议：此资源不仅是代码编写实现也更注重内容上的需求分析和方案设计，所以在学习的过程要结合这些内容一起来...

IT工程师学习方法和发展路线

stqer的博客

03-25

6303

前言：从需求，即招聘，面试入手，了解行业所需，再到个人部分，学习大佬们的学习方法，书写自己的简历，提升自我技能，或通过考证锻炼学习的学习方法，或通过技能提高工作效率，简述几个方面的特点，梳理下发展路线，通过利器提高办公效率。 Tips：Markdown语法学习：改字体颜色、该字体底色、画图、各种图、语法大全根据我国发布的《国民经济和社会发展第十四个五年规划和2035年远景目标纲要》从招聘平台获取自己想要的招聘信息，进而找到应对之道，换言之，做好押题工作。 1、Boss直聘：https://www.zhi

参与评论您还未登录，请先登录后发表或查看评论

珍藏的优质 Python 技术播客

Python中文社区

04-14

267

我国互联网的发展道路与欧美不同，在内容的形式上，我们似乎实现了跨越式的发展——早早进入了移动互联网时代，直播和短视频等形式的内容成为了潮流，而文字形式的博客（blog）与...

一文学会爬虫技巧

大模型研究中心

10-16

1308

爬取阶段资源处理（包括音频，视频，图片下载及处理）正式入库后处理阶段（类似去水印）如果你想学习Python帮助你实现自动化办公，或者准备学习Python或者正在学习，下面这些你应该能用得上，有需要可以领取。① Python所有方向的学习路线图，清楚各个方向要学什么东西② 100多节Python课程视频，涵盖必备基础、爬虫和数据分析③ 100多个Python实战案例，学习不再是只会理论④ 华为出品独家Python漫画教程，手机也能学习。

一篇文章带你理解爬虫究竟是什么？

码农-Vax天道的时间宝藏

01-10

2049

目录前言爬虫的应用场景爬虫的技术选型简单的爬虫脑洞大开的爬虫解决思路复杂的爬虫设计音视频爬虫实战一、先从几个方面来简单介绍我们音视频爬虫项目的体系二、分步来讲下细节三、遇到的问题和解决方案四、最后做下总结爬虫管理平台总结前言作为冷数据启动和丰富数据的重要工具，爬虫在业务发展中承担着重要的作用，我们业务在发展过程中积累了不少爬虫使用的经验，在此分享给大家，希望能对之后的业务发展提供一些技术选型方向上的思路,以更好地促进业务发展我们将会从以下.

python爬取喜马拉雅免费音频，源码+成品

04-10

python爬取喜马拉雅免费音频，源码+成品注释齐全。成品有界面，输入音频列表链接自动下载全部音频

python 二手车（数据爬取）.zip

08-15

使用python爬取二手车的数据，并将数据存入excel文件中，资源适合新手小白和在校学生。使用前请务必查看说明文档

python 新闻爬取（数据爬取+可视化）.zip

08-15

使用python爬取新闻数据，将爬取的数据存入csv文件，并从新闻类型、地区等信息进行数据可视化，本资源适合新手小白和在校学生。使用前务必请先查看说明文件

linux常用命令

weixin_42831564的博客

03-07

4094

1.杀掉当前用户的所有进程 killall -u username 2. 查看当前用户的所有执行任务 -l查看pid jobs -l 3. 查看所有进程： top 4. 杀掉进程 kill -9 pid

diff比较带有空格或空行的文件

weixin_42831564的博客

07-07

4053

查看文本空白行的行号 1.grep grep -n ^$ file.txt grep -n 显示符合条件的行号 ^ 表示行首 $ 表示行尾，^$中间没有别的字符，表示空行 https://www.runoob.com/linux/linux-comm-grep.html grep 2.sed

Linux批量文件操作

weixin_42831564的博客

06-02

1256

1.cp 复制 cp ./* /dest_dir 2.mv 移动 mv ./* /dest_dir 3.xargs 当文件特别多，和管道一起使用 ls | xargs -I {} mv ./{} /dest_dir/{} cat path.txt | xargs -I {} mv ./{} /dest_dir/{} xargs参数 -t 表示先打印命令，然后再执行 -i 或者是-I，这得看linux支持了，将xargs的每项名称，一般是一行一行赋值给 {}，可以用 {} 代替。 -i 只能用{

docker简单使用1

weixin_42831564的博客

03-25

936

通过以上步骤，你可以在本地环境中执行 Docker 脚本，并创建、管理和运行 Docker 容器。请根据实际情况调整命令中的镜像名称、标签和容器名称等参数。要执行 Docker 脚本，首先需要确保你已经安装了 Docker 并且启动了 Docker 服务。接下来可以根据需要运行 Docker 容器。例如，如果要后台运行已构建的镜像并命名容器为。在终端或命令提示符中，进入存放 Dockerfile 的目录。的文本文件，确保脚本中的命令是你需要的。可以替换为你自定义的名称和标签，

rsync断点续传工具安装使用

最新发布

weixin_42831564的博客

05-07

927

Cygwin是一个在Windows平台上提供类Unix环境的开源软件工具。它主要提供了一组工具和库，使得在Windows系统上可以运行类Unix系统的应用程序和工具。总的来说，Cygwin为Windows用户提供了一个方便的方式，在Windows系统上运行类Unix环境的应用程序和工具，为跨平台开发和使用提供了便利。

vscode远程免密登录ssh

weixin_42831564的博客

04-12

667

设置符号打开config配置文件，+点击符号ssh连接新的远端开发机。

linux常用命令2

weixin_42831564的博客

03-14

606

这个命令会读取指定文件的内容，并将每个换行符替换为一个空格，最终将整个文件内容整理成一行输出，每行之间用空格分隔。把管道输出的$1 的值做key,$2的值做value组成一个字典，遍历字典输出key对应的value。这将读取指定文件的内容，并将所有换行符替换为空格，最终将整个文件内容整理成一行输出。这样做会将多行内容合并成一行，每行之间用空格分隔。这样就会在输出的结果中保留原来的行结构，但将整个文件内容合并成了一行。命令来删除换行符，将多行内容合并成一行。要将文件的所有行整理成一行内容并输出，你可以使用。

mapreduce使用报错

weixin_42831564的博客

05-06

605

在你的堆栈跟踪中，异常消息指出了一个core dump，这表明进程因为遇到致命错误而被操作系统强制终止，并且生成了core dump文件，用于调试分析。参数来指定JVM的最大堆内存为4GB，你可以尝试增加这个值来提供更多的内存给进程使用，如果内存不足可能会导致进程崩溃。检查日志文件中的详细错误信息，特别是stderr文件中的内容，可能会提供更多关于进程崩溃的线索。在处理这类问题时，结合日志信息和对系统资源的监控是很重要的，可以帮助你更快地定位和解决问题。

python爬取喜马拉雅

09-06

要使用Python爬取喜马拉雅的数据，可以使用requests库发送HTTP请求获取数据。首先，你需要使用requests.get()方法发送GET请求到喜马拉雅的API接口，例如： response = requests.get('https://www.ximalaya.com/revision/play/album?albumId=16372952&pageNum=1&sort=-1&pageSize=30') 然后，你可以使用json.loads()方法将返回的数据转换成字典对象，以便于处理和提取其中的信息。例如： data = json.loads(response.text) audio_data = data['data']['tracksAudioPlay'] 这样你就可以获取到喜马拉雅的音频数据。接下来，你可以根据需要使用这些音频数据进行相关的分析、存储或其他操作。注意，这里的示例只是一个基本的示范，具体的爬取操作可能需要根据喜马拉雅的API文档和需求进行进一步的定制和处理。123 #### 引用[.reference_title] - *1* *2* [Python爬虫|爬取喜马拉雅音频](https://blog.csdn.net/weixin_34122548/article/details/93600299)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *3* [Python实例---爬取下载喜马拉雅音频文件](https://blog.csdn.net/weixin_30701575/article/details/99085866)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么？

非常没帮助
没帮助
一般
有帮助
非常有帮助

提交