selenium_page.py
import re
import requests
def get_songid():
“”“获取音乐的songid”“”
url = ‘http://music.taihe.com/artist/2517’
response = requests.get(url=url)
html = response.text
sids = re.findall(r’href=“/song/(\d+)”', html)
return sids
def get_music_url(songid):
“”“获取下载链接”“”
api_url = f’http://musicapi.taihe.com/v1/restserver/ting?method=baidu.ting.song.playAAC&format=jsonp&songid={songid}&from=web’
response = requests.get(api_url.format(songid=songid))
data = response.json()
print(data)
try:
music_name = data[‘songinfo’][‘title’]
music_url = data[‘bitrate’][‘file_link’]
return music_name, music_url
except Exception as e:
print(e)
def download_music(music_name, music_url):
“”“下载音乐”“”
response = requests.get(music_url)
content = response.content
save_file(music_name+‘.mp3’, content)
def save_file(filename, content):
“”“保存音乐”“”
with open(file=filename, mode=“wb”) as f:
f.write(content)
if name == “main”:
for song_id in get_songid():
music_name, music_url = get_music_url(song_id)
download_music(music_name, music_url)
CSDN.py
-- coding=utf-8 --
import pdfkit
import parsel
import requests
html_template = “”"
{content}
“”"
headers = {
“User-Agent”: “Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.142 Safari/537.36”,
‘Host’: ‘blog.csdn.net’,
‘Referer’: ‘https://blog.csdn.net’,
}
def get_csdn_cookie():
response = requests.get(‘https://www.csdn.net/’, headers=headers)
return response.cookies
def get_html(url):
“”“获取索引页”“”
response = requests.get(url, headers=headers)
sel = parsel.Selector(response.text)
list_a = sel.css(‘.article-list a’)
for i in list_a[2:]:
article_index = i.css(‘a::attr(href)’).get()
yield article_index
def csdn(url: str, cookie=get_csdn_cookie()):
“”“下载 CSDN 文章html”“”
response = requests.get(url, headers=headers, cookies=cookie)
获取文章标题内容
sel = parsel.Selector(response.text)
print(response.text)
title = sel.css(‘.title-article::text’).get()
article = sel.css(‘article’).get()
return title, article
def html_to_pdf(filename_html, filename_pdf):
“”“HTML 2 PDF”“”
config = pdfkit.configuration(wkhtmltopdf=‘C:\Program Files\wkhtmltopdf\bin\wkhtmltopdf.exe’)
options = {
‘page-size’: ‘Letter’,
‘margin-top’: ‘0.75in’,
‘margin-right’: ‘0.75in’,
‘margin-bottom’: ‘0.75in’,
‘margin-left’: ‘0.75in’,
‘encoding’: “UTF-8”,
一、Python所有方向的学习路线
Python所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、Python必备开发工具
工具都帮大家整理好了,安装就可直接上手!
三、最新Python学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、Python视频合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
六、面试宝典
简历模板
小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。
深知大多数初中级Python工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!
因此收集整理了一份《2024年Python爬虫全套学习资料》送给大家,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。
由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频
如果你觉得这些内容对你有帮助,可以添加下面V无偿领取!(备注:python)
的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!**
因此收集整理了一份《2024年Python爬虫全套学习资料》送给大家,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。
由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频
如果你觉得这些内容对你有帮助,可以添加下面V无偿领取!(备注:python)
[外链图片转存中…(img-RGNkfV1W-1710876826153)]