Python下载中国数据库大会(DTCC2024)PPT全集(2)

文章讲述了作者使用Python编程语言开发了一个工具,自动抓取2020年中国数据库技术大会的PPT,旨在解决浏览大会资料不便的问题。此外,还提到一份面向Python开发者的学习资料,包含零基础到进阶的全面内容。
摘要由CSDN通过智能技术生成

背景

==

前几天中国数据库大会风风火火的在京举行了,期间干货满满,收获良多。在学大佬们的ppt时,发现只能一篇一篇预览,对于求知欲强烈的小编来说简直太难受了,于是便写了个程序,一键获取所有ppt。

2020年12月21日~12月23日,由 IT168 旗下 ITPUB 企业社区平台主办的第十一届中国数据库技术大会(DTCC2020),将在北京隆重召开。大会以“架构革新 高效可控”为主题,设置2大主会场,20+技术专场,将邀请超百位行业专家,重点围绕数据架构、AI与大数据、传统企业数据库实践和国产开源数据库等内容展开分享和探讨,为广大数据领域从业人士提供一场年度盛会和交流平台。

历经十年的积累与沉淀,如今的DTCC已然成为国内数据库领域的技术风向标,见证了整个行业的发展与演变。作为顶级的数据领域技术盛会,DTCC2020将继续秉承一贯的干货分享和实践指导原则,期待大家的热情参与!

中国数据库大会链接http://dtcc.it168.com/

软件环境:python 3

效果展示

========

话不多说,上代码

encoding: utf-8

from bs4 import BeautifulSoup

import requests

from urllib.request import urlopen

import re

import json

def visit(url):

headers = {

“User-Agent”: “Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; WOW64; Trident/4.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; .NET4.0C; InfoPath.3)”,

“accept”: “application/json, text/javascript, /; q=0.01”,

“accept-encoding”: “gzip, deflate, br”,

“accept-language”: “zh-CN,zh;q=0.9”,

“content-type”: “application/x-www-form-urlencoded; charset=UTF-8”,

“cookie”: “”, – 填自己的

“referer”: “”,

“sec-fetch-dest”: “document”,

“sec-fetch-mode”: “navigate”,

“sec-fetch-site”: “same-origin”,

}

res = requests.get(url,headers=headers)

bsObj = BeautifulSoup(res.text, “html.parser”)

return bsObj

def visit_homepage(url):

bsObj = visit(url)

content = bsObj.find(‘div’, class_=“content”)

content_list = content.select(“p”)

category = []

for i in range(4,len(content_list)):

try:

urls = content_list[i].a[‘href’]

name = content_list[i].get_text(“|”).split(“|”)[0].replace(’ ‘,’‘).replace(’\xa0’,‘’)

category.append([name,urls])

except:

pass

print(category)

return category

def download_pdf(conf,path):

category_name = conf[0]

category_url = conf[1]

bsObj = visit(category_url)

res = re.search(r’(.)token:(.?),',str(bsObj) ,re.M|re.I)

token = res.group(2).replace(‘"’,‘’).replace(’ ‘,’')

arts = re.findall(r’(.)li data-docinfo=(.?)}',str(bsObj) ,re.M|re.I)

for art in arts:

art_str = “{”+str(art).split(‘{’)[1].replace(“')”,“}”)

art_dic = json.loads(art_str)

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Python工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年Python开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。

img

img

img

img

img

img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上前端开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录大纲截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且后续会持续更新

如果你觉得这些内容对你有帮助,可以扫码获取!!!(备注Python)

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上前端开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录大纲截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且后续会持续更新

如果你觉得这些内容对你有帮助,可以扫码获取!!!(备注Python)

img
  • 19
    点赞
  • 25
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值