python 爬取网页内容并保存到数据库_python爬取数据并保存到数据库中(第一次练手完整代码)...

2. 创建conndb py,包括数据库连接断开,添加、删除、修改、和其他操作:# !\/usr\/bin\/env python # - * -编码:utf - 8 - *进口pymysqldef conn_db(): #连接到数据库函数康涅狄格州=(主机=\u201Clocalhost\u201D,用户=数据库用户名,密码=数据库密码,db =数据库名称,charset = use utf8) cur =()返回康涅狄格州,curdef exe_update (cur, sql): # Update语句,执行更新、插入语句sta = (sql)返回stadef exe_delete (cur, ids): # Delete语句,批量删除eachID (\u201D): sta =(\u201C删除从cms id = % d ' % int (eachID))返回stadef exe_query (cur, sql): #查询语句(sql)返回curdef exe_commit(坏蛋):()#执行提交操作,insert语句将def conn_close生效(康涅狄格州,cur): #关闭所有连接()()3。

\/usr\/bin\/env python # - * -编码:utf - 8 - * -进口requestsfrom bs4进口BeautifulSoupimport datetimeimport conndbdef get_html_text (url):试题:r = (url,超时= 30)# = _encoding =\u201Cutf - 8\u201D# #打印编码方法()returnexcept BaseException e:打印(BaseException:, e)返回\时间=(\u201C跨度\u201D)。字符串#新闻创建日期time1 =\u201C20\u201D+时间(0(\字符串#打印(标题+时间+ url) get_new_content (url、标题、时间)def get_new

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值