qq_69794791的博客

原创 抠肚脐眼-2022年网络我的网络爬虫学习心得

1、调用数据包#调用数据包2、对爬虫网站进行解码#对爬取网站进行解码3、调用BeautifulSoup进行爬取data=[]df4、定义标题并写入数据库df#将爬取数据转换成df数据并定义标题df.to_sql( 'newlist1', con=engine, if_exists='append') #数据写入数据库#运用sql、engine将数据写入数据库5、建立数据库并储存数据client = pymongo.MongoClient('127.0.0.1',27017) #连接mongodb。