python爬虫（18）爬取微信公众号内容——绘制词云

最新推荐文章于 2024-02-19 13:19:21 发布
最新推荐文章于 2024-02-19 13:19:21 发布
阅读量2.5w 收藏 27
点赞数 3
分类专栏： python爬虫 python爬虫专题 文章标签： 搜狗 wordcloud 爬取微信公众号内容
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qiqiyingse/article/details/71126591
版权

写在前面的话

前段时间写了一篇通过搜狗引擎获取微信公众号的文章，最近又看了一个网易云歌词绘制词云的程序

然后我就想，能否把这两者结合起来呢

 

还好经历几多波折终于把这个东西给弄出来了。

其实中间的实现不是很难， 关键是环境搭建实在是太困难了

好了，先把代码以及效果图奉献上吧

代码

weixin_spider.py  

 

#!/usr/bin/python
# coding: utf-8

#这三行代码是防止在python2上面编码错误的，在python3上面不要要这样设置
import sys
reload(sys)
sys.setdefaultencoding('utf-8')

from urllib import quote
from pyquery import PyQuery as pq
from selenium import webdriver

import requests
import time
import re
import json
import os

#搜索入口地址，以公众为关键字搜索该公众号	
def get_search_result_by_keywords(sogou_search_url):
	# 爬虫伪装头部设置
	headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.3; WOW64; rv:51.0) Gecko/20100101 Firefox/51.0'}
		
	# 设置操作超时时长
	timeout = 5
	# 爬虫模拟在一个request.session中完成
	s = requests.Session()
	log(u'搜索地址为：%s' % sogou_search_url)
	return s.get(sogou_search_url, headers=headers, timeout=timeout).content
	
#获得公众号主页地址
def get_wx_url_by_sougou_search_html(sougou_search_html):
	doc = pq(sougou_search_html)
	return doc('div[class=txt-box]')('p[class=tit]')('a').attr('href')
	
#使用webdriver 加载公众号主页内容，主要是js渲染的部分
def get_selenium_js_html(url):
	browser = webdriver.PhantomJS(executable_path=r'D:\Python2.7\Scripts\phantomjs.exe') 
	
	browser.get(url) 
	time.sleep(3) 
	# 执行js得到整个页面内容
	html = browser.execute_script("return document.documentElement.outerHTML")
	browser.close()
	return html
	
#获取公众号文章内容
def parse_wx_articles_by_html(selenium_html):
	doc = pq(selenium_html)
	return doc('div[class="weui_media_box appmsg"]')


	
#将获取到的文章转换为字典
def switch_arctiles_to_list(articles):
	#定义存贮变量
	articles_list = []
	i = 1
		
	#遍历找到的文章，解析里面的内容
	if articles:
		for article in articles.items():
			log(u'开始整合(%d/%d)' % (i, len(articles)))
			#处理单个文章
			articles_list.append(parse_one_article(article))
			i += 1
	return articles_list

#解析单篇文章
def parse_one_article( article):
	article_dict = {}
		
	#获取标题
	title = article('h4[class="weui_media_title"]').text().strip()
	###log(u'标题是： %s' % title)
	#获取标题对应的地址
	url = 'http://mp.weixin.qq.com' + article('h4[class="weui_media_title"]').attr('hrefs')
	log(u'地址为： %s' % url)
	#获取概要内容
	summary = article('.weui_media_desc').text()
	log(u'文章简述： %s' % summary)
	#获取文章发表时间
	date = article('.weui_media_extra_info').text().strip()
	log(u'发表时间为： %s' % date)
	#获取封面图片
	pic = parse_cover_pic(article)
		
	#返回字典数据
	return {
		'title': title,
		'url': url,
		'summary': summary,
		'date': date,
		'pic': pic
	}
		
#查找封面图片，获取封面图片地址
def parse_cover_pic( article):
	pic = article('.weui_media_hd').attr('style')
		
	p = re.compile(r'background-image:url\((.*?)\)')
	rs = p.findall(pic)
	log( u'封面图片是：%s ' % rs[0] if len(rs) > 0 else '')
		
	return rs[0] if len(rs) > 0 else ''

#自定义log函数，主要是加上时间
def log(msg):
	print u'%s: %s' % (time.strftime('%Y-%m-%d_%H-%M-%S'), msg)

#验证函数
def need_verify(selenium_html):
	' 有时候对方会封锁ip，这里做一下判断，检测html中是否包含id=verify_change的标签，有的话，代表被重定向了，提醒过一阵子重试 '
	return pq(selenium_html)('#verify_change').text() != ''

#创建公众号命名的文件夹
def create_dir(keywords):
	if not os.path.exists(keywords):  
		os.makedirs(keywords) 
			
#爬虫主函数
def run(keywords):
	' 爬虫入口函数 '
	#Step 0 ：  创建公众号命名的文件夹
	create_dir(keywords)
	
	# 搜狐微信搜索链接入口
	sogou_search_url = 'http://weixin.sogou.com/weixin?type=1&query=%s&ie=utf8&s_from=input&_sug_=n&_sug_type_=' % quote(keywords)

	# Step 1：GET请求到搜狗微信引擎，以微信公众号英文名称作为查询关键字
	log(u'开始获取，微信公众号英文名为：%s' % keywords)
	log(u'开始调用sougou搜索引擎')
	sougou_search_html = get_search_result_by_keywords(sogou_search_url)
		
	# Step 2：从搜索结果页中解析出公众号主页链接
	log(u'获取sougou_search_html成功，开始抓取公众号对应的主页wx_url')
	wx_url = get_wx_url_by_sougou_search_html(sougou_search_html)
	log(u'获取wx_url成功，%s' % wx_url)
		
		
	# Step 3：Selenium+PhantomJs获取js异步加载渲染后的html
	log(u'开始调用selenium渲染html')
	selenium_html = get_selenium_js_html(wx_url)
		
	# Step 4: 检测目标网站是否进行了封锁
	if need_verify(selenium_html):
		log(u'爬虫被目标网站封锁，请稍后再试')
	else:
		# Step 5: 使用PyQuery，从Step 3获取的html中解析出公众号文章列表的数据
		log(u'调用selenium渲染html完成，开始解析公众号文章')
		articles = parse_wx_articles_by_html(selenium_html)
		log(u'抓取到微信文章%d篇' % len(articles))
			
		# Step 6: 把微信文章数据封装成字典的list
		log(u'开始整合微信文章数据为字典')
		articles_list = switch_arctiles_to_list(articles)
		return [content['title'] for content in articles_list]


weixin_wordcloud.py

 

 

# coding: utf8
from wordcloud import WordCloud
import weixin_spider
import matplotlib.pyplot as plt
import time


if __name__ == '__main__':
	print u''' 
            ****************************************************************  
            **   Welcome to Spider of weixin gongzhonghao for wordcloud   **  
            **                 Created on 2017-05-03                      **  
            **                 @author: Jimy _Fengqi                      **  
            **************************************************************** 
    '''  
	gongzhonghao=raw_input(u'input weixin gongzhonghao:')
	if not gongzhonghao:
		gongzhonghao='python'
	text = " ".join(weixin_spider.run(gongzhonghao))
	
	print text
	wordcloud = WordCloud(random_state=1, font_path = r'C:/Users/Windows/fonts/simkai.ttf').generate(text)#处理获取到的title，准备绘制词云

	print 'start drawing.....'
	plt.figure()
	plt.imshow(wordcloud, interpolation='bilinear')
	plt.axis('off')
	plt.show()

结果

运行结果以及效果图如下：

 

            ****************************************************************
            **   Welcome to Spider of weixin gongzhonghao for wordcloud   **
            **                 Created on 2017-05-03                      **
            **                 @author: Jimy _Fengqi                      **
            ****************************************************************

input weixin gongzhonghao:
2017-05-03_17-12-05: 开始获取，微信公众号英文名为：python
2017-05-03_17-12-05: 开始调用sougou搜索引擎
2017-05-03_17-12-05: 搜索地址为：http://weixin.sogou.com/weixin?type=1&query=python&ie=utf8&s_from=input&_sug_=n&_sug_type_=
2017-05-03_17-12-05: 获取sougou_search_html成功，开始抓取公众号对应的主页wx_url
2017-05-03_17-12-05: 获取wx_url成功，http://mp.weixin.qq.com/profile?src=3×tamp=1493802721&ver=1&signature=Eu9LOYSA47p6WE0mojhMtFR-gSr7zsQOYo6*w5VxrUjAAes2nWKzZmHcIVVOotmCKZQHqx1-oJty0W7zXgciDA==
2017-05-03_17-12-05: 开始调用selenium渲染html
2017-05-03_17-12-14: 调用selenium渲染html完成，开始解析公众号文章
2017-05-03_17-12-14: 抓取到微信文章10篇
2017-05-03_17-12-14: 开始整合微信文章数据为字典
2017-05-03_17-12-14: 开始整合(1/10)
2017-05-03_17-12-14: 地址为： http://mp.weixin.qq.com/s?timestamp=1493802726&src=3&ver=1&signature=0YETqaQn3VeAFFu5BfQjFRkPF4H*-Pdei4mlBgUEtq0k1QLMNDBHGL*vmaJVGGxgDnWtjomkqe8PXYC-M4UT-Ubq8pZXWLNMCUN8t46HfTCghZZelhTNk4OK9r4N84PNA4PStQzUxee5aSRaDAYTBS9Wf2m7FYrKgva2*9PSq4k=
2017-05-03_17-12-14: 文章简述： 不同于其他免费基础视频、不容错过哦
2017-05-03_17-12-14: 发表时间为： 2017年4月25日
2017-05-03_17-12-14: 封面图片是：http://mmbiz.qpic.cn/mmbiz_jpg/Kad3LZzM7n6kOLEoklv3z5DlYnHz2lE2pcudibic6pDbMUck8vT4zlzqDUDpBeWNsgGPef8HmQkrG6dPkAZick0jw/0?wx_fmt=jpeg 
2017-05-03_17-12-14: 开始整合(2/10)
2017-05-03_17-12-14: 地址为： http://mp.weixin.qq.com/s?timestamp=1493802726&src=3&ver=1&signature=0YETqaQn3VeAFFu5BfQjFRkPF4H*-Pdei4mlBgUEtq0k1QLMNDBHGL*vmaJVGGxgDnWtjomkqe8PXYC-M4UT-du18Q4qJZThq4lkPKLgjuXf-H6L4kHEImvTcJXsIjlm4eWr3pGE4Kr0DKmBSNe27wR*EmgCQuPwXey4tFdI-uM=
2017-05-03_17-12-14: 文章简述： 恭喜你获得了免费python学习机会、
2017-05-03_17-12-14: 发表时间为： 2017年4月22日
2017-05-03_17-12-14: 封面图片是：http://mmbiz.qpic.cn/mmbiz_png/Kad3LZzM7n7J8cEPG7OwwoJpECMfbYribz3LojBq8TUbfibhmEicb6M1AbZbDN5fL490AtUEpv33lnDfOWdhZHw5w/0?wx_fmt=png
2017-05-03_17-12-14: 开始整合(3/10)
2017-05-03_17-12-14: 地址为： http://mp.weixin.qq.com/s?timestamp=1493802726&src=3&ver=1&signature=0YETqaQn3VeAFFu5BfQjFRkPF4H*-Pdei4mlBgUEtq0k1QLMNDBHGL*vmaJVGGxgDnWtjomkqe8PXYC-M4UT-YYYmhz6gmrq4PnNMVHDwJMKYXgaGMZo8QqlHmZ5AyFQwrnSDU3gtYjXP6bvz9m0HjURSqAE*lF-t5R6iQSw8bc=
2017-05-03_17-12-14: 文章简述： 如今python编程语言在国内越来越火了，学习python的人也开始多了起来，今天我就来分享一下，我了解到的从各大知名企业招聘信息中的python程序员职业技能表！
2017-05-03_17-12-14: 发表时间为： 2017年4月11日
2017-05-03_17-12-14: 封面图片是：http://mmbiz.qpic.cn/mmbiz_png/Kad3LZzM7n5RzVjTFpzmaAupSsibCOvw6pyUTSF8qqgMI98S5soCyNlnnbLSLAfFibJUSyjhyxSC53LibJq48PTUQ/0?wx_fmt=png
2017-05-03_17-12-14: 开始整合(4/10)
2017-05-03_17-12-14: 地址为： http://mp.weixin.qq.com/s?timestamp=1493802726&src=3&ver=1&signature=0YETqaQn3VeAFFu5BfQjFRkPF4H*-Pdei4mlBgUEtq0k1QLMNDBHGL*vmaJVGGxgDnWtjomkqe8PXYC-M4UT-XdE1cnErev9xb0hF1qOmgr5P*HeGyrWpC5OrEQvAKDaxPjExg1V594I*vwhcHoEIraMXA0fDOod*qVu7fsN1VY=
2017-05-03_17-12-14: 文章简述： 又是新的一周、新的开始
2017-05-03_17-12-14: 发表时间为： 2017年4月10日
2017-05-03_17-12-14: 封面图片是：http://mmbiz.qpic.cn/mmbiz_png/Kad3LZzM7n5DicWjY05ib7KAZNjZpGMT55FdmYfgL1UJU39UIjB1icnRWSCibrHYPFgAPDkjsx7RgRXlFs7njL8QFw/0?wx_fmt=png 
2017-05-03_17-12-14: 开始整合(5/10)
2017-05-03_17-12-14: 地址为： http://mp.weixin.qq.com/s?timestamp=1493802726&src=3&ver=1&signature=0YETqaQn3VeAFFu5BfQjFRkPF4H*-Pdei4mlBgUEtq0k1QLMNDBHGL*vmaJVGGxgDnWtjomkqe8PXYC-M4UT-UAtygSQ*C5lBQy53XisEjEmV-uFUkwzjPLoaaF5vOqLn9Bm3tB84CSsX0MfzK5d57DS625vB-hM*k1zQwgfbJ0=
2017-05-03_17-12-14: 文章简述： 不定时更新这种精讲视频、记得随时关注哦
2017-05-03_17-12-14: 发表时间为： 2017年4月8日
2017-05-03_17-12-14: 封面图片是：http://mmbiz.qpic.cn/mmbiz_jpg/Kad3LZzM7n5HIeqCSKia2L10THBoRkYkKrbicUJjUYicCXjiasUDuJxY9DBJ0tTP3ticf2XbN2Cr5Vfg0CM1Kx1TwiaA/0?wx_fmt=jpeg
2017-05-03_17-12-14: 开始整合(6/10)
2017-05-03_17-12-14: 地址为： http://mp.weixin.qq.com/s?timestamp=1493802726&src=3&ver=1&signature=0YETqaQn3VeAFFu5BfQjFRkPF4H*-Pdei4mlBgUEtq0k1QLMNDBHGL*vmaJVGGxgDnWtjomkqe8PXYC-M4UT-Vf8RaS4Pkph9DIfBuroVRszZ7VccePWMMYLU1Wda8YZrUc5X9DL1F*7QUvkN75ZXxKSl7JKCQihehlrRCQQziY=
2017-05-03_17-12-14: 文章简述： flask是一款非常流行的Python Web框架，出生于2010年，作者是Armin Ronacher,本来这个项目只是作者在愚人节的一个玩笑，后来由于非常受欢迎，进而成为一个正式的项目。目前为止最新的版本是0.11.1。
2017-05-03_17-12-14: 发表时间为： 2017年4月6日
2017-05-03_17-12-14: 封面图片是：http://mmbiz.qpic.cn/mmbiz_jpg/Kad3LZzM7n6kOLEoklv3z5DlYnHz2lE2j1EVD3OcqtW9BDJEK8libEyY7QdDCLkJgQaFwXP0FJmZCug3KKjeVAg/0?wx_fmt=jpeg
2017-05-03_17-12-14: 开始整合(7/10)
2017-05-03_17-12-14: 地址为： http://mp.weixin.qq.com/s?timestamp=1493802726&src=3&ver=1&signature=0YETqaQn3VeAFFu5BfQjFRkPF4H*-Pdei4mlBgUEtq0k1QLMNDBHGL*vmaJVGGxgDnWtjomkqe8PXYC-M4UT-dYVYcn0tSGPeTL8AlJGawykBwNMks28FXsqxsxui0a4n4-5TXQPsrpuc*69GH1WOfzeHw*3WnK48uuqwMmY8NU=
2017-05-03_17-12-14: 文章简述： 值得一看哦
2017-05-03_17-12-14: 发表时间为： 2017年4月5日
2017-05-03_17-12-14: 封面图片是：http://mmbiz.qpic.cn/mmbiz_png/Kad3LZzM7n6JXibnmFZEMsTo4rIY37l58ibQicyiaiaTwRo1ia05hpjicbb5OlL8na5JTsUGwwyY6Pg6MXFD6nrYnaGDg/0?wx_fmt=png
2017-05-03_17-12-14: 开始整合(8/10)
2017-05-03_17-12-14: 地址为： http://mp.weixin.qq.com/s?timestamp=1493802726&src=3&ver=1&signature=0YETqaQn3VeAFFu5BfQjFRkPF4H*-Pdei4mlBgUEtq0k1QLMNDBHGL*vmaJVGGxgDnWtjomkqe8PXYC-M4UT-ajcYor67dV-edCLAmz7ysAPsW1rnB-*0nqeyWNMdfoaMh5987ezN6IoTrGsjuyAzHd*VatTOzBzpkl-kevjDP4=
2017-05-03_17-12-14: 文章简述： ctypes（二）— 基本函数调用
上一次提到了，ctypes的兼容层，这次我们直接讲利用兼容层调用函数的相关规则。
2017-05-03_17-12-14: 发表时间为： 2017年4月2日
2017-05-03_17-12-14: 封面图片是：http://mmbiz.qpic.cn/mmbiz_jpg/Kad3LZzM7n6kOLEoklv3z5DlYnHz2lE23reFCJVbkRvwcadcnvA84WYIqOmLtU1e679xzfUXFE8hvWa2tBqugA/0?wx_fmt=jpeg
2017-05-03_17-12-14: 开始整合(9/10)
2017-05-03_17-12-14: 地址为： http://mp.weixin.qq.com/s?timestamp=1493802726&src=3&ver=1&signature=0YETqaQn3VeAFFu5BfQjFRkPF4H*-Pdei4mlBgUEtq0k1QLMNDBHGL*vmaJVGGxgDnWtjomkqe8PXYC-M4UT-Qie-wwJs-toXtk7yDFPxfApK1UXSBITe-3QQuzYbo10M7BUKIPMtQf99U*UyTD-woQcjC8WnxoaqiaF2IeoKBc=
2017-05-03_17-12-14: 文章简述： ctypes（一） — 初识
很多初学Python的新手，总是嘴边挂着一句话：“Python是一门胶水语言”。
2017-05-03_17-12-14: 发表时间为： 2017年4月1日
2017-05-03_17-12-14: 封面图片是：http://mmbiz.qpic.cn/mmbiz_jpg/Kad3LZzM7n6kOLEoklv3z5DlYnHz2lE2V9CasXUA3JNnd6ZncuC6ptGvfalj6ibWr17YmAD0fTEVTD1SjEicekibg/0?wx_fmt=jpeg 
2017-05-03_17-12-14: 开始整合(10/10)
2017-05-03_17-12-14: 地址为： http://mp.weixin.qq.com/s?timestamp=1493802726&src=3&ver=1&signature=0YETqaQn3VeAFFu5BfQjFRkPF4H*-Pdei4mlBgUEtq0k1QLMNDBHGL*vmaJVGGxgDnWtjomkqe8PXYC-M4UT-fUfVJStvaToDhm9rGSUVbZGpsdiyxOoBRZZng907ag6hLzmPy-6TfgYnB9xy5g3W1IUzt0GyVE27Rs3QqaFDZs=
2017-05-03_17-12-14: 文章简述： 什么是连接器？
连接器是编程语言（我们特指Python）连接数据库的一个中间层，通常以第三方包的形式发布。因此，如果我们要使用Python来操作数据库，那我们必须安装相应的连接器。
2017-05-03_17-12-14: 发表时间为： 2017年3月30日
2017-05-03_17-12-14: 封面图片是：http://mmbiz.qpic.cn/mmbiz_jpg/Kad3LZzM7n6kOLEoklv3z5DlYnHz2lE2pcudibic6pDbMUck8vT4zlzqDUDpBeWNsgGPef8HmQkrG6dPkAZick0jw/0?wx_fmt=jpeg 
python基础教程：VIP精讲旅程 python项目实战教程：Flask框架开发搜索引擎 Python程序员技能表—446家知名企业的Py招聘信息 Python项目实战教程：Web与爬虫开发-（全自动更新数据）下 python框架教程：scrapy框架之xpath语法 框架-flaskの开发 Python项目实战教程：Web与爬虫开发(全自动更新数据) 系列:Python扩展模块(2) 愚人节快乐！今天你被愚了吗？系列:Python扩展模块(1) 这是Python连接器吗？不晓得
start drawing.....

 

 

 

总结

使用wordcloud 需要安装很多东西

wordcloud 还可以通过pyecharts这个模块来导入

目前所知

wordcloud    /pyecharts

numpy

scipy

 

其他缺少资源也可以在下面的地址查找

http://www.lfd.uci.edu/~gohlke/pythonlibs/#numpy

 

 

 

枫奇
关注
  • 3
    点赞
  • 踩
  • 27
    收藏
    觉得还不错? 一键收藏
  • 7
    评论
专栏目录
python微信公众号开发
10-24
微信公众号的开发，暂时只做了一个简单的菜单，一个天气查询，用到了最简单的爬虫
快速获取微信公众号文章的技巧
oGuJing123的博客
06-05 672
微信公众号是一个信息传播平台，许多人通过它获取信息、分享知识。但是，有时候我们会遇到需要保存公众号文章的情况。那么，如何获取微信公众号文章呢？本文将为您详细介绍。一、使用搜狗微信搜索搜狗微信搜索是一个方便快捷的工具，可以通过输入关键词搜索到相关的公众号文章。在搜索结果页面
python爬取微信小程序数据,如何爬取小程序数据
最新发布
yyyqqq_的博客
02-19 2176
最近需要获取微信小程序上的数据进行分析处理，第一时间想到的方式就是采用python爬虫爬取数据，尝试后发现诸多问题，比如无法获取目标网址、解析网址中存在指定参数的不确定性、加密问题等等，经过一番尝试，终于使用 Charles 抓取到指定微信小程序中的数据，本文进行记录并总结。电脑：Windows10，连接有线网手机：iPhone Xr，连接无线网注：有线网与无线网最好位于同一网段下学python什么书比较好python用海龟库画笑脸。
python学习:爬虫爬取微信公众号数据
nzbing的博客
07-18 5137
参考: https://blog.csdn.net/qq_45722494/article/details/120191233。上述第一步可以获取到cookie、fakeid、token、user_agent等,编辑成wechat.yaml文件,如下所示。1、使用fiddler或Charles抓包。1、登录微信公众平台。
使用python爬取微信公众号文章
csdnjquery163com的博客
01-28 4243
使用python爬取微信公众号文章
Python怎么去抓取公众号的文章？Python爬虫爬取微信公众号方法
m0_58477260的博客
09-15 1714
很多小伙伴在学习了爬虫之后都能够使用它去抓取一些网页上的数据了，但是最近有小伙伴问我微信公众号上的文章要怎么去抓取出来。那这一篇文章将会以实际的代码示例来介绍如何去使用python爬虫抓取微信公众号的文章。2.打开python编辑器，新建一个python项目命名为wxgzhPDF并在里面创建一个空白的python文件。1.下载wkhtmltopdf1这个应用程序，它可以将HTML格式的数据转换成PDF格式的。以上就是python爬虫抓取公众号文章并转为PDF格式保存的详细代码示例解析了。
Python爬取指定公众号文章
m0_61720747的博客
03-12 2149
前言 本文仅用于学习使用，不具有任何商业用途，如有问题请及时联系我们以作处理。 一、数据准备 1、在某信公众平台上注册一个账号用于获取关键数据 2、注册完成后按照下面图文操作获取待爬取的公众号信息，搜索自己想要的公众号 点击进入待爬取的公众号，然后在浏览器上鼠标右键点击查看审核元素，点击网络（即network）找到"appmsg"开头的文档打开。 下面我们来解析一下这份文档： 1、URL： 从这可以看出该文档基本url为：问号前面这部分 2、cookie：...
爬虫爬取微信公众号文章，不被封
06-30
爬虫，爬取微信文章，设置多账号，可以解决被封号问题使用技术点： python，selenium（每次登录），mysql，ORM 框架SQLAlchemy，BeautifulSoup，lxml，apscheduler 注意： 1.需要配置爬取数量和每次爬取数量 2.第一...
Python selenium爬取微信公众号文章代码详解
09-16
主要介绍了Python selenium爬取微信公众号历史文章代码详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
Python爬虫源码：微信公众号单页多音频MP3 批量采集提取保存音频文件
03-20
现在微信公众号一篇文章可以上传最多10音频，公众号音频怎么提取？ 我写的这段源码就可以实现了： 输入页面地址、输入文件保存目录位置，运行后自动以标题名自动创建目录，自动批量下载页面中的音频，音频保存在该子...
python使用webdriver爬取微信公众号
01-20
本文实例为大家分享了python使用webdriver爬取微信公众号的具体代码，供大家参考，具体内容如下 # -*- coding: utf-8 -*- from selenium import webdriver import time import json import requests import re ...
python爬虫爬微信公众号文章
11-28
通过搜狗搜索中的微信搜索入口来爬取微信公众号上的文章 时间,文章标题,文章地址,文章简介、图片
使用python爬取数据，里面有爬取的贴吧、微博、微信公众号的数据
06-01
运行的软件是python3，里面命名不规则，可以爬取贴吧，微博及微信公众号里的数据及一些学习时写的代码，可以将数据成功导出到数据库里。只需要改连接数据库的语句。
利用Python实现微信公众号文章的自动发布
很酷的站长的博客
09-16 1019
微信公众号文章的自动发布，指的是通过编程来代替人工手动点击发布，能够极大地节省发布微信公众号文章的时间和精力。Python，作为一种强大的编程语言，可以利用其第三方库来实现。接下来，我们将从准备工作，代码实现和结果展示三个方面来详细阐述Python自动发布微信公众号文章的方法。
python爬取微信公众号_Python爬取微信公众号(中间人代理法)
weixin_39725844的博客
12-03 1602
1、环境：ubuntu16.04 + redis + mysql + python3.5 + anyproxy + android + pm2 + npm + node一台爬虫服，python3环境，建议在ubuntu16.04下，不用再装一次python3。一台代理服，root权限，anyproxy环境和pm2环境，要先装好npm和node才能装anyproxy，pm2是用来控制anyproxy...
Python爬虫采集微信公众号阅读量点赞量等数据
qq_44845247的博客
09-15 1209
微信公众号数据统计
python爬取公众号
wosuxiongmao的博客
02-21 1188
是1 2年前做的了 现在应该有点不一样了。发出来记录 参考：https://blog.csdn.net/qq_28804275/article/details/82150874 https://cuiqingcai.com/4652.html https://www.chenwenguan.com/wechat-browse-automation/#comment-114 https://www.cnblogs.com/luojiangwen/p/7943696.html 目前使用的爬取单个公众号
python自动获取微信公众号最新文章
weixin_45072139的博客
07-14 5376
微信公众号获取思路
Python爬取微信公众号文章、点赞数
热门推荐
Brook
05-14 2万+
Python
python爬取微信公众号
09-06
Python可以用于爬取微信公众号的文章。有几种方式可以实现这一目标，其中一种方式是通过登录微信公众号平台，在里面搜索要爬取的公众号，然后进行抓包。另外一种方式是使用安卓模拟器进行抓包。还可以使用搜狗的微信模块来获取数据。 在使用第一种方式时，首先需要拥有一个微信公众号的账号。然后，通过工具如pycharm和fiddler等，登录微信公众号平台，进入创作管理，选择图文素材，然后创建或编辑文章。最后，通过添加引用和查找公众号文章等步骤，进行数据的爬取和收集。 在实现这些步骤之前，你需要了解微信公众号平台的主要功能和界面布局。主面板可以划分为七大块，每个块都有不同的功能。在后续的操作中，你可以使用Python代码来模拟微信请求，并实现数据的爬取和分析。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [欢度国庆⭐️共享爬虫之美⭐️基于 Python 实现微信公众号爬虫（Python无所不能爬）](https://blog.csdn.net/xiejiachao/article/details/120573509)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* [【爬虫】python爬取微信公众号](https://blog.csdn.net/qq_36269293/article/details/109244944)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 7
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值