本文介绍了尝试爬取今日头条时遇到的挑战，包括动态加载内容的xhr观察、不断变化的headers参数（as、cp和signature）及它们的破解问题。由于签名的动态变化，直接请求无法获取数据。作者分享了一位前辈提供的部分内容抓取方法，并提供了相关链接。同时，文章探讨了Python中字典和JSON字符串的区别，期待读者交流爬虫技术和解决加密的方法。
最近又把之前的东西捡捡，想想之前的那些代码，并照着之前的看了看，感觉自己已经什么都不会了，既然想着捡捡，那就必须要搞点事情了
，想着爬一下网站的内容，然后就好巧不巧的选了今日头条，然而今日头条的问题看起来还不小
，接下来就随我一起去看看吧~_~
1. 首先爬一个网页，最基础的是要观察它的界面，但是不知道小伙伴们发现没有，这个今日头条在谷歌上打开的话，查看源码的时候是没有任何有价值的信息的，所以我们就不能来这个简单的爬的，然后我们来观察网页，按下F12，再刷新一下，如下图：
2. 选中XHR，即为动态加载的意思（先前我一直选中JS，然后一直没有找到任何结果，然后再找前辈问了问，百度查一查，才选中了XHR
，不过最终找到就是好的哈&#x
最低0.47元/天 解锁文章
1万+
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
