ljc545w的博客

汇编手记之第一个窗口程序

文章目录写在前面用到的包静态文件代码部分采集数据数据去重获取国家边界装饰器绘图主函数边界文本完整代码参考文献写在前面带伙们可以先看下腾讯的图，非常漂亮：腾讯位置大数据星云图再看看本文代码绘制的图，逼格降低99%：但是轮廓还是有的！！！对吧？用到的包import reimport requestsimport jsonfrom fake_useragent import UserAgentimport pandas as pdimport numpy as npfrom s

模拟二维码登录百度写在前面准备工作二维码地址登录状态获取gid登录参数代码部分二维码展示获取cookie完整代码写在后面写在前面前段时间写了利用BDUSS到达百度首页，这一次尝试使用二维码模拟登录，目前网上能搜到的相关内容基本失效了，但是思路基本不变，无非是百度改了些参数。本文较为复杂，要求对python的requests模块以及Chrome审查元素有一定了解，我不确定自己是否能完全讲明白，讲多少是多少吧，各位看官请坐。准备工作二维码地址打开Chrome浏览器，清理掉baidu.com下的所有co

写在前面作为一个水笔，我的梦想是无休止的灌水，无休止的经验+3，所以写了这么一个东西帮我灌水！需要的参数是cookie中的BDUSS，如何获取，咳咳，百度一下就好了嘛。包和全局变量#网页请求import requests#对变量进行深拷贝import copy#时间、正则import time,re#网页解析from bs4 import BeautifulSoup as bs#请求头headers = { "User-Agent": "Mozilla/5.0 (Window

文章目录写在前面用到的包主要代码如何使用写在后面写在前面昨天上班的时候老哥问我能不能把cctv的视频下载下来，本着能播放就能下载的原则，我打开了F12。。。想获得完整的视频下载地址是有些难度的，不过把所有的视频流按顺序写进同一个二进制文件也是可行的办法。顺便尝试了一下从命令行获取参数，以及在下载过程中使用进度条。用到的包#爬取模块import requests#正则表达式、文件夹、系统变量import re,os,sys#进度条相关from tqdm import tqdm主要代码根

文章目录发现错误报错信息错误分析两种方案可能的问题写在后面发现错误登录mysql，使用show databases;和show tables;这两个命令时报错ERROR 1449，备份数据库时报了同样的错误，这样的话卸载mysql重装就变得非常危险。报错信息ERROR 1449 (HY000): The user specified as a definer (‘mysql.infoschema’@‘localhost’) does not exist错误分析报错信息提示用户mysql.info

文章目录写在前面demo主体用到的包初始化变量抓取页数清洗工资数据循环爬取信息保存信息控制函数入口函数数据可视化存在不足参考文献写在前面最近在学习爬虫和数据分析，在CSDN看到TRHX • 鲍勃的文章，受益匪浅，但是在爬取数据的时候，发现前程无忧使用了动态加载js，使用requests无法爬取部分数据，而且调用lxml解析网页变得比以前更难了，这里使用的反反爬就是selenium和re正则暴力匹配…bs4可能仅仅用于解决Unicode字符编码问题。demo主体拼接起来即为完整代码。用到的包#用于

爬取微博热搜并发送提醒写在前面用到的包全局变量爬取数据发送邮件开始任务入口函数定时提醒注意事项结果展示请参考以下内容写在前面今天在CSDN看到了一篇爬取微博热搜并发邮件的博客，但是我在将其部署到腾讯云函数时出现了错误，于是使用server酱推送到微信，效果看起来还不错，废话不多说，上代码！用到的包# -*- coding: utf-8 -*-"""Created on Thu Aug 6 18:09:58 2020@author: 勇敢自由"""#请在cmd下使用pip install

文章目录写在前面标题非常可口1：用到的包2：定义主函数3：获取图库的地址4：创建图库路径并保存第一张5：正则提取壁纸的URL特征6：保存壁纸完整代码爬取结果写在后面写在前面今天没事情做，想着换换电脑桌面，于是就搞出来这样一个东西。。这个网站没有什么反爬措施，也很适合练手用。标题非常可口1：用到的包from bs4 import BeautifulSoup as bsimport requestsimport os,refrom urllib import request2：定义主函数#

文章目录写在前面Title1：源码和文件2：解决黑屏问题3：如何打包4：解决打包过大问题写在后面写在前面大概八个月以前就跟着书上写完了外星人入侵的小游戏，但是在打包的时候遇到了各种问题，打包完成开始游戏时总是黑屏然后闪退，前两天看到有位同学写完这个项目发布的博客，我在评论区留下了自己魔改了一点的…收获了40多个赞，于是我又搜索了一下如何才能正确打包，现在分享给大家。Title1：源码和文件百度网盘提取码：hr64今天注册github一直报错，收不到验证邮件…2：解决黑屏问题在scorebo

文章目录写在前面这是一个标题1：用到的包2：获取网页数据3：输出和保存4：构造url5：主函数完整代码结果展示写在后面写在前面昨天爬取的是影评，今天试了下爬top100榜单，网上这类资源有很多，但是自己也摸索了挺久，就记录一下吧。这是一个标题1：用到的包import reimport requestsimport time2：获取网页数据def get_data(url,headers): r = requests.get(url,headers = headers) r

文章目录写在前面这是一个标题1：用到的包2：构造URL3：读取网页4：获取json数据5：解决编码错误6：保存为txt7：主函数完整代码结果写在后面写在前面第一次写博客。。记录下自己学习python的过程。这是一个标题1：用到的包import requestsimport jsonimport timeimport sys2：构造URL#构造url urls = [] movieID = '1375'#这个是《活着》的电影ID for i in range(10