Python
文章平均质量分 64
Cod_erL
立志发表,没有坑的博客
展开
-
Python 数据抓取之正则表达式
前言:最近换工作了 在创业公司待着,公司刚刚成立 需要找些数据,并分析下,“友商”都是怎么吹你比的,那些号称40W平台展示 3K+ 在线医生的 3W+ 能提供服务的在线互联网医疗平台。发现 40W+收录的是谎报了一半(这个我抓取了10次,每次新医生的差距在 2K左右)3K+ 平台在线的除以6 就是他的真实情况,3W+能提供服务的,这个傻子都能看出来 一页 多少个 一共多少页。(表示很气愤。。。)原创 2016-07-10 20:03:53 · 424 阅读 · 0 评论 -
python 批量添加的button 使用同一点击事件
python 批量添加的button 使用同一点击事件根据传递的参数进行区分。def clear_text(): print '我只是个清空而已'def clear_text(index): print '我只是个清空而已' +str(index)button = Button(framet_title, text='清空', comma原创 2016-09-14 10:31:13 · 13115 阅读 · 16 评论 -
python 利用 selenium 设置cookie 百度云自动化上传
突发奇想,家里摄像头 如果 家里进入小偷,把硬盘给你拔走。。。。 是不是 所有的监控都是白搭。怎么才能用程序去解决这个问题于是乎,两种情况,自己买个服务器 写个FTP 服务器。个人感觉没有必要,一年好几百,硬盘还是不够足够大。现在这个云那个云,都是给好几个T 怎么用都是用不完,我的百度云 没有怎么用过 都给我2T ,足足够存储半年,多申请价格账号。。。。一开始想过用 lib2 去解原创 2016-09-18 17:22:06 · 2913 阅读 · 1 评论 -
python-selenium 自动化弹幕
看着虎牙直播 主播弹窗抽奖。。。。我如果写个自动化弹窗工具,朝夕不止的弹窗该多好啊有想法就开始搞了目标自动化发弹窗,边看边发。采用selenium 基于Python 语言。需要解决的,第一,自动登录(我看了一眼不需要验证码)第二,还可以 利用 cookie 登录第三,自动发弹幕第四,静静的坐那里装逼吧。现在开始做。第一步,登录,http://原创 2016-10-09 15:22:00 · 4799 阅读 · 5 评论 -
Python BeautifulSoup 输入HTML 之后 返回 空值
爬虫 爬取同一个 网站的同一个模板页面,有的可以成功,有的界面 bs4返回 空值(非 Nona )奇了怪 纳了闷了。自己 去Google 都不知道该如何写关键字去搜索。症状:获取的网页page 是正常的,打印也不乱码。就是到BeautifulSoup(html) 之后 返回的是空值。百般无奈 写正则表达式吧。把获取值都改成了 正则表达式,还好当前页面只需要获取几个值。线上运行OK 了原创 2017-01-16 17:30:15 · 6798 阅读 · 2 评论 -
python selenium to click an element not visible
python selenium to click an element not visible症状 在 我的MAC 上 Chrome PhantomJS 都是可以正常运行的 换到 Linux 服务器上 PhantomJS 就不行了 find_element_by_id find_element_by_xpath find_element_by_c原创 2017-02-22 16:33:51 · 2462 阅读 · 0 评论 -
当爬虫碰到加密请求参数
前言:之前查找一个网站的加密方式找了一个星期。放弃了。过了两天又满血归来,一个小时破解了注:本篇博客,不会讲解任何加密相关的算法。爬虫破解加密算法,可以完全不懂加密算法,需要的是耐心先说说最近碰到反爬虫相关的方式吧1.加密+访问次数限制+每个页面相关信息的条目需要点详情进行二次请求2.复杂的加密算法进行参数+时间戳+sig值,后台进行 参数+时间限制3.定时同步cookie+每原创 2017-08-22 15:19:03 · 23018 阅读 · 10 评论 -
Python 一个好用到爆炸的IP端口扫描工具类
去年服务器老是被攻击,每次上线之后,上线的人急急忙忙下班,忘记关闭一些端口。导致有次服务器被攻破。损失严重。这段时间再做仪器对接,把医疗器械对接到我们SAAS平台,有些仪器是通过网线进行数据传输的。通过网线进行数据传输,无非就是通过端口号进行传输交互,但是找不到说明书,国内搞仪器对接开发的也很少,所以网上开源的或者介绍的东西很少,对于我们来说,仪器是个黑盒,想要拿到里面的东西,还要自己去摸索,去试...原创 2018-04-06 22:02:10 · 6464 阅读 · 4 评论