老夫撸代码-CSDN博客

原创一分钟学会Python爬虫

微信公众号：老夫撸代码本期：一分钟学会Python爬虫.简明需求这里我先说一下需求：从目标网站每隔一段时间爬取数据，并通过页面展示出来。我们使用python3来爬取数据，使用flask进行页面展示。目标数据如下：安装python3这里使用的是python3.7.0,其它版本也是可以的，但一定是python3下载地址：https://www.python.org/downl...

2019-09-09 09:44:07 897

转载 34行代码爬取微博实时热搜榜单

微博大家都用着，相信大家也都关注了不少的明星，作为一枚合格的粉丝会经常关注明星的八卦动态。如何判断一个明星红不红，看她/他上热搜的次数有多少！！！当然了现在微博的热搜也变味了，不仅仅靠数据统计汇总，大明星随随便便花点儿钱就能买个热搜霸榜几个小时，反而是一些真实需要关注的事儿却上不了热搜，比如前段时间发生的3种颜色上不了热搜。咳咳！！！扯得有点儿远了。记住！这是个技术贴！言归

2017-12-28 10:10:01 19987

虽然说互联网的资源大家都有平等共享的权利，但是我们开发爬虫的时候也要注意职业操守，尽可能不要给对方服务器造成损失，如果后果很严重的话可能要被请去喝茶的，切记！由于此网站做了反爬机制，导致爬取的过程中偶尔会只返回一个js文件，所以这里老夫在docker容器里面跑了一个Splash镜像，实际上爬虫访问的页面是Splash返回的页面。关注老夫的宝子们都知道，老夫业余时间撸了一个电影网站，主要是用Laravel搭建的，里面的数据就是用Python爬取的某个电影天堂网站资源。

2024-04-21 01:16:04 683

原创别总把PHP小哥们当成拍黄片的了

PHP 程序员常常被误以为只能开发成人内容。这话说的没毛病，一般至少一种开发语言的程序员，学习其他语言的能力特别强，语法简单看看，大体都差不多，环境随便搭搭demo可以跑起来，马上就要进入项目开发了，哪里有那么多的时间留给你去仔细的学习源码？他们的工作范围广泛，从简单的网页设计到复杂的电子商务平台开发，PHP 程序员的能力远不止局限于某一领域。咱就说世界排名的前几的黄色网站哪个没有PHP的身影，话又说回来了，上图的那位姑娘拉黑小伙也只能算歪打正着。到手的项目能让它跑了？

2024-04-19 09:41:28 785 1

原创用Python爬虫帮助出版社的实习生批量爬取古籍图片

某天中午，一个陌生微信加了老夫的微信，说有个需求需要请教。收到链接后，马上开撸代码。1、目标网站分析主页(图)主页是一个 table 列表，我们实际需要的数据是全文影像的页面里的数据。全文影像(图)通过点击页面相关链接，老夫发下如下规律：1、全文影像中顶部的分页数字指的是书籍有多少册，如下图有17册。每册链接是：http://db.sido.keio.ac.jp/kanseki/flipping/006659-001/index.html

2020-06-27 14:54:49 612 1

原创你还在手写定时器么？那你就OUT了

微信公众号：老夫撸代码本期:你还在手写定时器么？那你就OUT了定时任务调度需求在日常的开发当中，我们经常会遇到类似如下需求：1、每天凌晨12点执行某个数据库操作。2、每隔2个小时拉取一下某系统的数据。3、每秒钟查询数据库中某个状态，然后执行某种操作。4、…上述需求我相信大家在刚步入小白程序员的阶段就已经遇到过了。我列举一下各种语言的一般处理方式：Java 一(老)般(...

2019-09-09 09:50:55 356

转载如何修改WebUpload上传文件默认调用系统相机，而不是手机相册？

WebUploader是由Baidu WebFE(FEX)团队开发的一个简单的以HTML5为主，FLASH为辅的现代文件上传组件。在现代的浏览器里面能充分发挥HTML5的优势，同时又不摒弃主流IE浏览器，沿用原来的FLASH运行时，兼容IE6+，iOS 6+, android 4+。两套运行时，同样的调用方式，可供用户任意选用。采用大文件分片并发上传，极大的提高了文件上传效率。整体功能很强大，

2018-01-21 20:20:14 8748

转载如何解决Bootstrap的模态框在Framework7中使用出现遮罩无法显示的问题？

Bootstrap和Framework7混用的时候会出现遮罩无法显示的问题，今天看看作者是如何解决的？原文转自码农之家，如何解决Bootstrap的模态框在Framework7中使用出现遮罩无法显示的问题？

2018-01-18 23:31:31 730

老夫撸代码