- 博客(575)
- 收藏
- 关注
RSS订阅原创 知乎大神用Python爬取高颜值美女（爬虫+人脸检测+颜值检测）
1 数据源知乎话题『美女』下所有问题中回答所出现的图片2 抓取工具Python 3，并使用第三方库 Requests、lxml、AipFace，代码共 100 + 行3 必要环境Mac / Linux / Windows （Linux 没测过，理论上可以。Windows 之前较多反应出现异常，后查是 windows 对本地文件名中的字符做了限制，已使用正则过滤） 无需登录知乎...
2019-11-08 14:23:51
1259
原创 Python爬虫：爬一下十月份的就业情况！金九银十你听过吗？
不知不觉，十月份已经过去了，传说中的金九银十招聘季也应该随之结束了，不知道有换工作打算的朋友有没有找到理想的下家，反正我没有于是乎，我再次转战 Boss 直聘，我就是想看看，到底什么工种比较好找工作呢。当然了，这里工作种类实在是太多了，我就挑选出 Python，Java，数据分析和产品经理这四种岗位来做下简单的分析。获取数据我在前面就写过一篇获取 Boss 数据的文章，可以戳...
2019-11-08 14:16:33
790
原创 资深程序媛手把手教你如何从零基础进行电影数据数据分析采集！
本文是爬虫及可视化的练习项目，目标是爬取猫眼票房的全部数据并做可视化分析。1、获取url我们先打开猫眼票房http://piaofang.maoyan.com/dashboard?date=2019-10-22 ，查看当日票房信息，但是在通过xpath对该url进行解析时发现获取不到数据。于是按F12打开Chrome DevTool，按照如下步骤抓包...
2019-10-29 13:38:37
1241
原创 利用python爬虫关键词批量下载高清大图！
前言在上一篇写文章没高质量配图？python爬虫绕过限制一键搜索下载图虫创意图片！中，我们在未登录的情况下实现了图虫创意无水印高清小图的批量下载。虽然小图能够在一些移动端可能展示的还行，但是放到pc端展示图片太小效果真的是很一般！建议阅读本文查看上一篇文章，在具体实现不做太多介绍，只讲个分析思路。当然，本文可能技术要求不是特别高，但可以当作一个下图工具使用。环境：pyth...
2019-10-05 13:21:27
309
原创 Python+OpenCV图像处理！PS对于图像处理来说简直小儿科！
序简介： OpenCV（Open Source Computer Vision Library）是一个跨平台的计算机视觉库。应用领域：OpenCV可用于解决如下领域的问题： 增强现实 人脸识别 手势识别 人机交互 动作识别 运动跟踪 物体识别 图像分割 机器人 作为一个游离在编程大门之外的小白，我...
2019-09-23 14:14:48
1470
原创 我是怎么利用Python+RFM模型高效了解用户！
是的，我们每个人在平台的眼里，价值都是不一样的。比如一些天天上网购物，拆快递拆到手软的美女帅哥们，他们就是各个平台的高活跃高价值用户，他们要是哪天有停止购物准备跑路的痕迹，平台的运营朋友会急得想死，千方百计进行挽留，毕竟你是他们的衣食爹妈，死活得让你继续贡献软妹币。还有一些用户就没这么好运了。比如东哥这种死抠门，三年五年不见得出一次血，一个49块钱买的破衬衣要穿好几个春夏秋冬。这...
2019-09-23 14:08:50
1929
1
原创 做了一个利用Python自动打开软件的程序！室友以为电脑中毒了！
这里我要推荐一个可以控制鼠标和键盘的库，pyautogui，据它的官方文档，PyAutoGUI的目的是为人类的GUI自动化提供跨平台的Python模块。既然能控制了，只要安排好逻辑就可以使其按照我想要的想法去运动起来，例如，获取我们的语音消息，例如打开什么软件，然后程序就自动去运行点击这个软件的代码，这样就打开了这个软件了。这里我们就不去用语音那么复杂了，麻烦点，自己手动输入要打开的程序...
2019-09-23 14:02:12
9589
原创 Python语言在智能时代中的优势与发展前景，我要学Py！
谁会成为AI 和大数据时代的第一开发语言？这本已是一个不需要争论的问题。如果说三年前，Matlab、Scala、R、Java 和 Python还各有机会，局面尚且不清楚，那么三年之后，趋势已经非常明确了，特别是去年 Facebook 开源了 PyTorch，今年年初Google发布最新版本的深度学习框架TensorFlow之后，Python 作为 AI 时代头牌语言的位置基本确立，...
2019-09-23 13:48:37
524
原创 这招Python技术你必学！关键时候能救你一命的那种哦!
今天教大家如何利用Python模拟登录网易163邮箱并发送SOS邮件！基本环境配置版本：Python3系统：Windows需要安装：1. Selenium - 建议使用低版本的Python-Selenium库，因为高版本在Chrome中不支持。pip3 install selenium==2.48.02. chromedriver.exe - ...
2019-09-23 13:41:41
246
原创 滑块验证码现在是做火的验证码系列了吧！利用Python强势破解！
导语记录一次利用Python+Selenium破解滑块验证码的实战过程。让我们愉快地开始吧~开发工具Python版本：3.6.4相关模块：pillow模块；selenium模块；numpy模块；以及一些Python自带的模块。其他：chromedriver环境搭建安装Python并添加到环境变量，pip安装需要的相关模块即可。实战记录...
2019-09-23 13:24:43
1266
原创 使用深度学习实现乳腺癌分类，附python演练！每个男同胞的会啊！
乳腺癌是全球第二常见的女性癌症。 2012年，它占所有新癌症病例的12%，占所有女性癌症病例的25%。当乳腺细胞生长失控时，乳腺癌就开始了。这些细胞通常形成一个肿瘤，通常可以在x光片上直接看到或感觉到有一个肿块。如果癌细胞能生长到周围组织或扩散到身体的其他地方，那么这个肿瘤就是恶性的。以下是报告：大约八分之一的美国女性（约12%）将在其一生中患上浸润性乳腺癌。 2019年，美国预...
2019-09-22 14:57:44
2077
1
原创 使用PyTorch进行情侣幸福度测试!情侣慎用！切记！
DeepConnection模型框架计算机视觉--图像和视频数据分析是深度学习目前最火的应用领域之一。因此，在学习深度学习的同时尝试运用某些计算机视觉技术做些有趣的事情会很有意思，也会让你发现些令人吃惊的事实。长话短说，我的搭档（Maximiliane Uhlich）和我决定将深度学习应用于浪漫情侣的形象分类上，因为Maximiliane是一位关系研究员和情感治疗...
2019-09-22 14:50:30
400
原创 身为一名项目经理，写了个Python脚本，看他们在认真工作还是摸鱼
简介想看看你最近一年都在干嘛？看看你平时上网是在摸鱼还是认真工作？想写年度汇报总结，但是苦于没有数据？现在，它来了。这是一个能让你了解自己的浏览历史的Chrome浏览历史记录分析程序，当然了，他仅适用于Chrome浏览器或者以Chrome为内核的浏览器。在该页面中你将可以查看有关自己在过去的时间里所访问浏览的域名、URL以及忙碌天数的前十排名以及相关的...
2019-09-22 14:36:41
566
原创 Python真神奇，带你体验另类的“全自动编程”！
近年来“自动编程”、“智能编程”方面的项目层出不穷，例如AutoML、kite，以及最近风靡一时的python_autocomplete，这些项目有一个共同点，就是基于机器学习模型，致力于提升代码补全和自动生成水平。不过今天要展示的自动编程与上述概念不同，这次我们不讲学术、不论实用，抱着娱乐的心态体验一把另类的“全自动编程”模式。...
2019-09-22 14:29:37
390
原创 给大家介绍一款反爬教科书级别的网站！爬下这个网站就是大牛了！
具体的数据如下查看页面源代码发现，一个好玩的事情，源代码中使用了大量的CSS3的语法下图，我标注的部分就是关键的一些数据了，大概在600行之后。反爬措施展示源文件数据刹车/<span class='hs_kw86_baikeIl'></sp...
2019-09-22 14:17:07
731
1
原创 用AI打电话骗走22万，Python编写的软件，克隆你的语音只需5秒！
用 AI 打一个电话骗走 22 万欧元AI 技术的应用门槛正在不断降低，换脸、换声音、生成各种不存在的人像都变得非常容易，但与此同时，犯罪的门槛也降低了。据《华尔街日报》报道，今年 3 月份，一个不知名的黑客组织利用 AI 语音克隆技术打诈骗电话，结果成功骗到了 22 万欧元。接电话的是英国能源公司...
2019-09-22 14:07:36
2299
原创 玩爬虫想封我IP？看我伪装浏览器的技术！封我ip不存在！
浏览器伪装技术实战1 网站常见的反爬虫和应对方法一般网站从三个方面反爬虫：用户请求的Headers，用户行为，网站目录和数据加载方式。 前两种比较容易遇到，大多数网站都从这些角度来反爬虫。第三种一些应用ajax的网站会采用，这样增大了爬取的难度。免费资源共享，解答技术问题交流基地群：626017123① 通过Headers反爬虫从用户请求的Head...
2019-09-22 13:53:46
596
原创 用Python写了一个自动弹幕脚本！各大小主播纷纷找我！净赚三万！
大家好,今天又给大家带来了Python爬虫的分享,今天我们继续上次的问题,继续来研究一下虎牙平台的爬虫。1.起因写完上次的代码,我冒出有一个很有趣的想法,就是,我们可以使用selenium来完成虎牙自动化登录,并且自动给主播发送弹幕功能的程序。既然有了想法,我们就开始实现,首先我们要先确定进入一个直播间,然后去发送弹幕,我选取的是英雄联盟板块...
2019-09-22 13:49:49
7107
3
原创 支付宝现如今是付款刚需！今天我用Django开发一款支付宝出来！
目录一. 开发前的准备1. 必须了解的知识SDK：软件开发工具包，可以为开发者提供快速开发的工具 沙箱环境：也就是测试环境 支付宝支付金额的精度：小数点后两位（面试） 支付宝用的什么加密方式：RSA 2. 沙箱环境的配置 ① 登录支付宝开放平台 https://auth.alipay.com/login/ant_sso_index.htm?goto=https%3A%2F%...
2019-09-22 13:29:25
863
原创 国庆马上就要来了，你抢好票了吗？利用Python监控余票！
富贵家在开封人在南京，他最近打算国庆回家，可是没有抢到票。这个时候富贵也可以选择用携程等软件付费抢票。但是富贵有点节俭，他不愿意花这个钱。没事富贵有技术，他打算用Python写一段代码来监控12306余票。01分析网页信息用任一浏览器打开12306官网，进入车票查询界面，从网页中我们找到了查询动作请求的网址，这时候我们可以用一段代码把请求的数据下载下来。...
2019-09-21 15:18:44
329
原创 听说你还在为问wifi密码而感到不好意思？我从来都是暴力破解的！
Python真的是无所不能，原因就是因为Python有数目庞大的库，无数的现成的轮子，让你做很多很多应用都非常方便。wifi跟我们的生活息息相关，无处不在。今天从WiFi连接的原理，再结合代码为大家详细的介绍如何利用python来破解WiFi。01.如何连接wifi首先我们的电脑是如何连接wifi的呢？就拿我们的笔记本电脑来说，我们的笔记本电脑都有无线网卡，如下...
2019-09-21 14:56:00
723
原创 各大新生的军训马上快结束了！Python告诉你军训前后你黑了几度！
一年一度的大学开学季，一年一度的军训季。在六月中旬高考结束之后，万千学子迎来了他们人生中最长也是最无忧无虑的假期，到了八月底九月初，他们将踏上人生的一段重要旅程——大学。然而等待他们的第一课，便是军训。每所高校对军训的要求不同，从时间来看，短的只有5天，长的多达一个月，根据网上一份军训时间排行榜，比如清华大学，以34天稳居第二。（警校排第一也是无可厚非了，不...
2019-09-21 14:51:03
411
原创 听说爬虫是违法的？那为什么还有这么多人学！这位大佬给出了答案！
一、自述1.关于大学我读的大学是个野鸡学校，虽说是一个计算机专业，但实际的课程内容很杂。CAD、3DMAX、Office全家桶之类的都会有，所以在校期间对编程方面的成长并不大，当时也就只有写个批量改文件名的工具这种水平。毕业以后到目前为止也就在两家公司工作过，一家是上家公司，另一个是现在这家，总体路程还算顺利吧，没遇到过什么大的挫折，各种需求也能逼着自己成长。2.接触爬虫...
2019-09-21 14:40:35
5845
原创 经理让我用Python写一个刷脸考勤系统，奖励我五万！我亏了吗？
需求分析“员工刷脸考勤”系统，采用Python语言开发，可以通过摄像头添加员工面部信息，这里就涉及到两个具体的个问题，一个是应该以什么样的数据来标识每一个员工的面部信息，二是持久化地保存这些信息到数据库中去。更细地，还涉及表的设计；另一个基本要求是通过摄像头识别员工面部信息来完成考勤，这个问题基本可以通过遍历数据库里的员工面部数据与当前摄像头里的员工面部数据的比对来实现，但有一个问题就是...
2019-09-21 14:35:18
663
原创 破解一个滑块验证码需要多少行代码？两千？一千？两百行就够了！
做网络爬虫的同学肯定见过各种各样的验证码，比较高级的有滑动、点选等样式，看起来好像挺复杂的，但实际上它们的核心原理还是还是很清晰的，本文章大致说明下这些验证码的原理以及带大家实现一个滑动验证码。加群获取源码：626017123我之前做过 Web 相关开发，尝试对接过 Lavavel 的极验验证，当时还开发了一个 Lavavel 包：https://github.co...
2019-09-21 14:27:03
494
原创 三块你可以买到周董的新歌！五分钟就可以爬取新歌二十万评论！
9 月 16 日晚间，周董在朋友圈发布了最新单曲《说好不哭》。发布后，真的让一波人哭了，一群想抢鲜听的小伙伴直接泪奔。因为 QQ 音乐直接被搞崩了！没想到干翻 QQ 音乐的不是网易云音乐，也不是虾米音乐，而是周董！周董成成功地凭一己之力干翻了 QQ 音乐！那么听过周董新歌后的小伙伴都是怎么评价的呢？这里，我们获取了 QQ 音乐的近 20W 条评论数据进行分析，看看其中...
2019-09-21 14:15:20
241
原创 Python究竟有多牛？它能帮助你的孩子找到心仪的幼儿园！
又快到了幼儿园报名的季节了，身边很多朋友有很多都说起要高价请枪手帮助秒杀报名的，其实幼儿园报名本质上还是一个比较简单的任务，粗略来看这只是一个网页爬虫加自动答题的需求。去年博主为孩子进行幼儿园报名时用了Selenium+Python的方式，效果不错。今年我在研究R语言的过程中，发现这个看似最简单的R语言也可以做相应的秒杀。我把相关编程的思路整理了一下，供各位参考。我尽量将全部的细节说清，对于读者也...
2019-09-21 13:44:44
302
原创 骚操作之Python微信远程控制摄像头！然后嘿嘿嘿！
盯着电脑工作大半天了，有点疲劳，想想同样苦逼盯着电脑的女朋友，就想逗逗她缓解一下疲劳。于是一时手痒，开始了新一轮的骚操作，用Python基于itchat实现微信控制电脑打开摄像头拍摄当前电脑的使用者并且将图片发送到你微信上的功能。看到图片后差点闪瞎我 24k 血轮眼。打码上图：这个骚操作的程序脚本源码加群：626017123本操作是可以连续拍摄多张的。...
2019-09-21 13:39:24
2688
1
原创 零基础必看教程!Scrapy高级用法！
日志相关一、日志相关变量每个新进群的小伙伴都送十套PDF！以及一套视频哦！群：626017123LOG_LEVEL = ''LOG_FILE = '文件名.log'二、日志级别5 CRITICAL ：严重错误4 ERROR ：普通错误3 WARNING ：警告2 INFO ：一般信息1 DEBUG ：调试信息注意: 只显示当前级别的日志和比当前级别日...
2019-09-21 13:26:34
463
原创 Python 带你抢视频红包，不放过一个红包！
今天给大家分享一个如何利用 Python 技术薅视频的红包！不仅让你学习到 Python 技术，还可以赚到钱。手把手教学，还附带源码！看完的同学，我觉得可以来一波在看+转发！1目 标 场 景Python资源共享群：626017123如今短视频横行的时代，以某短视频为首的，背后依靠着强大的资金后盾，疯狂地对平台用户进行红包轰炸。与传统的红包不一样，视...
2019-09-21 13:23:27
309
1
原创 Python爬虫经典案例详解：爬取豆瓣电影top250写入Excel表格！
解析数据 我们需要使用BeautifulSoup这个功能模块来把充满尖括号的html数据变为更好用的格式。 from bs4 import BeautifulSoup这个是说从(from)bs4这个功能模块中导入BeautifulSoup，是的，因为bs4中包含了多个模块，BeautifulSoup只是其中一个。 soup = BeautifulSoup(html.text, 'html.p...
2019-09-20 19:27:02
3123
原创 基于python的selenium两种文件上传操作 ！
方法一、input标签上传如果是input标签，可以直接输入路径，那么可以直接调用send_keys输入路径，这里不做过多赘述，前文有相关操作方法。Python资源共享群：626017123方法二、非input标签上传这种上传方式需要借助第三方工具，主要有以下三种情况：1.AutoIt去调用它生成的au3或者exe格式的文件2.SendKeys第三方库（...
2019-09-20 19:22:58
658
原创 Python Code Examples Python代码示例！
Pythonis a general purpose programming language which is dynamically typed, interpreted, and known for its easy readability with great design principles.是一种通用编程语言，它具有很好的设计原则，因其易于阅读而动态地输入，解释和着名。fr...
2019-09-20 19:20:59
5276
1
原创 Python 开发植物大战僵尸游戏！
开发思路完整项目地址：https://github.com/371854496/pygame更多好玩有趣的python，尽在公众号「Python专栏」，后台回复「机器学习电子书」免费获取100本机器学习电子书Python资源共享群：626017123引入需要的模块，配置图片路径，设置界面宽高背景颜色，创建游戏主入口。#1引入需要的模块import ...
2019-09-20 19:17:55
598
1
原创 Python异常知多少以及如何处理？
本文主要是认识python的异常有哪些类型，以及如何进行python异常处理?有一定的参考价值，有需要的朋友可以参考一下，希望对你有所帮助。如果有其它编程语言经验，如Java，可以理解的更深入些。Python资源共享群：626017123我们知道，异常处理，是编程语言或计算机硬件里的一种机制，用于处理软件或信息系统中出现的异常状况(即超出程序正常执行流程的某些...
2019-09-20 19:15:47
239
原创 是时候让大家看看你用django写出来的博客了！
博客的基础功能已经开发的差不多了，虽然还有很多地方可以完善，但我们还是希望早点把博客部署到服务器上，让他人可以通过外网访问。至于有待完善的地方，可以等部署完后一点点地迭代和改进。现在就让我们来把博客部署到服务器上吧！Python资源共享群：626017123↓↓↓ 视频在这里 ↓↓↓作者亲自录制的真机环境演示部署全过程，再不成功你打我！B 站演示（阿里云 CentOS 7 系统）观看地...
2019-09-20 19:11:55
351
原创 Python网络爬虫实战——模拟登录！
对于一个网站的首页来说，它可能需要你进行登录，比如知乎，同一个URL下，你登录与未登录当然在右上角个人信息那里是不一样的。Python资源共享群：626017123(登录过)(未登录)那么你在用爬虫爬取的时候获得的页面究竟是哪个呢？肯定是第二个，不可能说你不用登录就可以访问到一个用户自己的主页信息，那么是什么让同...
2019-09-20 19:05:27
922
原创 Python爬虫进阶，X天下 与 XX二手房加密算法分析！
通过输入错误密码抓包查看加密字段。【图1-1】Python资源共享群：626017123直接通过检索pwd:定位加密位置【图1-2】。根据检索结果给对应的位置打上断点【图1-3】，并把划线的代码复制出来备用。重新发起请求，发现这些参数大概是下面这样的：// that.password.va...
2019-09-20 18:59:14
223
原创 Python实现语音识别和语音合成！
目录语音识别 MFCC 隐马尔科夫模型声音合成声音的本质是震动，震动的本质是位移关于时间的函数，波形文件(.wav)中记录了不同采样时刻的位移。Python资源共享群：626017123通过傅里叶变换，可以将时间域的声音函数分解为一系列不同频率的正弦函数的叠加，通过频率谱线的特殊分布，建立音频内容和文本的对应关系，以此作为模型训练的基础。案例：画出语音信号的波形和频率分布，（fre...
2019-09-20 18:55:28
1075
原创 Python网络爬虫与信息提取！
置，返回match对象re.match()从一个字符串的开始位置起匹配正则表达式，返回match对象re.findall()搜索字符串，以列表类型返回全部能匹配的子串re.split()将一个字符串按照正则表达式匹配结果进行分割，返回列表类型re.finditer()搜索字符串，返回一个匹配结果的迭代类型，每个迭代元素是match对象re.sub()在一个字符串中替换所有匹配正则表达式的子串，返回...
2019-09-20 18:48:58
265
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人