2019年02月_兔子爱读书

转载【Python】爬虫代码报错：Max retries exceeded with url

在爬取boss直聘时出现这种错误，于是搜索了网上很多文章，总结如下： 1.http连接太多没有关闭导致的，解决方法：import requestsrequests.adapters.DEFAULT_RETRIES = 5 # 增加重连次数s = requests.session()s.keep_alive = False # 关闭多余连接s.get(url) # 你需要的网址2...

2019-02-25 18:29:59 6280 1

原创【Python】py3.6请求网站时报错：http.client.RemoteDisconnected: Remote end closed connection without response

爬虫代码报错：http.client.RemoteDisconnected: Remote end closed connection without response原因：服务器限制了User-Agent的访问。1.什么是user-agent?有一些网站不喜欢被爬虫程序访问，所以会检测连接对象，如果是爬虫程序，也就是非人点击访问，它就会不让你继续访问，所以为了要让程序可以正常运行...

2019-02-25 16:16:09 23836 4

转载【Python】Python爬虫包 BeautifulSoup 学习—— bs基本对象与函数

四大对象种类BeautifulSoup将复杂HTML文档转换成一个复杂的树形结构。每个节点都是Python对象，我们只用根据节点进行查询就可以了，因为解析工作交给了框架本身。所有对象可以归纳为4种:Tag BeautifulSoup NavigableString Comment（1）Tag对象举几个例子<title>The Dormouse's stor...

2019-02-24 18:41:58 1136

转载【Python】BeautifulSoap抓取并解析网页流程

一、BeautifulSoap1.首先必须要导入bs4库，创建BeautifulSoap对象#coding=utf-8from bs4 import BeautifulSoupsoup = BeautifulSoup(html,'lxml') #html 为下载的网页，lxml为解析器2.BeautifulSoap主要掌握三种方法find_all('tag') 搜索当...

2019-02-24 12:51:26 15559

转载【机器学】警告：Your CPU supports instructions that this TensorFlow binary was not compiled to use: AVX2 FMA

问题：安装TensorFlow（CPU版本），使用pip install tensorflow安装，安装一切顺利，但是在跑一个简单的程序时，遇到如下情况：大概意思是：你的CPU支持AVX扩展，但是你安装的TensorFlow版本无法编译使用。原因：除了通常的算术和逻辑，现代CPU提供了许多低级指令，称为扩展，例如， SSE2，SSE4，AVX等来自维基百科：高级矢量扩展（AVX...

2019-02-22 20:56:56 452

转载【深度学习】人脸性别和年龄识别

【笔记】python安装cv2： pip install opencv-python--------------------------------------------------------------本文是对age-gender-estimation项目的详细讲解，它给出了使用keras进行性别和年龄识别的完整流程。数据采用的数据集为imdb-wiki，这是一个包含20...

2019-02-22 16:18:53 2551

转载【深度学习】Github 最受欢迎的深度学习项目 TOP 20

必须做好一些是LINUX平台，甚至没有教材根本需要摸索学习的准备，如果有那个变成为在线服务的请第一时间通知我们截止到 2017年 5月14日，Github 最受欢迎的深度学习项目 TOP 20 是哪些吧（统计难免不完善，欢迎评论补充）。我们的这份榜单也会持续更新。1. TensorFlowStar：56,796Github 地址：https://github.com/tensorf...

2019-02-22 15:56:25 5763

转载【计算视觉】人脸识别用哪个数据库较好

目前人脸识别领域常用的人脸数据库主要有:1. FERET人脸数据库[2]由FERET项目创建,包含14,051张多姿态,光照的灰度人脸图像,是人脸识别领域应用最广泛的人脸数据库之一.其中的多数人是西方人,每个人所包含的人脸图像的变化比较单一.2. MIT人脸数据库[4]由麻省理工大学媒体实验室创建,包含16位志愿者的2,592张不同姿态,光照和大小的面部图像.3. Yale人...

2019-02-22 15:54:09 1083

转载【计算视觉】用Python识别人脸，表情，性别，颜值，人种...

最近几天了解了一下人脸识别，应用场景可以是图片标注，商品图和广告图中有没有模特，有几个模特，模特的性别，年龄，颜值，表情等数据的挖掘。基础的识别用dlib来实现，dlib是一个机器学习的包，主要用C++写的，但是也有Python版本。其中最流行的一个功能是Facial Landmark Detection, 配备已经训练好的轮廓预测模型，叫shape_predictor_68_face_l...

2019-02-22 15:43:54 4445

转载【计算视觉】人脸属性识别算法 | 性别+种族+年龄+表情

随着社会的发展，快速有效的自动身份验证在安防领域变的越来越迫切。由于生物特性是人的内在属性，具有很强的自身稳定性和个体差异性，是身份验证的最理想依据。利用人脸属性进行身份验证又是最自然直接的手段，相比其它人体生物特性，它具有直接、友好、方便的特点，更容易被用户所接受且不易察觉。一、人脸属性识别与算法人脸是一种非常重要的生物特征，具有结构复杂、细节变化多等特点，同时也蕴含了大量的信息，比...

2019-02-22 15:39:51 14727 1

转载【教程】CRX格式插件不能离线安装？本地扩展CRX无法安装怎么办？

最近有很多用户反映有一些Chrome插件在离线安装的时候，根据本站的教程：离线安装CRX格式chrome插件的方法。无法正常完成安装，提示“只能通过Chrome网上应用商店安装该程序”，小编为了了解这一问题，今天将谷歌浏览器升级到了最新版本，在安装扩展脚本的时候，确实发现了这个问题的存在。经过查找相关资料，发现Chrome 21.x系列增加了对扩展插件安装的限制, 自Chrome 21.x开始默...

2019-02-21 18:33:14 8786

转载【Python】通过xlwt模块使用表格

def create_table(keyword): ## 创建表格名称 if '%' in keyword: keyword.replace('%','+') tableName = 'zhihu-' + keyword + '.xls' wt_book = xlwt.Workbook(encoding = 'utf-8', style_comp...

2019-02-17 01:44:23 1098

转载【它山之玉】关于年龄的焦虑的一些安慰

1. 这个世界不是线性的一个典型的学生思维就是，这个世界是线性的。因为小学、初中、高中、大学全都是按部就班这么过来的，所以就会认为如果别人22岁毕业，那么我21岁毕业就会有无限大的优势，同理可证硕士和博士阶段。同时这些人也会用这一套应用到工作中，比如你刚进入公司是P4，明年是P5，这些人会认为如果你接下来肯定是P6啊！可是这个世界并不是这样的，P5之后或许是跳槽，或许是失业，当然...

2019-02-16 19:27:36 1050

原创【Python】正则表达式过滤文本中的html标签、url超链接、img链接

测试文本："给大家看看原始文本。。。 ----------------------------<a class="member" href="https://www.aaa.com/people/0970f947b898ecc0ec035f9126dd4e08" data-hash="0970f947b898ecc0ec035f9126dd4e08" data-hovercard="p$...

2019-02-15 13:34:49 7015 1

转载【Python】如何利用百度API进行地理编码（将地名转换为经纬度信息）

先附上完整代码，修改一下自己的百度密钥即可运行。注意：只能检索中文地址，英文不可识别。#-*-coding:utf-8-*-from urllib.request import urlopen, quoteimport os, sys, codecs, jsonpath = sys.path[0] + os.sepprint(path)def getlnglat(address...

2019-02-04 11:51:59 1985

原创【Python】为什么无法strip()掉数据文件中的换行

问题：我想替换掉如下数据中，twitter转发的文本部分的换行：begin 25/11/2014 17:11:22 @jdbueno2011 Juan Bueno "RT @_thatshimyall: Don't scroll#Retweet To Say R.I.P#Fav To Show Justice http://XXXXX" Twitter for iPhone ...

2019-02-03 13:01:51 2838

转载【Python】正则表达式匹配日期与时间

【笔记】# 其他格式匹配. 如2016-12-24与2016/12/24的日期格式.date_reg_exp = re.compile('\d{4}[-/]\d{2}[-/]\d{2}')-----------------------------------------------------------------------------------------------------...

2019-02-02 18:02:50 14928

小白兔的窝