自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(27)
  • 收藏
  • 关注

转载 mysql数据库之索引

借鉴:http://www.jb51.net/article/98442.htm   https://www.cnblogs.com/aspnethot/articles/1504082.html转载于:https://www.cnblogs.com/GUIDAO/p/8094563.html...

2017-12-23 21:52:00 137

转载 mysql的三大范式解释——转载知乎刘慰老师

作者:刘慰链接:https://www.zhihu.com/question/24696366/answer/29189700来源:知乎著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。国内绝大多数院校用的王珊的《数据库系统概论》这本教材,某些方面并没有给出很详细很明确的解释,与实际应用联系不那么紧密,你有这样的疑问也是挺正常的。我教《数据库原理》这门课有几年了...

2017-12-03 14:14:00 208

转载 mysql的三大范式

网上找的,原创不知:谅解更详细的是知乎刘慰老师:https://www.zhihu.com/question/24696366/answer/29189700 后面还有王红波用户的解释可以借鉴第一范式:确保每列的原子性. 如果每列(或者每个属性)都是不可再分的最小数据单元(也称为最小的原子单元),则满足第一范式. 例如:顾客表(姓名、编号、地址、……)其中"地址"...

2017-12-03 13:45:00 142

转载 Python+requests 爬取网站遇到中文乱码解绝方案?

以上标题的文章,先前照搬别人的,没注意加原创链接,也找不到了!现在觉得好的内容都会加上原创链接:https://www.2cto.com/kf/201207/142453.html"""字符串在Python内部的表示是unicode编码因此,在做编码转换时,通常需要以unicode作为中间编码,即先将其他编码的字符串解码(decode)成unicode,再从unicode编码(e...

2017-11-16 23:39:00 251

转载 面试HR问题

1.自我介绍自我介绍的主要结构:个人基本信息 + 基本技术构成 + 项目经验(具体项目以及在项目中的负责部分)+ 自我评价其中的原则:就是紧紧围绕招聘岗位的需求做介绍。在此之前要做好准备工作,看看招聘方具体需要什么方向的研发工程师。2.不要给自己挖坑确保你在回答面试官的过程中,回答中的每个知识点都了然于胸,不然被问住,是很难堪的。所以斟酌你说的每一句话,聪明点的同...

2017-09-25 22:58:00 93

转载 生成器.next

转自:http://www.cnblogs.com/python-life/articles/4549996.html#3241763send(msg) 与 next()的返回值程序的详细解释如下(用pycharm里的debug,就能详细的看代码的运行过程):def h(): print 'Wen Chuan', m = yield 5 # Fighting! ...

2017-09-25 20:51:00 103

转载 SVN使用教程

转自:http://www.cnblogs.com/armyfai/p/3985660.html#3517089SVN简介:为什么要使用SVN?程序员在编写程序的过程中,每个程序员都会生成很多不同的版本,这就需要程序员有效的管理代码,在需要的时候可以迅速,准确取出相应的版本。Subversion是什么? 它是一个自由/开源的版本控制系统,一组文件...

2017-09-25 20:34:00 115

转载 Python之os模块的常见用法

转自:http://zhpfbk.blog.51cto.com/4757027/1561926在Python的标准库os模块中包含普遍的操作系统功能os 模块引入的方法是: import os以下为 os 模块常见的使用方法:1、os.getcwd 获取当前的工作目录,即程序执行的目录2、os.name 字符串指示正在使用的平台。比如,windows是...

2017-09-25 19:51:00 102

转载 Python之使用正则函数处理文本里的杂质

# -*- coding: utf-8 -*-import reclass Tool(): # 去除img标签,7位长空格 removeImg = re.compile('<img.*?>| {7}|') # 删除span标签 removeSpan = re.compile('<span.*?>| {7}|') # 删除超链接标签 ...

2017-09-17 18:07:00 106

转载 Python之复制的cookie参数处理成规整的参数值

# -*- encoding:utf-8 -*-class transCookie: def __init__(self, cookie): self.cookie = cookie def stringToDict(self): ''' 将从浏览器上Copy来的cookie字符串转化为Scrapy能使用的Dict :r...

2017-09-17 18:05:00 178

转载 Python之urllib,urllib2--常用步骤和进阶

转自:http://www.cnblogs.com/kennyhr/p/4018668.html(侵权可联系本人删掉)一直以来技术群里会有新入行的同学提问关于urllib和urllib2以及cookielib相关的问题。所以我打算在这里总结一下,避免大家反复回答同样的问题浪费资源。这篇属于教程类的文字,如果你已经非常了解urllib2和cookielib那么请忽略本篇。首先从...

2017-09-17 17:25:00 103

转载 python之什么是初始化,实例化,区别

---恢复内容开始---一.首先必须先了解类和实例的区别类是你定义的这个新类型,这个类型可以有很多个实例。比如 a = A(),A是个类,a就是A的一个实例,同样可以b=A(),b也是A的一个实例。初始化函数__init__在实例刚创建完成的时候调用,这里可以对这个实例的属性进行初始化 classA:def__init__(self,num):...

2017-09-10 14:30:00 117

转载 Python--打分

# -*- encoding: utf-8 -*-import reimport sysimport MySQLdb# db = MySQLdb.connectionimport jsonreload(sys)sys.setdefaultencoding("utf-8")keyword = {}for line in open('keyword.txt', 'r'): datas ...

2017-09-04 22:29:00 308

转载 世界五百强的人力资源面试--很精彩

一位世界500强人力资源总监的六轮面试经历转自:http://blog.sina.com.cn/s/blog_5e82d3a10101m07n.html (丰富的实战经历、超强的应变能力、优异的综合素质) 这是我自己的亲身经历,虽然最终我放弃了这个工作,但从猎头公司开始和我联系,到经历了6次面试,终于获得了这个工作的经历...

2017-07-25 14:15:00 217

转载 爬虫遇到网页拦截肿么办

本人学爬虫一段时间,爬的都是简单的网页。但突然有一天爬网页被拦截,不知如何是好,问度娘上百次,总结了一下经验在访问网页的时候被拦截,封你的IP,登录验证等手段不让爬客们得逞,但是道高一尺,魔高一丈。我开始研习突破反爬虫限制的功法1.伪装流浪器报头 很多服务器通过浏览器发给它的报头来确认是否是人类用户,所以我们可以通过模仿浏览器的行为构造请求报头给服务器发送请求。服务...

2017-04-28 10:10:00 862

转载 Python爬虫之--------泸深A股股票

以下做的项目是用Python3.5版本,爬取股票数据存储数据库# coding:utf8import re #匹配正则表达式import requests #Requests 使用的是 urllib3,因此继承了它的所有特性。Requests 支持 HTTP 连接保持和连接池,支持使用 cookie 保持会话,支持文件上传,支持自动确定响应内容的编码,支持国际化的 URL 和 POST...

2017-04-27 20:43:00 232

转载 使用scrapy框架---爬小说,入库

本人步骤:1>setting.py:BOT_NAME = 'newding'SPIDER_MODULES = ['newding.spiders']NEWSPIDER_MODULE = 'newding.spiders'ROBOTSTXT_OBEY = True ITEM_PIPELINES = { 'newding.pipelines.NewdingPipeli...

2017-04-10 20:26:00 132

转载 xpath爬顶点页面信息

# encoding:utf8import requests # Requests 是用Python语言编写,基于 urllib,采用 Apache2 Licensed 开源协议的 HTTP 库。它比 urllib 更加方便,可以节约我们大量的工作,完全满足 HTTP 测试需求。from lxml import etree # 引用etree处理网页源代码会默认修改编码,解析成xpa...

2017-04-10 19:52:00 85

转载 urllib与urllib的区别

urllib 和urllib2都是接受URL请求的相关模块,但是提供了不同的功能.两个最显著的不同如下  urllib2 can accept a Request object to set the headers for a URL request,urllib accepts only a URL. That means, you cannot masquerade your U...

2017-04-10 18:56:00 88

转载 爬虫代理IP

爬虫使用代理ip获得代理IP的网站:http://www.xicidaili.com/验证代理是否可用的方式之一:globalUrl = "http://ip.chinaz.com/getip.aspx"如何使用代理:一 使用requests:ip = "http://" + i[0]+":"+i[1]requests.get(globalUrl,he...

2017-04-10 16:29:00 131

转载 前端js框架汇总

前端Js框架汇总概述:  有些日子没有正襟危坐写博客了,互联网飞速发展的时代,技术更新迭代的速度也在加快。看着Java、Js、Swift在各领域心花路放,也是煞是羡慕。寻了寻.net的消息,也是振奋人心,.net core 1,mono,xamarin等等,但大多都还在狂吼的阶段。其实一直以来对技术的理解是技术服务于业务和产品,产品又在不同程度的推进着技术的演进。  W...

2017-04-10 13:48:00 175

转载 scrapy的基本安装步骤

windows下scrapy 的安装2016-07-18 20:27:53安装python根据你的需求下载python安装包,安装python(本文基于python27)https://www.python.org/downloads/  在 环境变量---"Path"中加入路径:"安装目录/python27/;安装目录/python27/Scripts...

2017-04-10 13:39:00 66

转载 Python+requests 爬取网站遇到中文乱码怎么办?

分类: Python/Ruby 最近刚开始使用python来做爬虫爬取相关数据,使用了python自带的urllib和第三方库requests,解析html使用了beautifulsoup以及lxml 这里说下lxml,lxml是python的一个html、xml解析库,lxml使用XPath能快速,简单的定位元素并获取信息。下面进入正题注:Py...

2017-04-07 18:50:00 192

转载 TCP协议三次握手与四次挥手

(以下是借鉴别人的,多多体谅)TCP协议三次握手与四次挥手TCP协议三次握手过程分析TCP(Transmission Control Protocol) 传输控制协议TCP是主机对主机层的传输控制协议,提供可靠的连接服务,采用三次握手确认建立一个连接:位码即tcp标志位,有6种标示:SYN(synchronous建立联机) ACK(acknowledgement 确认...

2017-04-07 16:58:00 254

转载 爬虫笔记课后习题1

1.什么是爬虫?网络爬虫(又被称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。2.什么是聚焦爬虫聚焦网络爬虫(Focused Crawler),又称主题网络爬虫(Topical Crawler),是指选择性地爬行那些与预先定义好的主题相...

2017-04-07 16:27:00 887

转载 实验报告正确规范流程

为什么制作实验报告:加强实验的熟练程度;做为毕业后工作时必须查询资料的复习资料;实验报告要求:实验报告标题;姓名;班级;讲师;班主任;时间;实验目的;实验步骤(禁止黑底白字,简单复制粘贴);实验总结;实验报告要求统一使用microsoft office 2003编写;打印文档文件名文件名组:班级-...

2017-04-01 10:38:00 346

转载 5w2h分析法则

5W2H分析法5W2H分析法又叫七何分析法,是二战中美国陆军兵器修理部首创。简单、方便,易于理解、使用,富有启发意义,广泛用于企业管理和技术活动,对于决策和执行性的活动措施也非常有帮助,也有助于弥补考虑问题的疏漏。中文名5W2H分析法别称七何分析法表达式WHAT+WHY+WHEN+WHERE+WHO+HOW+HOW MUCH提出者美...

2017-04-01 10:36:00 306

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除