2018年01月_韩大帅666

原创运维知识要点

术语名词IDC--（Internet Data Center)互联网数据中心，主要服务包括整机租用、服务器托管、机柜租用、机房租用、专线接入和网络管理服务等。广义上的IDC业务，实际上就是数据中心所提供的一切服务。客户租用数据中心的服务器和带宽，并利用数据中心的技术力量，来实现自己对软、硬件的要求，搭建自己的互联网平台，享用数据中心所提供的一系列服务。ISP--(Internet Serv

2018-01-24 11:24:20 1884

原创 Python分布式redis数据处理

数据处理后保存在mongodb中#!/usr/bin/env python# -*- coding:utf-8 -*-import redisimport pymongoimport jsondef process_item(): # 创建redis数据库连接 rediscli = redis.Redis(host = "127.0.0.1", port = 6379

2018-01-23 13:33:21 876

原创 mongodb与Python交互

简介MongoDB 是一个基于分布式文件存储的NoSQL数据库由C++语言编写，运行稳定，性能高旨在为 WEB 应用提供可扩展的高性能数据存储解决方案查看官方网站MongoDB特点模式自由 :可以把不同结构的文档存储在同一个数据库里面向集合的存储：适合存储 JSON风格文件的形式完整的索引支持：对任何属性可索引复制和高可用性：支持服务器之间的数据复制，支持主-从模式及服务器之间的相互复制。复制的

2018-01-19 12:22:37 1258

NoSQL简介NoSQL，全名为Not Only SQL，指的是非关系型的数据库随着访问量的上升，网站的数据库性能出现了问题，于是nosql被设计出来优点/缺点优点:高可扩展性分布式计算低成本架构的灵活性，半结构化数据没有复杂的关系缺点:没有标准化有限的查询功能（到目前为止）最终一致是不直观的程序分类类型部分代表特点列存储HbaseCassandraHypertable顾名思义，是按列存储数据的。

2018-01-19 12:11:49 289

原创 mysql与python交互

与python交互在熟练使用sql语句的基础上，开始使用python语言提供的模块与mysql进行交互这是我们在工作中大事要做的事先学会sql是基础，一定要熟练编写sql语句安装引入模块安装mysql模块sudo apt-get install python-mysql在文件中引入模块import MysqldbConnection对象用于建立与数据库的连接创建对象：调用connect()方法

2018-01-19 12:04:52 2717

原创 mysql知识点总结3

简介实体与实体之间有3种对应关系，这些关系也需要存储下来在开发中需要对存储的数据进行一些处理，用到内置的一些函数视图用于完成查询语句的封装事务可以保证复杂的增删改操作有效先看个问题问：查询每个学生每个科目的分数分析：学生姓名来源于students表，科目名称来源于subjects，分数来源于scores表，怎么将3个表放到一起查询，并将结果显示在同一个结果集中呢？答：当查询结果来源于多张表时，需要

2018-01-19 12:00:39 212

原创 mysql知识点总结2

条件使用where子句对表中的数据筛选，结果为true的行会出现在结果集中语法如下：select * from 表名 where 条件;比较运算符等于=大于>大于等于>=小于小于等于不等于!=或查询编号大于3的学生select * from students where id>3;查询编号不大于4的科目select * from subjects where id<=4;查询姓名不是“黄蓉”

2018-01-19 11:57:09 361

原创 mysql知识点总结1

简介主要知识点包括：能够与mysql建立连接，创建数据库、表，分别从图形界面与脚本界面两个方面讲解相关的知识点包括：E-R关系模型，数据库的3范式，mysql中数据字段的类型，字段约束数据库的操作主要包括：数据库的操作，包括创建、删除表的操作，包括创建、修改、删除数据的操作，包括增加、修改、删除、查询，简称crud学生表结构：id名称性别地址生日科目表结构：id名称数据库简介人类在进化的过程中，创

2018-01-19 11:31:15 277

转载找xpath好用的工具（Firefox插件）

WebDriver Element Locator安装打开firefox浏览器，进入网址https://addons.mozilla.org/en-US/firefox/在搜索框里输入WebDriver Element Locator 点击Add to firefox 会有个弹出框，点击install now可以看从firefox浏览器的menu -> Tools -> A

2018-01-17 14:42:30 5818

转载 Tesseract-OCR的简单使用与训练

Tesseract-OCR的简单使用与训练Tesseract，一款由HP实验室开发由Google维护的开源OCR（Optical Character Recognition , 光学字符识别）引擎，与Microsoft Office Document Imaging（MODI）相比，我们可以不断的训练的库，使图像转换文本的能力不断增强；如果团队深度需要，还可以以它为模板，开

2018-01-10 15:59:10 672

原创 Python爬去贴吧图片

# tieba_xpath.py#coding=utf-8#!/usr/bin/env python# -*- coding:utf-8 -*-import osimport urllibimport urllib2from lxml import etreeclass Spider: def __init__(self): self.tiebaNam

2018-01-09 10:23:43 355

原创 Python 一个爬虫的案例

#coding=utf-8import urllib2import reclass Spider: """ 内涵段子爬虫类 """ def __init__(self, page, enable): self.page = page self.enable = enable def loadPage(self

2018-01-08 17:16:17 7083 1

韩帅的博客