自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

皓阳当空-博客

穷则思变,差则思勤。

  • 博客(13)
  • 资源 (1)
  • 收藏
  • 关注

原创 (-)redis安装及配置

redis常用命令总结为什么要了解redis?Redis支持数据的持久化,可以将内存中的数据保存在磁盘中,重启的时候可以再次加载进行使用。Redis不仅仅支持简单的key-value类型的数据,同时还提供list,set,zset,hash等数据结构的存储。Redis支持数据的备份,即master-slave模式的数据备份。性能极高 – Redis能读的速度是110000次/s

2017-02-28 15:59:16 434

原创 搭建数据挖掘环境(mac安装 ipython notebook)

搭建数据挖掘环境(mac安装 ipython notebook)1.基础环境:mac python3.5待安装ipython notebook numpy scikit-learn(python开发的机器学习库,包含大量机器学习算法、数据集、工具和框架)2.安装ipython notebookpip install "ipython[notebook]"启动notebook在终端输入:ipyt

2017-02-24 11:32:24 1240

原创 Redis、SSDB、Memcache和MongoDB的区别

Redis、Memcache和MongoDB的区别 摘要: Memcached可以利用多核优势,单实例吞吐量极高,可以达到几十万QPS(取决于key、value的字节大小以及服务器硬件性能,日常环境中QPS高峰大约在4-6w左右)。一.Memcached1.1Memcached的优点:Memcached可以利用多核优势,单实例吞吐量极高,可以达到几十万QPS(取决于key、value的字节大小

2017-02-23 17:55:44 5040

原创 Django REST framework使用案例

Django REST framework使用案例引用官方的话说:Django REST framework is a powerful and flexible toolkit for building Web APIs. 如果你不太理解restful架构,请参见理解RESTful架构一文下面以一个简单的学生管理系统示例,简述一下Django REST framework的使用环境mac

2017-02-23 14:58:51 1466 3

原创 mac下安装指定版本python

mac下安装指定版本python本文mac下python为2.7.12 要安装的版本为python3.5.31.安装virtualenv请自行查阅资料安装2.安装virtualenvwrapper请自行查阅资料安装3.安装python3.5.3下载python源码包,编译,安装wget https://www.python.org/ftp/python/3.5.3/Python-3.5.3.tgz

2017-02-22 12:04:02 4202

原创 python写爬虫6-selenium的使用

python写爬虫6-selenium的使用 目前,前端技术比较火热。各种前端技术、框架层出不穷。大部分站点的数据都是异步动态加载,相比获取静态内容,要抓取动态内容稍微麻烦点常用的两种抓取动态网页数据的方法: 1.借助Firebug等浏览工具,分析请求数据,获得数据接口地址。然后直接动态改变接口参数,获取json格式的数据。 2.使用浏览器渲染引擎触发javascript事件,借助工具We

2017-02-16 15:34:45 1015

原创 python写爬虫5-多进程爬虫(采集58出租房信息)

python写爬虫5-多进程爬虫(采集58出租房信息) 本文代码是在【python写爬虫4-多线程爬虫(采集58出租房信息)】http://blog.csdn.net/apple9005/article/details/54971151博文的基础上编写多进程爬虫#! /usr/bin/env python# -*- coding:utf-8 -*-import urllib2import

2017-02-15 16:10:42 2024

原创 MAC下安装rar、unrar

MAC下安装rar、unrar在http://www.rarsoft.com/download.htm页面下载RAR X.XX for Mac OS X,并安装。具体操作如下:1.下载压缩包到本地(Downloads文件夹下)cd Downloadstar -xvf rarosx-5.4.0.tar.gzcd rarosx-5.4.02.安装rarsudo install -c -o $USE

2017-02-13 14:17:06 16500 3

原创 python写爬虫4-多线程爬虫(采集58出租房信息)

python写爬虫4-多线程爬虫(采集58出租房信息) 本文代码是在【python写爬虫3-MongoDB数据缓存(采集58出租房信息)】http://blog.csdn.net/apple9005/article/details/54967916博文的基础上编写运行【python写爬虫3-MongoDB数据缓存(采集58出租房信息)】中的代码爬取信息,你会发现,爬取一个列表页的详细

2017-02-11 21:34:57 4523 1

原创 python写爬虫3-MongoDB数据缓存(采集58出租房信息)

python写爬虫3-MongoDB数据缓存(采集58出租房信息)有时,我们下载某个页面并抓取部分数据后,之后可能还会需要重新下载该页面,抓取其他数据。对于小网站而言,这不算什么大问题;但对于那些拥有百万网页的网站来说,重新爬取可能需要耗费大量时间。因此,我们可以对已爬取的网页进行缓存,让每个页面只下载一次。 本文代码只是实现了数据的存储与获取,与上述案例实情不符 开发环境: 1.硬

2017-02-10 12:10:29 3167

原创 python写爬虫2-数据抓取的三种方式

python写爬虫2-数据抓取的三种方式常用抽取网页数据的方式有三种:正则表达式、Beautiful Soup、lxml1.正则表达式正则表达式有个很大的缺点是难以构造、可读性差、不易适用未来网页的变化。写一段伪代码:import reurl = 'http://xxxx.com/sdffs'html = download(url)re.findall('正则表达式', html)2.Bea

2017-02-09 12:11:53 4592 1

原创 python写爬虫1-写一个简单爬虫

python写爬虫1-写一个简单爬虫本文用urllib2模块编写一个简单的爬虫1.背景调研 写爬虫之前,要先调研一下你要爬取的站点信息,比如网站类型、后端语言、服务器类型、网站所有者等等检查网站构建的技术类型—builtwith模块 安装方法如下: pip install builtwith 使用方法如下: 从上图中可知,该站点使用ruby写的后端,后端框架用

2017-02-08 17:57:32 1044

原创 django 通过bootstrap fileinput 上传图片

django 通过bootstrap fileinput 上传图片实现在django框架下,通过bootstrap前端框架的fileinput控件上传图片 django 1.10.3 bootstrap1.在app目录下创建图片文件夹我的项目名称为myproject,我的app名称为myapp,创建的图片存放文件名称为uploadfiles 目录结构如下: |–myproject

2017-02-07 17:09:35 4940 4

SQLServer2005_SSMSEE.msi

当安装SQL Server Management Studio Express的时候,如果出现“安装程序在安装此软件包时遇到一个错误,这可能表示此软件包有错。错误码是29506”权限问题。 解决方法: 新建一个文本文件,输入msiexec /i F:\SQLServer2005_SSMSEE.msi (假设下载的文件名为SQLServer2005_SSMSEE.msi ,放在F盘根目录下) 保存改扩展名为cmd格式 右键鼠标----然后以管理员身份运行这个程序就可以

2013-04-18

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除