Captain_zp-CSDN博客

原创 scrapy爬虫之Image Pipeline

使用媒体管道(Media Pipleline)过滤小图片当我们用图片管道时，通过声明可允许的最小尺寸（设置IMAGES_MIN_HEIGHT和IMAGES_MIN_WIDTH）,过滤太小的图片。例如：IMAGE_MIN_HEIGHT = 110IMAGE_MIN_WIDTH = 110注意：这些尺寸的限制不会影响缩略图生成默认情况下，没有限制，所有的图片都会被处

2016-02-19 10:29:00 5518

原创基于色卡的颜色识别和色调识别-基于颜色的图像检索

示例1：识别结果如下：-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------

2016-01-27 14:59:51 4071 5

原创 scrapy爬虫之selectors

构建Selector对象scrapy.selector.Selector(response=None,text=None,type=None)response是一个HtmlResponse或者xmlResponse实例对象text是一个unicode或者utf-8字符串实例对象response和text不能同时使用type是用来定义selector的类型的，有三个类型是

2015-12-01 16:28:28 1299

原创 scrapy-爬虫-错误之一------exceptions.ImportError: No module named _sqlite3

下载sqlite$tar zxvf sqlite.tar.gz$su root$./configure --prefix=/usr/local/sqlite$make$make install配置环境变量$gedit /etc/bash.bashrcPKH_CONFIG_PATHLD_LIBRARY_PATHLIBRARY_PATHC_INCLUDE_P

2015-11-30 17:17:08 3591

原创爬虫-libxm2安装

1.autoscan (autoconf): 扫描源代码以搜寻普通的可移植性问题，比如检查编译器，库，头文件等，生成文件configure.scan,它是configure.ac的一个雏形。2.aclocal (automake):根据已经安装的宏，用户定义宏和acinclude.m4文件中的宏将configure.ac文件所需要的宏集中定义到文件 aclocal.m4中。aclocal是一个

2015-11-26 15:52:16 1080

原创爬虫-scrapy安装（新）

第一步：安装zlib第二步：安装openssl第三步：编译安装python第四步：安装libxml2

2015-11-24 17:39:51 817

原创 ubuntu命令之passwd

怎么设置root用户的密码$sudo passwd root (注意:$passwd root不可以设置root用户密码，必须有sudo）<span style="font-family: 'Microsoft YaHei'; font-size: 18px; background-color: rgb(255, 255, 255);"></span>&lt...

2015-11-24 14:32:00 6376

原创爬虫第一步：scrapy-安装教程

lxml的安装

2015-11-22 16:51:57 2269 1

原创 python安装-ubuntu之第一篇

第一步：安装ubuntu后，了解自带的python终端输入命令:which python显示usr/bin/python说明终端调用是该文件夹下的python第二步：打开usr/local/lib/python2.7或者3.3，有两个文件夹dist-packages site-package第三步：下载zlib,zlib（注意这个包是python和setuptools

2015-10-14 15:13:01 7867

原创 linux-ubuntu之用户组和用户名

查询用户组的所有信息都存放在/etc/group文件中,此文件的格式是由cat 命令cat /etc/groupcat /etc/passwd创建用户组创建用户名

2015-10-09 12:07:11 4450

原创 Mysql--初探

下载MySQL免安装版，解压后，进入bin文件夹。打开命令窗口,输入net start mysql提示:服务名无效。也就是先安装,命令行输入:mysqld --intall第一步:修改root的密码默认root用户，是没有密码的，现在要给root用户，加一个密码：第一:创建新用户:创建数据库database：create database db_test

2015-09-01 14:21:32 728

原创 mysql-安装之cmake的编译安装(mysql 5.6以后需要cmake编译安装)

下载cmake的源码,以cmake-3.3.1.tar.gz为例tar zxvf cmake-3.3.1.tar.gzcd cmake-3.3.1./configure --prefix=/usr/local/cmake然后发现缺少C++编译安装。sudo apt-get install build-essential。发现找不到源码sudo apt-get updat

2015-09-01 12:31:54 2198

原创 mysql-安装之CAMKE编译安装

qaa

2015-09-01 12:31:32 1110

原创 Mysql--初探

下载MySQL免安装版，解压后，进入bin文件夹。打开命令窗口,输入net start mysql提示:服务名无效。也就是先安装,命令行输入:mysqld --intall第一步:修改root的密码默认root用户，是没有密码的，现在要给root用户，加一个密码：第一:创建新用户:显示已经有的数据库database：show databases

2015-09-01 11:25:57 642

原创 scrapy爬虫之sublime Text 2在ubuntu下的安装

以Sublime Text 2为例：

2015-08-27 11:23:29 1421

原创原型软件--Balsamiq Mockups

Balsamiq Mockups的下载的地址Balsamiq MockupsOrganization name: Rick DongSerial Key: eNrzzU/OLi0odswsqgnKTM5WcMnPS1eoMTQyMjexMDQyAIEa5xpDAA8pDD8=Organization name: personalSerial Key: eJzzzU/OL

2015-03-01 11:21:46 1310

原创 Highcharts学习笔记之一——饼图

首先对于曲线图表的主要要素：title{}：//标题align：//水平方向排列的位置，"left","center","right"floating：margin：style：//样式CSStext：//标题名useHTML：verticalAlign：//竖直方向排列的位置,"top","middle","bottom"x：y：subtitle{}//副标题，同

2015-02-02 10:57:16 4497

原创数据的可视化之Sublime Text+D3.js+C3.js+python

#2015年1月12日#对学习D3.js的数据可视化————————————————————————————————————————————————————————————————————————————Sublime Text 前端开发文本编辑器，下载后安装第一步：安装插件 Package Control，网站主页上详细给出安装过程不再重复。安装后Preferences->Pac

2015-01-12 15:01:33 6663

转载数学之美番外篇：平凡而又神奇的贝叶斯方法

概率论只不过是把常识用数学公式表达出来 ——拉普拉斯前言这是一篇关于贝叶斯方法的科普文，我会尽量少用公式，多用平白的语言叙述，多举实际例子。更严格的公式和计算我会在相应的地方注明参考资料。贝叶斯方法被证明是非常general且强大的推理框架，文中你会看到很多有

2015-01-08 17:17:33 2019

转载隐马尔科夫模型(Hidden Markov Models)之理解篇和证明篇

Hidden Markov Models一：介绍（Introduction）我们通常都习惯寻找一个事物在一段时间里的变化模式（规律），这些模式发生在很多领域，比如计算机中的指令序列，句子中的词语顺序和口语单词的因素修咧等等，事实上任何领域中的一系列事件都有可能产生有用的模式。考虑一个简单的例子，有人试图通过一片海藻推断天气——民间传说告诉我们，湿透的海藻意味着潮湿阴雨（雨天），而干

2015-01-07 11:19:49 7716 3

原创 opencv-3.0.0-beta和opencv2版本的区别

opencv3.0的配置及其与opencv2.0版本的区别

2014-12-22 10:23:24 9444

原创 matlab--颜色空间的转换

color

2014-11-12 09:53:29 6829 3

原创 Ubuntu下安装hadoop 2.X版本

下载hadoop-2.5.1.tar.gz______________________________________________________________________________________________________________________________________

2014-10-09 15:48:31 827

原创 Ubuntu下hadoop的配置

下面以hadoop-1.2.1为例：ubuntu下

2014-10-09 14:59:12 812

原创 Ubuntu下SSH的安装

Ubuntu安装使用SSH在命令行输入以下命令：ssh localhost

2014-10-09 12:12:30 909

原创 PLSA-概率潜语义分析（二）

PLSA,概率潜语义分析

2014-09-30 11:39:01 2567

原创 ubuntu下常用的命令

ubuntu下解压文件的命令对于后缀是.tar.bz2的文件，解压：tar jxvf FileName.tar.bz2对于后缀是.zip的文件，解压: unzip file.zip对于后缀是.tar.gz的文件，解压：tar zxvf FileName.tar.gz对于后缀是.gz的文件，解压 gzip -d FileName.gz

2014-09-29 07:57:06 749

原创 ubuntu下的java开发环境的配置

JDK下载和安装：sun公司第一步：下载地址，点Downloads进入下载页：点Java，点Java SE进入下一个页面：点 Java Download：选择Linux下的后缀为 .tar.gz的压缩文件。第二步：运行 tar zxvf jdk-8u20-linux-x64.tar.gz，...

2014-09-28 17:29:06 1065

原创 PLSA-概率潜语义分析

PLSA,概率潜语义分析,期望最大值化算法

2014-09-23 09:01:56 2913

原创 CMakeLists

第一个程序#includeusing namespace std;int main(){ cout<< "hello World"<<endl; return 0;}

2014-09-18 09:53:33 902

原创 1-5：linux下配置.vimrc

set backspace=2set mouse=ase

2014-09-17 07:31:27 709

原创 1-4:liunx安装Modified libstdc++

libstdc++的下载地址：http://www.vim.org/scripts/script.php?script_id=2358

2014-09-16 12:02:02 953

原创 1-3:linux安装taglist

下载地址http://www.vim.org/scripts/script.php?script_id=273goole搜索taglist，进入taglist的下载页面,下载taglist_46.zip（里边有TagList的安装方法）在HOME下建立.vim 文件夹，用命令 unzip -d $HOME/.vim taglist_46.zip解压到 .vim 文件夹下后生成两个文件夹

2014-09-16 08:56:47 1386