自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(27)
  • 资源 (2)
  • 收藏
  • 关注

转载 Windows下pip安装包报错:Microsoft Visual C++ 9.0 is required Unable to find vcvarsall.bat

刚在机器上windows环境下装上pip方便以后安装包的时候使用,谁知道第一次使用pip安装asyncio的时候就报错。在Windows7x64下使用pip安装包的时候提示报错:Microsoft Visual C++ 9.0 is required  (Unable to find vcvarsall.bat)环境:windows7 x64 ,python2.7 ,VS2012原因:

2015-07-27 16:42:18 507

转载 pip安装使用详解

1、pip下载安装 1.1 pip下载 # wget "https://pypi.python.org/packages/source/p/pip/pip-1.5.4.tar.gz#md5=834b2904f92d46aaa333267fb1c922bb" --no-check-certificate1.2 pip安装 # tar -xzvf pip-1.5.4.tar.gz

2015-07-24 15:22:03 2489

转载 k近邻算法

K最近邻(k-Nearest Neighbour,KNN)分类算法,是一个理论上比较成熟的方法,也是最简单的机器学习算法之一。该方法的思路是:如果一个样本在特征空间中的k个最相似(即特征空间中最邻近)的样本中的大多数属于某一个类别,则该样本也属于这个类别。用官方的话来说,所谓K近邻算法,即是给定一个训练数据集,对新的输入实例,在训练数据集中找到与该实例最邻近的K个实例(也就是上面所说的K个邻居

2015-04-17 11:40:13 613

原创 《JAVA语言的科学与艺术》学习笔记04

5.2 TemperatureConversionTable.javaimport acm.program.*;public class TemperatureConversionTable extends ConsoleProgram { public void run() { println("Celsius to Fahrenheit table.") ; for (int

2014-11-27 14:48:04 805 1

原创 《JAVA语言的科学与艺术》学习笔记03

4.1  AddNIntegers.javaimport acm.program.*;public class AddNIntegers extends ConsoleProgram { public void run(){ println("This program adds"+N_VALUES+"integers.") ; int total = 0; for (int i

2014-11-24 15:15:43 721

原创 《JAVA语言的科学与艺术》学习笔记02

2.1 HelloProgram.java

2014-11-24 10:41:12 659

原创 《JAVA语言的科学与艺术》学习笔记01

import acm.graphics.*;import acm.program.*;public class HelloProgram extends GraphicsProgram { public void run(){ add(new GLabel("hello,world",100,75)) ; }}

2014-11-11 09:27:36 1430

原创 类变量和实例变量的区别

class A{ public static int a = 0; //类变量 public int b = 0; //实例变量 } public class B{ public static void main (String[] args){ A a1 = new A(); A a2 = new A(); a1.a = 10

2014-11-07 14:43:49 457

转载 Java变量类型

Java修饰符Java运算符Java循环结构Java分支结构Java Number类Java Character类Java String类Java StringBuffer和StringBuilder类Java 数组Java日期时间Java正则表达式Java 方法Java 流(Stream)、文件(File)和IOJava 异常处理

2014-11-06 21:39:09 1373 1

转载 MapReduce编程模型:用MapReduce进行大数据分析

说明:通过本文对MapReduce编程模型循序渐进的说明,你可以对MapReduce工作机制有一个总体上的很好的把握,是来自IBM developerWorks的一篇非常好的文章(转载)!Google 在 2001 年发布图像搜索功能时,只有 2.5 亿索引图像,不到 10 年,这个巨大的搜索功能已经可以检索超过 100 亿个图像了,每分钟有 35 小时的内容上传到 YouTube。据

2014-11-06 14:06:40 1373

原创 hadoop实验:求气象数据的最低温度

1.下载部分数据,因为实验就只下载2003年的部分气象数据2.通过zcat *gz > sample.txt命令解压重定向[hadoop@Master test_data]$ zcat *gz > /home/hadoop/input/sample.txt3.查看数据格式4.把文件sample.txt放进hdfs文件系统里[hadoop@Master input]$ h

2014-11-05 21:28:46 1970 1

原创 Hadoop实验:按规则读取HDFS文件系统写入到本地

题目:在HDFS中生成一个大约100字节的文本文件,写一段程序(可以利用Java API或C API),读入这个文件,并将其第101-120字节的内容写入本地文件系统成为一个新文件1.

2014-11-01 22:57:50 1347

原创 Hadoop实验:按规则读取本地文件写入HDFS文件系统

1.本地文件 import java.io.InputStream; import java.io.OutputStream; import java.net.URI; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import or

2014-11-01 22:30:44 1383

原创 Hadoop实验:用java直接使用FileSystem以标准输出格式显示Hadoop文件系统中的文件

《Haoop权威指南》实验3.21.设置Hadoop的类目录,hadoop-env.sh[hadoop@Master conf]$ cd /usr/hadoop/conf[hadoop@Master conf]$ vim hadoop-env.sh增加 export HADOOP_CLASSPATH=/usr/hadoop/myclass

2014-11-01 11:42:17 632

转载 学习Java类必须知道的几点

1、类的加载执行顺序 看一下如下的例子:[java] view plaincopyprint?class ParentClass {      public static int  a=2;      public int b=3;      {          System.out.println("this is anonymi

2014-10-30 10:39:11 507

转载 基于用户投票的排名算法(二):Reddit

作者: 阮一峰(不好意思,这个系列中断了近两周,我会尽快在这几天,把后面几篇写完。)上一次,我介绍了Hacker News的排名算法。它的特点是用户只能投赞成票,但是很多网站还允许用户投反对票。就是说,除了好评以外,你还可以给某篇文章差评。Reddit是美国最大的网上社区,它的每个帖子前面都有向上和向下的箭头,分别表示"赞成"和"反对"。用户点击进行投票,Reddi

2014-10-29 17:00:57 509

原创 Python:关于argv

D:\Python_Code>python test.py 1 2 3The script is called: test.pyYour first variable is : 1Your second variable is : 2Your third variable is : 3test.py

2014-10-29 13:41:24 484

原创 Hadoop实验:用java把hdfs系统里的文件内容读取出来,显示到屏幕

《Haoop权威指南》

2014-10-28 21:47:48 4282 1

原创 Hadoop实验:wordcount

[hadoop@Master ~]$ hadoop fs -mkdir in[hadoop@Master ~]$ hadoop fs -mkdir on

2014-10-28 21:12:58 609

原创 端口被其他进程占用导致hadoop namenode,datanode,jobTracker,taskTracker,secondnamenode无法启动

[hadoop@Master bin]$  netstat -tunlp | grep java(Not all processes could be identified, non-owned process info will not be shown, you would have to be root to see it all.)tcp        0      0 :::

2014-10-28 16:10:43 604

转载 Hadoop生态上几个技术的关系与区别:hive、pig、hbase 关系与区别

初接触Hadoop技术的朋友肯定会对它体系下寄生的个个开源项目糊涂了,我敢保证Hive,Pig,HBase这些开源技术会把你搞的有些糊涂,不要紧糊涂的不止你一个,如某个菜鸟的帖子的疑问,when to use Hbase and when to use Hive?....请教了^_^没关系这里我帮大家理清每个技术的原理和思路。Pig一种操作hadoop的轻量级脚本语言,最初又雅虎公

2014-10-27 09:20:16 441

原创 Hadoop集群实施成功后,再次格式化名称节点,datanode如何加入集群

1.停止Hadoop集群[hadoop@Master name]$ cd /usr/hadoop/bin/[hadoop@Master bin]$ stop-all.shWarning: $HADOOP_HOME is deprecated.stopping jobtracker192.168.150.3: stopping tasktracker192.168.150

2014-10-26 17:12:16 986

原创 怎么改变HDFS块大小

1.上传test1.txt[hadoop@Master hadoop]$ hadoop fs -put /home/hadoop/input/test1.txt  /usr/hadoop/inWarning: $HADOOP_HOME is deprecated.2.查看上传的文件大小[hadoop@Master hadoop]$ hadoop fs -stat "%o"

2014-10-26 12:06:58 3308 1

原创 Linux报错: -bash:ls:command notfound

在安装软件后,一般需要配置/etc/profile

2014-10-24 08:37:18 1221

原创 Linux下JDK安装

首先用root身份登录后在"/usr"下创建"java"文件夹,再把下载"/home/hadoop/"下的" jdk-7u71-linux-i586.tar.gz"复制到"/usr/java"文件夹中

2014-10-23 13:31:44 499

原创 Hadoop 架构演变

带有 MapReduce 的 Apache Hadoop 是分布式数据处理的骨干力量。借助其独特的横向扩展物理集群架构和由 Google 最初开发的精细处理框架,Hadoop 在大数据处理的全新领域迎来了爆炸式增长。Hadoop 还开发了一个丰富多样的应用程序生态系统,包括 Apache Pig(一种强大的脚本语言)和 Apache Hive(一个具有类似 SQL 界面的数据仓库解决方案)

2014-10-23 12:12:38 504

原创 类设计分析

类设计分析 类设计分析思路:根据要求写出类所包含的属性所有属性都必须封装封装之后的属性通过setter和getter方法设置和取得如果需要可以加入若干构造方法再根据其他要求加入相应方法类中所有的方法都不要直接输出,而是交被调用处输出  题目:定义一个名为Stu

2014-10-14 10:35:12 563

45分钟搞定R语言之数据库交互及统计绘图

45分钟搞定R语言之数据库交互及统计绘图

2015-09-22

mysql中文官方文档

mysql中文官方文档

2013-04-09

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除