- 博客(9)
- 资源 (3)
- 问答 (1)
- 收藏
- 关注
原创 SecureCRT终端上使用spark-shell时按退格键无反应的解决方法
最近开始学习使用spark,安装部署好集群后,用SecureCRT远程连接至Spark集群,启动spark-shell却发现输错命令后却无法用退格键删除。虽然只是个小问题却挺恼人的。经过多方查找,终于解决。步骤分四步:
2016-03-29 17:25:33 2735
原创 spark集群安装与配置
本文介绍的是Spark on Yarn的安装与配置,在安装Spark之前需要安装Hadoop2.0以及以上版本,本例是在Hadoop2.2.0平台搭建,集群中有两个节点。
2016-03-25 14:16:17 3100 2
原创 pssh使用指南
pssh 用于同时管理多台服务器,在安装Hadoop时可以同步Hadoop已经配置好的安装文件,十分方便,本文将介绍pssh的基本命令和使用方法。由于pssh基于python实现的,所以在安装之前务必保证安装好python2.6以上。
2016-03-25 11:47:42 9248
原创 Hadoop集群安装与配置
本文介绍Hadoop在两个节点上的安装与配置即一个master和一个slave,安装版本为2.2.0,该版本及以上版本的安装方式几乎一致。本文安装的方式并非高可靠的,是最简单的安装,适合于初学者作为学习环境。而且如果需要扩展也十分方便,更改slaves文件即可。
2016-03-23 19:41:27 1349
转载 编译工具sbt安装与使用
Sbt是Simple Build Tool的缩写,它是对scala或Java语言进行编译的一个工具,它类似于Maven或Ant,需要JDK1.6或更高的版本支持。它可以在Windows和Linux两种环境下安装使用,下面说明在windows下的安装和使用。安装首先我们要下载一个安装文件,其官方下载页面如下:http://www.scala-sbt.org/release
2016-03-22 19:59:02 2454
转载 java中的内部类总结
原文地址:http://www.cnblogs.com/nerxious/archive/2013/01/24/2875649.html内部类不是很好理解,但说白了其实也就是一个类中还包含着另外一个类如同一个人是由大脑、肢体、器官等身体结果组成,而内部类相当于其中的某个器官之一,例如心脏:它也有自己的属性和行为(血液、跳动)显然,此处不能单方面用属性或者方法表示一个心脏,而需要一个类而
2016-03-17 15:26:56 419
转载 ROC和AUC介绍以及如何计算AUC
ROC(Receiver Operating Characteristic)曲线和AUC常被用来评价一个二值分类器(binary classifier)的优劣,对两者的简单介绍见这里。这篇博文简单介绍ROC和AUC的特点,以及更为深入地,讨论如何作出ROC曲线图以及更为深入地,讨论如何作出ROC曲线图以及计算AUC。
2016-03-04 11:41:00 2422
关于如何通过子类调用父类的父类中的方法
2015-11-16
TA创建的收藏夹 TA关注的收藏夹
TA关注的人