2015年06月_雄鸡

12月 11月 09月 08月 07月 06月 05月 04月 03月 02月

原创 Typesafe Activator 入门使用

The Typesafe Reactive Platform includes Typesafe Activator which gets you started with Play Framework, Akka and Scala 一、下载与安装下载Typesafe Activator 将下载下来的文件解压到指定目录：如：F:\opensouce\akka\software\act

2015-06-30 23:49:50 10549 1

原创 hadoop学习笔记

一、增加新的数据节点 1.1 配置数据节点相关的所有信息(slaves,master, core-site, hdfs-site,mapred-site,yarn-site 等） 1.2 /etc/hosts 设置 1.3 /etc/hostname 设置 1.4 启动 bin/hadoop-deamon.sh start datanode 1.5 启动 bin/hadoop-deamon

2015-06-24 16:29:48 526

方案一： java -classpath %classpath%;/lib/activation.jar;/lib/ant.jar;…/lib/xstream-1.2.1.jar org.mule.MuleServer -config /conf/HBADCservice-config.xml -props /conf/vaseai.properties使用这种方案对classpath参数长度有限

2015-06-24 08:39:50 5361

原创 spark RDD的基本命令

因为传统的并行计算模型无法有效的解决迭代计算（iterative）和交互式计算（interactive）；而Spark的使命便是解决这两个问题，这也是他存在的价值和理由Actions 命令：reduce(func) 通过函数func聚集数据集中的所有元素。Func函数接受2个参数，返回一个值。这个函数必须是关联性的，确保可以被正确的并发执行 collect() 在Driver的程序中

2015-06-18 22:16:31 2180

转载 hadoop 基本命令

启动与关闭启动Hadoop进入HADOOP_HOME目录。执行sh bin/start-all.sh 关闭Hadoop进入HADOOP_HOME目录。执行sh bin/stop-all.sh 文件操作Hadoop使用的是HDFS，能够实现的功能和我们使用的磁盘系统类似。并且支持通配符，如*。查看文件列表查看hdfs中/user/admin/aaron目录下的文件。进入HADO

2015-06-17 20:22:11 545

原创 HTTPie 工具使用入门

HTTPie （读aych-tee-tee-pie）是一个 HTTP 的命令行客户端。其目标是让 CLI 和 web 服务之间的交互尽可能的人性化。其有特点如下：直观的语法格式化和色彩化的终端输出内置 JSON 支持支持上传表单和文件HTTPS、代理和认证任意请求数据自定义头部持久性会话类 Wget 下载支持 Python 2.6, 2.7 和 3.x支持 Linux, Mac

2015-06-16 18:55:38 20236 2

原创 maven 国内镜像

maven的默认的中央仓库为：maven.apache.org ，当本地仓库或者自己的maven 私服不存在相关的jar时，如没有特别设置，就去检查maven中央仓库有没有。由于连接国外网站时网速特慢，为解决这个问题，os china 建立了一个maven 的私服。为了记忆，特将此记录。settings.xml 设置镜像方法步骤如下： 1. mirrors 设置<mirrors> <!-

2015-06-13 15:12:16 9679

原创 window dos 命令整理中

dir显示文件名 dir /b 2.

2015-06-13 11:21:31 532

原创 spark之hadoop2.6环境搭建笔记

一、spark、hadoop、yarn 关系spark –> hadoop –> yarn hdfs yarn mapreduce(计算框架， spark）yarn：主进程：resourcemanager yarn的开： sbin/start-yarn.sh yarn的关闭：sbin/stop-yarn.sh 登录的url：http://localhost:8088hdfs: n

2015-06-09 20:24:23 1725

原创 ubuntu 关机，重启，注销命令

一、关机命令 shutdown　　1)shutdown –help　　可以查看shutdown命令如何使用，当然也可以使用man shutdown命令。　　2) shutdown -h now 现在立即关机　　3)shutdown -r now 现在立即重启　　4)shutdown -r +3 三分钟后重启　　5)shutdown -h +3 “The System will shutdown af

2015-06-08 16:44:02 4766

原创 maven maven-archetype-quickstart问题

问题： eclipse装m2eclipse的时候装完后创建项目的时候报错：Could not resolve archetype org.apache.maven.archetypes:maven-archetype-quickstart:RELEASE from any of the configured repositories.解决方法：步骤一：从http://maven.oschin

2015-06-06 21:12:44 11704

Hadoop与MapReduce分布式并行编程简介.pdf

Hadoop与MapReduce分布式并行编程

2010-11-24

Hadoop开发者入门

Hadoop 是apache 下的一个项目，是一个分布式计算开源框架，其最核心的设计就是：MapReduce和HDFS。MapReduce的思想是由Google的一篇论文所提及而被广为流传的，简单的一句话解释MapReduce就是“任务的分解与结果的汇总”。HDFS是Hadoop分布式文件系统（Hadoop Distributed File System）的缩写，为分布式计算存储提供了底层支持。

2010-11-23

Microsoft.PassGude.70-686.v3.20.by.senjor.95

微软windows 7 认证试题，提供给大家参考

2010-10-29

70-680 windows 7题库

70-680 windows 7题库，希望大家都能够顺利通过

2010-10-27

微软认证70-686题库

微软windows 7 考试认证题库70-680，题库比较全，希望考windows7的考生，都能够顺利通过

2010-10-27

Exchange Server 2003 系統管理手冊.doc

此手册将透过说明 Exchange 系统管理方面的核心概念，协助您充分利用 Microsoft Exchange Server 2003。

2010-09-19

pentahobi.pdf

pentaho的体系结构跟spagoBI非常相像，我甚至都没看出来有上面很大的区别，不过pentaho喜欢把自己的东西称作solution，以下引用自pentaho的whitepaper: pentaho BI 平台不同于传统的BI产品。它是一个以流程为中心的，面向解决方案的（Solution)的框架，具有商业智能（BI)组件，使得公司可以开发商业智能问题的完整解决方案 pentaho一样把数据处理层看的很重要，多种数据显示方式，甚至有RSS输出。 pentaho是有各种开源组件组成的。 ETL : Kettle (界面上显示的是pentaho Data Integration ,previously Kettle) Report : Pentaho Report (它也支持Birt 和 JasperReport 的集成 ,还有专门的文档） OLAP : Mondrian 和 JPivot (Mondrian已经加入了pentaho , 估计pentaho跟JPivot有仇，双方互看对方不爽，所以JPivot没有加入pentaho,呵呵，看玩笑) Platform : Pentaho Planform Data Mining: Weka (Weka也加入了pentaho)

2010-09-16

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人