- 博客(8)
- 资源 (6)
- 收藏
- 关注
转载 【Hadoop基础】hadoop fs 命令
1,hadoop fs –fs [local | ]:声明hadoop使用的文件系统,如果不声明的话,使用当前配置文件配置的,按如下顺序查找:hadoop jar里的hadoop-default.xml->$HADOOP_CONF_DIR下的hadoop-default.xml->$HADOOP_CONF_DIR下的hadoop-site.xml。使用local代表将本地文件系统作为hadoop的
2015-09-29 17:29:42 337
转载 Hadoop FS Shell命令
FS Shell 调用文件系统(FS)Shell命令应使用bin/hadoop fs 的形式。 所有的的FSshell命令使用URI路径作为参数。URI格式是scheme://authority/path 。对HDFS文件系统,scheme是hdfs ,对本地文件系统,scheme是file。其中scheme和authority参数都是可选的,如果未加指定,就会使用配置中指定的默认scheme。
2015-09-29 15:24:06 326
转载 HDFS基本命令
HDFS基本命令: hadoop fs-cmd cmd:具体的操作,基本上与UNIX的命令行相同 args:参数 HDFS资源URI格式: scheme://authority/path scheme:协议名,file或hdfs authority:namenode主机名 path:路径 示例:hdfs://localhost:9000/user/chunk/test.txt
2015-09-29 15:08:35 292
转载 Linux编辑器vi使用方法详细介绍
vi编辑器是所有Unix及Linux系统下标准的编辑器,它的强大不逊色于任何最新的文本编辑器,这里只是简单地介绍一下它的用法和一小部分指令。由于对Unix及Linux系统的任何版本,vi编辑器是完全相同的,因此您可以在其他任何介绍vi的地方进一步了解它。Vi也是Linux中最基本的文本编辑器,学会它后,您将在Linux的世界里畅行无阻。 1、vi的基本概念 基本上vi可以分为三种
2015-09-25 17:17:13 195
转载 安装Linux Mint 17后要做的20件事
Linux Mint 17 Qiana Cinnamon Linux Mint 17已经发布,定名为Qiana。Mint是Linux最佳发行版之一,它定位于桌面用户,关注可用性和简洁。它携带了风格迥异的桌面环境,如Mate以及Cinnamon,并基于不同的发行版,如Ubuntu或Debian。 IT网,http://www.it.net.cn 在本文中,我们使用的是Linux Mint 1
2015-09-25 17:09:30 1006
转载 Sqoop中文手册
1. 概述 本文档主要对SQOOP的使用进行了说明,参考内容主要来自于Cloudera SQOOP的官方文档。为了用中文更清楚明白地描述各参数的使用含义,本文档几乎所有参数使用说明都经过了我的实际验证而得到。 2. codegen 将关系数据库表映射为一个java文件、java class类、以及相关的jar包,作用主要是两方面: 1、 将数据库表映射为一
2015-09-25 10:01:04 569
转载 Hive部署(包括集成Hbase和Sqoop)
Hive部署(包括集成Hbase和Sqoop) 1 安装环境 1.1 系统环境 主要是选择软件版本。 Hadoop 1.0.3Hbase 0.94.0Hive 0.8.1zookeeper-3.3.5Mysql 5.5.28JDK 1.6Sqoop-1.4.2 1.2 环境变量 $HDOOP_HOME:/home/hadoop/hadoop$HBASE_H
2015-09-25 09:59:32 741
转载 HADOOP基本操作命令
在这篇文章中,我们默认认为Hadoop环境已经由运维人员配置好直接可以使用。 假设Hadoop的安装目录HADOOP_HOME为/home/admin/hadoop。 启动与关闭 启动HADOOP 1. 进入HADOOP_HOME目录。 2. 执行sh bin/start-all.sh 关闭HADOOP 1. 进入HADOOP_HOME
2015-09-24 16:57:53 271
dom4j解析XML的两个JAR包(dom4j-1.6.1.jar 和 jaxen.jar)
2014-04-20
Linux爱好者入门教程
2010-12-22
数据挖掘_-_概念与技术
2010-12-22
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人