- 博客(6)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 三、Linux系统管理
一、Linux下磁盘管理命令、内存查看命令 >>>>>>系统信息 uname nname -r cat /proc/cpuinfo cat /proc/meminfo date date -R 时区 cal 2015 查看日历表 设置系统日期和时间，要用到root用户 date -s 2015-09-30 date -s 14:12:45 >>>>>>>磁盘管理
2017-04-28 16:39:37
394
原创 使用HDFS FS API的基本操作
1、文件操作 上传本地文件到HDFS 读取文件 在hadoop fs中新建文件，并写入 重命名文件 删除hadoop fs上的文件 2、目录操作 读取某个目录下的所有文件 在hadoop fs上创建目录 删除目录 3、HDFS信息 查找某个文件在HDFS集群的位置 获取HDFS集群上所有节点名称信息
2017-04-20 17:43:31
373
原创 HDFS架构详解
一、NameNode 1、NameNode是一个中心服务器，单一节点（简化系统的设计和实现），负责管理文件系统的 名字空间（namespace）以及客户端对文件的访问。 2、文件操作，NameNode负责文件元数据的操作，DataNode负责处理文件内容的读写请求，跟文件内容相关的数据流不经过NameNode，只会询问它跟哪个DataNode联系，否则NameNode会成为系统的瓶颈。 3
2017-04-20 15:33:17
398
原创 二、Linux基础命令
一、文件类型、权限、所属用户与组 1、用户和组 Linux系统上，创建用户的时候，默认情况会给我们创建一个用户组（名称与用户名相同）。 2、文件 在Linux系统下面，文件类型（常见三种类型） 文件:- -rw-rw-r--,十个字符，代表不同的意义 - rw- rw- r-- 第一个字符表示文件的类型 后面的九个字符分为三组，表示此文件针对不同用户的权限关系。
2017-04-19 17:36:41
289
原创 一、Linux基本环境
一、Linux中创建用户、用户间切换、设置主机名称及常用Linux命令 创建用户 # useradd tg 对于Linux下的每个用户，都有密码 # passwd tg 在Linux系统下，默认情况下，创建一个用户的同时会给用户在系统的目录下创建一个 属于自己的用户目录，该目录称为用户主目录。 规则：/home/username，用户主目录可以使用~进行表示。 切
2017-04-14 18:34:07
412
1
原创 Hive中的分区表
下午闲来无事，看了一下好久没有操作的分区表。代码这东西，长时间不写就容易生疏。 分区表是Hive的数据表中很重要的一种类型，在实际开发中应用很广，但是，由于其语法较为灵活，实际Coding时很容易出错。 于是，我将分区表的一些操作总结如下。 1、创建分区表t1，有id、day两个字段，其中day为分区字段 create table t1 (id int) partitioned
2017-04-13 22:16:50
1517
Hive数据仓库（一）
2016-09-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人