hadoop
文章平均质量分 91
爱六月的雨
路漫漫其修远兮,吾将上下而求索!!!
展开
-
Hadoop学习之HBase入门
Hadoop学习之HBase入门HBase是Apache Hadoop的子项目,HBase的最基本存储基础单元是HDFS,并通过使用Hadoop的FDS工具可以查看这些数据以及结构,还可以通过Map/Reduce或者Yarn(算法)对HBase进行操作。1.HBase安装2.HBase存储的基本结构3.HBase的常用命令4.HBase的优化5.HBase的压力分载与失效转发6.HBas原创 2016-08-15 10:09:02 · 309 阅读 · 0 评论 -
Hive学习之Hive内嵌操作符与函数开发
第一部分:关系运算Hive支持的关系运算符•常见的关系运算符•等值比较: =•不等值比较: •小于比较: •小于等于比较: •大于比较: >•大于等于比较: >=•空值判断: IS NULL•非空判断: IS NOT NULL•LIKE比较: LIKE•JAVA的LIKE操作: RLIKE转载 2016-08-18 09:41:42 · 221 阅读 · 0 评论 -
Hive学习之Hive参数
第一部分:Hive 参数hive.exec.max.created.files•说明:所有hive运行的map与reduce任务可以产生的文件的和•默认值:100000 hive.exec.dynamic.partition•说明:是否为自动分区•默认值:falsehive.mapred.reduce.tasks.spec转载 2016-08-18 09:53:31 · 271 阅读 · 0 评论 -
Hive学习之Hive高级编程
第一部分:产生背景产生背景•为了满足客户个性化的需求,Hive被设计成一个很开放的系统,很多内容都支持用户定制,包括:•文件格式:Text File,Sequence File•内存中的数据格式: Java Integer/String, Hadoop IntWritable/Text•用户提供的 map/reduce 脚本:不管什么语言,利用 s转载 2016-08-18 09:55:00 · 279 阅读 · 0 评论 -
Hadoop学习之Hive学习指南
Hive学习Hive介绍Hive的技术架构Hive和关系型数据的区别Hive介绍Hive是基于Hadoop的数据仓库工具,可以将结构化的数据文件映射成一张数据库表,并提供完整的sql查询功能,可以将SQL语句转换为MapReduce任务进行运行,其优点是学习成本低,可以通过SQL语句快速实现简单的MapReduce统计,不必开发新的MapReduce应用,十分适合数据仓库的统计分析。Hi转载 2016-08-16 13:40:40 · 409 阅读 · 0 评论