博客专栏  >  云计算/大数据   >  hadoop

hadoop

hadoop,spark,flink技术相关博客

关注
0 已关注
11篇博文
  • hive2.0.0安装(配合hadoop2.6.0)

    一、前提条件安装了Hadoop2.6.0,并且配置了相关环境变量。jdk安装,免密登录设置,环境变量设置。JAVA_HOME JRE_HOME CLASSPATH PATH二、安装配置1、下载h...

    2016-08-21 22:58
    876
  • hadoop2.6.0伪分布式环境搭建

    Hadoop作为分布式大数据处理框架在数据处理应用中有广泛的应用,本文介绍在Linux环境下搭建hadoop伪分布式集群,记录下自己的学习过程。

    2017-02-07 00:08
    301
  • hive自定义函数UDF

    Hive自定义函数(UDF),可以帮助用户轻松实现在hql语句中展现自定义查询结果。 这里以一个简单的连接函数来实现用户自定义函数,假设表结构如下: 表中只有两个简单的字段,id和name。...

    2017-03-06 22:39
    329
  • Hive使用入门

    先介绍一些基本的命令: 1、进入hive命令行,这种方式进入之后,执行操作为带有执行mapreduce的调试信息; hive --service cli --等同于直接输入hive 2、进入hi...

    2017-03-07 21:25
    414
  • Hive内部表和外部表的区别

    hive作为基于hdfs的数据仓库,在构建表的时候,会有内部表和外部表,这里介绍两者的异同点。

    2017-03-08 23:20
    538
  • hive:For direct MetaStore DB connections, we don't support retries at the client level

    hive创建表和导入数据都没有问题,在删除表,做drop table 时报如题所示的错误。 字符集默认创建就是latin1,修改字符集无法解决该问题,通过更换mysql驱动jar包解决问题,我的原始j...

    2017-03-09 23:30
    331
  • spark-1.6.0源码编译安装

    环境准备 spark是scala语言写的,scala运行需要jdk,如果通过maven编译,还需要maven环境,因此spark源码编译需要安装jdk,scala,apache-maven这三样环境。...

    2017-05-15 18:09
    452
  • redhat7源码编译hadoop2.6.0

    redhat7上源码编译hadoop2.6.0

    2017-06-23 13:04
    312
  • kafka+flume+hdfs实时日志流系统初探

    kafka+flume+hdfs搭建实时日志流系统

    2017-06-29 23:49
    630
  • hadoop-2.8.0完全分布式环境搭建

    hadoop2.8.0完全分布式环境搭建。

    2017-10-16 23:14
    88
  • flink快速入门及采坑记录

    flink快速入门及遇到的启动时内存不足解决办法。

    2017-12-06 18:51
    533

database
51279
web
00
nginx
1449
spring
43576
img博客搬家
img撰写博客
img发布 Chat
img专家申请
img意见反馈
img返回顶部