CDH问题及维护汇总

目录:一、HIVE错误二、HDFS错误三、oozie错误四、Kafka错误五、Hbase错误六、Yarn和CM错误七、维护及添加服务八、其他错误————————————————————————————————————————————一、HIVE错误错误01命令详细信息: 创建 Hive Metastore 数据库表 解决办法: cp -r /var/lib/hive/mysql-con...
阅读(930) 评论(0)

Mysql安装innodb支持

注意:查看/tem文件权限是不是 777 ,再添加 install plugin innodb soname ‘ha_innodb.so’; ,它会在tmp文件中写一个文本,如果没有权限,则报出找不到文件错误。系统环境:linux数据库版本:mysql 5.1.47 需要要安装innodb类型支持 先查看mysql是否安装了innodb插件[root@localhost bin]# ./...
阅读(285) 评论(0)

Spark算子分类及功能描述

目录:一、简介二、Value型Transformation算子三、Key-Value型Transformation算子四、Actions算子————————————————————————————————————————–一、简介spark算子大致上可分三大类算子:        1、Value数据类型的Transformation算子,这种变换不触发提交作业,针对处理的数据项是Value型的数据...
阅读(255) 评论(0)

Hive实战

目录:一、Hive是什么二、Hive与关系数据库的区别三、Hive架构介绍四、Hive的实战操作       1) HIVE的启动       2) Hive创建数据库       3) Hive删除数据库       4) 创建HIVE表添加数据       5) HIVE的分区       6) HIVE条件查询       7) UDF函数       8) 删...
阅读(2206) 评论(0)

Java集合综述

目录前言框架图代码展现—————————————————————————————————————-前言       在书写程序的时候,我们常常需要对大量的对象引用进行管理。为了实现有效的归类管理,我们常常将同类的引用放置在同一数据容器中。        由于数据容器中存放了我们随时可能需要使用到的对象引用,所以一般的数据容器要都要能能提供方便的查询、遍历、修改等基本接口功能。        早期...
阅读(369) 评论(0)

Java中ArrayList和LinkedList区别

目录1、需求2、代码展现3、结果展现4、详解————————————————————————————————————————–1、需求通过程序实现:Java中ArrayList和LinkedList区别2、代码展现import java.util.ArrayList; import java.util.LinkedList; import java.util.List;public class Li...
阅读(323) 评论(0)

Phoenix 技术分享

目录1. Phoenix 安装2. Phoenix 升级3. phoenix 依赖打包方式4.二级索引使用5.优化6. 事务处理7.数据更新————————————————————————————————————-1. Phoenix 安装1)Maven 编译从如下地址获取相应版本源码 https://github.com/chiastic-security/phoenix-for-cloudera...
阅读(1098) 评论(0)

SparkStreaming在启动执行步鄹和DStream的理解

目录:SparkStreaming启动执行步鄹:DStream和Rdd的理解Linux中发送数据SparkStreaming代码如下结果展示:————————————————————————————————————————–SparkStreaming启动执行步鄹:1、加载SparkConf和StreamingContext 2、建立DStream接收器val lines = ssc.socket...
阅读(721) 评论(0)

SparkStreaming实战

目录:一、Spark Streaming是什么二、Spark Streaming的A Quick Example三、Discretized Streams (DStreams)四、Dstream时间窗口五、Dstream操作六、Spark Streaming优化和特性——————————————————————————————————————–一、Spark Streaming是什么       S...
阅读(519) 评论(0)

区块链与大数据究竟有着怎样的关系?

今天,很多人还没弄懂大数据,区块链又来了。区块链与大数据究竟有着怎样的关系?看完本文的五大观点,你会认同赛智时代的这个结论:区块链让大数据汹涌而来。       马云说过,这是一个变化的年代,当很多人还没有搞懂PC互联网的时候,移动互联网来了,当很多人还没弄懂移动互联网,大数据来了。而今天,很多人还没弄懂大数据,区块链又来了。区块链与大数据究竟有着怎样的关系?看完本文的五大观点,你会认同赛智时代的这...
阅读(1050) 评论(0)

“区块链”究竟是什么?

最近区块链比较火。最早我是听一个朋友提起的,因为我对科技驱动的东西一直很感兴趣,所以也做了一些了解。简单讲,区块链就是一个去中心化的信任机制。       过去区块链主要应用在比特币上,一直到最近半年,区块链已经渐渐开始有了一些其他应用,特别是在金融领域,所以不断有人问我:“浩哥,你给我们讲讲区块链吧”。我今天给大家找来一篇文章,偏科普性质,不需要大家对技术和金融有任何背景,希望对大家有所帮助。...
阅读(1112) 评论(0)

Mysql 实用知识

目录:一、MySQL的安装与配置       1)MySQL的安装与配置–安装RPM包       2)MySQL的安装与配置–安装二进制包       3)MySQL的安装与配置–安装源码包二、用户与权限       1)用户与权限—用户管理       2)用户与权限—权限表       3)用户与权限—权限管理三、表类型(存储引擎)介绍       1)存储引擎查看       2)存储引擎...
阅读(379) 评论(0)

ElasticSearch查询

目录:一、基本概念二、数据生成三、查询方法       1)Match 匹配查询       2)Multi_match 多匹配查询       3)Fuzzy Query 模糊查询       4)Wildcard Query(通配符查询)       5)Match Phrase (短语匹配)       6)Term 查询       7)Sorted 查询       8)排序分页查询...
阅读(522) 评论(0)

Druid容错机制

目录:一、Historical Node二、Broker Node三、Coordinator Node四、RealTime Node五、Indexing Service Node六、Deep Storage七、Metadata Storage八、Zookeeper————————————————————————————————————————一、Historical Node       如果一个H...
阅读(350) 评论(0)

Druid索引过程详解

目录:一、结构介绍       1)Historical Node       2)Broker Node       3)Coordinator Node       4)Real-Time Node       5)Indexing Service Node二、Druid索引的上游数据转换的过程       1)原始数据       2)roll up(上卷)三、Segment简要介绍四、索引核...
阅读(1096) 评论(0)
327条 共22页首页 上一页 1 2 3 4 5 ... 下一页 尾页
    个人简介
    个人资料
    • 访问:356322次
    • 积分:6425
    • 等级:
    • 排名:第3959名
    • 原创:280篇
    • 转载:23篇
    • 译文:24篇
    • 评论:72条
    博客专栏
    【友情推荐】章鱼大数据