大数据
暗焰之珩
这个作者很懒,什么都没留下…
展开
-
Kibana7导出数据到csv
原创 2020-03-18 21:13:30 · 5051 阅读 · 2 评论 -
CentOS6离线安装CDH5.10.0
目录CDH5.10.0离线安装手册1.yum源配置(所有节点)2.网络配置(所有节点)3.免密传输与简单传输脚本的使用(主节点)4.安装Oracle的Java(所有节点)5.安装配置MySQL(主节点)6.关闭防火墙和SELinux(所有节点)7.配置NTP服务(所有节点)8.安装Cloudera Manager Server 和Agent9.CDH5.10...原创 2019-11-20 20:44:27 · 262 阅读 · 0 评论 -
Centos7上用Ambari+HDP2.6.4安装大数据环境
目录1概述2系统环境配置2.1Hdp所需软件下载2.2主机规划2.3部署2.3.1修改主机名与关闭防火墙、SElinux2.3.2配置ambari-server(ams)免密登录其他节点2.3.3配置阿里yum源(所有节点)2.3.4配置J...原创 2019-11-20 20:24:10 · 797 阅读 · 0 评论 -
Python将Elastic search数据导出到csv
Kibana6应该有这个功能了,Kibana5.3是把datatable转成pdf格式,不满足我的需求,所以写了一个简单的脚本。import csv, yaml, osimport pandas as pdimport numpy as npfrom elasticsearch_dsl.connections import connectionses = connections.c...原创 2018-12-25 22:34:22 · 3338 阅读 · 0 评论 -
HDFS联邦+ViewFS
目录1.基本概念1.1背景2.测试配置2.1界面配置参数2.2查看node1上namenode VERSION的clusterid2.3node4节点安装secondary namenode2.4查看namenode的webUI3.命令行接口的统一3.1 Viewfs配置1.基本概念1.1背景HDFS主要包括两层:Namespace由目录...原创 2018-08-29 23:06:59 · 5075 阅读 · 0 评论