Hadoop
木凡空
就让光芒折射泪湿的瞳孔
映出心中最想拥有的彩虹
展开
-
Windows搭建Hadoop开发环境
一、安装Java版本1.8,安装过程省略…二、安装Hadoop1.下载下载安装包 Hadoop2.9.0解压。路径示例:C:\Software\hadoop-2.9.02.配置环境变量三.修改hadoop配置1.新建data目录及子目录2.修改配置文件修改 core-site.xml<configuration> <property> <name>fs.defaultFS</name> <value原创 2020-06-26 08:35:01 · 837 阅读 · 0 评论 -
大数据分析之FineBI
一、安装FineBI1、Windows安装(1)下载 到官网 https://www.finebi.com/product/download下载对应版本(2)安装(3)注册 未注册用户的并发数会受限制为2,单纯用于个人学习勉强够用,若用于多人团队或工作上会带来很大影响,建议注册。图示是注册后的。(一次性注册成功,操作简单)官网的注册是收费的,对企业来说毛毛雨,对学生或普通工作党还是一笔不小的开支。网上的“注册方法”极少,小编也是“千辛万苦”注册成功的。(需要注册,你懂的~)(4)原创 2020-05-24 19:03:37 · 2100 阅读 · 0 评论 -
Hadoop查看snappy压缩文件
hadoop fs -D io.compression.codec.snappy.native=true -text /data/test/part-00000.snappy |head -10原创 2019-12-10 09:47:10 · 2519 阅读 · 0 评论 -
Hadoop所有dataNode信息为0
其中之一可能是防火墙问题,关闭防火墙 systemctl stop firewalld原创 2019-11-23 22:51:36 · 514 阅读 · 0 评论 -
Yarn查看jobs日志
yarn logs -applicationId application_1553888952013_341399 > yarn.log原创 2019-11-14 12:02:07 · 427 阅读 · 0 评论