afei00123
没有网络安全就没有国家安全!
展开
-
大 数 据 应 用 职 业 技 能 大 赛 题 库
大 数 据 应 用 职 业 技 能 大 赛 题 库一 、 单 选 题1 . H D F S 中 的 b l o c k 块 默 认 保 存 ( ) 份A . 1B . 2C . 3D . 42 . 下 列 程 序 中 负 责 H D F S 数 据 存 储...原创 2020-03-01 19:13:07 · 1310 阅读 · 0 评论 -
部署hadoop+hive+sqoop
实验环境 主机名 主机IP 角色 操作系统 hadoop1 192.168.1.40 NameNode CentOS 7.4 hadoop2 192.168.1.41 ...原创 2020-03-01 12:28:46 · 1265 阅读 · 0 评论 -
Hive问题汇总
Hive初始化问题汇总问题1:[root@hadoop1 conf]# schematool -initSchema -dbType mysql...Exception in thread "main" java.lang.RuntimeException: com.ctc.wstx.exc.WstxParsingException: Illegal character entity: e...原创 2020-02-29 09:33:53 · 314 阅读 · 0 评论 -
Hive的基本操作
实验环境 已经安装好Hadoop集群,Hive连接好Mysql1.基本HQL语句[root@hadoop1 ~]# hivehive> show databases;OKdefault #hive默认的数据库Time taken: 2.415 seconds, Fetched: 1 row(s)hive> use default; #不需要指定数...原创 2020-02-28 17:10:42 · 194 阅读 · 0 评论 -
Hive简介及架构
Hive简介 hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将类sql语句转换为MapReduce任务进行运行。 Hive的本质 将HQL转化为MapReduce程序。 SQL——>MapReduce原理 Hive的优点 简单容易上手:提供...原创 2020-02-28 15:22:06 · 608 阅读 · 0 评论 -
Hadoop分布式环境(集群)搭建
分布式环境:多个服务器运行Hadoop各个进程 实验环境 主机名 主机IP 角色 操作系统 master 192.168.3.154 NameNode CentOS 7.6 slave1 ...原创 2020-02-28 10:47:28 · 174 阅读 · 0 评论 -
Hadoop伪分布式环境二(YARN)
1.修改批量式配置文件[root@server hadoop-2.7.3]# cd etc/hadoop/[root@server hadoop]# mv mapred-site.xml.template mapred-site.xml[root@server hadoop]# vim mapred-site.xml[root@server hadoop]# vim mapred-site...原创 2020-02-27 13:58:23 · 152 阅读 · 0 评论 -
Hadoop伪分布式一(HDFS)
伪分布式环境——一个服务器上运行多个进程1.修改配置文件core-site.xml[root@server ~]# cd hadoop/hadoop-2.7.3/[root@server hadoop-2.7.3]# cd etc/hadoop/[root@server hadoop]# lscapacity-scheduler.xml kms-env.shconfigura...原创 2020-02-27 09:00:13 · 172 阅读 · 0 评论 -
Hadoop单机环境搭建
说明:单机环境—仅仅适用于单击运行分布式计算作业,直接执行mapreduce-examples.jar案例。1.首先到官网下载好hadoop压缩包,上传到Linux上,解压2.修改主机名[root@client2 ~]# hostnamectl set-hostname server[root@client2 ~]# reboot #重启生效3.设置主机与ip间的映射[roo...原创 2020-02-26 20:48:45 · 180 阅读 · 0 评论 -
Hadoop大数据平台简介
Hadoop的由来 hadoop是用于处理分布式存储和分布式计算的一个大数据处理框架。2002年,google开源了GFS论文。一个叫Doung Cutting的人根据GFS论文写了一个HDFS模块,解决了分布式存储的问题;2004年,google又开源了MapReduce论文,Doung Cutting又根据这篇论文写了一个MapReduce模块。后来将HDFS和MapReduce拆分出...原创 2020-02-26 19:16:03 · 2512 阅读 · 0 评论 -
Echarts折线图—line
折线图代码实例:<!DOCTYPE html><html lang="en"><head> <meta charset="UTF-8"> <title>折线图line</title> <script src="../echartsjs/echarts.min.js"></script>&l...原创 2020-02-26 18:47:08 · 270 阅读 · 0 评论 -
Echarts饼状图—pie
饼状图代码实例:<!DOCTYPE html><html lang="en"><head> <meta charset="UTF-8"> <title>饼状图pie</title> <script type="text/javascript" src="../echartsjs/echarts.min.js"...原创 2020-02-26 15:55:04 · 372 阅读 · 0 评论 -
Echarts柱状图—bar
柱状图代码实例:<!DOCTYPE html><html lang="en"><head> <meta charset="UTF-8"> <title>bar</title> <!--引入echarts.js --> <script src="../echartsjs/echarts.mi...原创 2020-02-25 14:06:51 · 656 阅读 · 0 评论 -
Echarts简介与入门
简介 ECharts,缩写来自Enterprise Charts,商业级数据图表,一个纯Javascript的图表库,可以流畅的运行在PC和移动设备上,兼容当前绝大部分浏览器(IE6/7/8/9/10/11,chrome,firefox,Safari等),底层依赖轻量级的Canvas类库ZRender,提供直观,生动,可交互,可高度个性化定制的数据可视化图表。创新的拖拽重计算、...原创 2020-02-25 11:33:43 · 1333 阅读 · 0 评论 -
Sublime text3安装插件
注意:因为https://packagecontrol.io/已被墙,所以安装插件时需要翻墙。1.docblockr插件作用:docblockr插件可用来快速添加注释。说明安装成功用法:(1)输入/*+回车,补充块注释;(2)输入/**按回车,补充多行注释;(3)在写好的函数上方输入/**按tab键,自动补充函数说明格式。2.emmet插件简介: Emmet...原创 2020-02-25 08:57:09 · 125 阅读 · 0 评论