自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(14)
  • 收藏
  • 关注

原创 HDFS常见原理

hdfs常见原理

2023-02-02 18:56:30 250

原创 Linux常用命令

linux常用命令及其分类

2023-01-11 23:07:01 132

原创 大数据组件常用端口

大数据常用组件的端口

2022-03-24 11:30:22 336

原创 【IDEA package 打包报错 Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin】

Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.7.0:compile

2022-03-14 15:51:54 2010

原创 【hive配置metastore远程模式】

hive配置metastore远程模式

2021-12-24 14:46:13 2395 1

原创 【Hive部署搭建高可用集群 ha】

Hive搭建 ha高可用集群Hive搭建 ha高可用集群第一步 修改hdfs-site.xml第二步 修改core-site.xml修改mapred-site.xml第四步 修改yarn-site.xmlHive搭建 ha高可用集群你好! 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章,了解一下Markdown的基本语法知识。第一步 修改hdfs-site.xml<configuration><!--指

2021-12-13 16:28:53 1559

原创 通过hive元数据表获取hive分区表的相关信息

通过hive元数据表获取hive分区表的元数据信息通过hive元数据表获取hive分区表的元数据信息项目中需要获取hive所有分区表的分区信息并显示到页面如图方案:通过JDBC连接hive源数据库,sql语句实现编写sql语句:SELECT main.*,b.numRows,b.totalSize FROM ( SELECT main.TBL_ID AS metaObjectId ,main.TBL_NAME AS tabName ,b.PART_ID AS partId ,b.

2021-10-18 14:48:05 1974 2

原创 Flink如何使用state做缓存

在flink中有state可用用来记录工作状态,进行相关的数据计算,同时状态也是可以用来当做缓存使用的。使用MapSatate进行数据缓存作为Redis和数据流的中间结果存储。首先获取flink上下文RuntimeContext runtimeContext = getRuntimeContext()其次定义map描述器//定义描述器 MapStateDescriptor<String, LbsInfo> lbsInfoState =

2021-09-16 18:31:56 1570

原创 idea使用git如何合并本地及其远程分支

合并本地分支首先选中要合并的分支A checkout并然后 鼠标点击到分支B 选中Merge Into current就会把 B分支合并到 A分支

2021-09-16 18:10:39 3174

原创 centos7安装离线mysql5.7

第一步 卸载原有mysql01 查看已安装mysqlpm -qa | grep -i mysql02 卸载查询到的mysql 列表rpm -e --nodeps 查询到的mysql名第二步 删除残余mysql文件01 查找mysql文件find / -name mysql whereis mysql02 删除文件rm -rf 查找到的文件路径(如果有原有数据请勿使用)03 删除mysql配置文件rm –rf /usr/my.cnfrm -rf /root/.mysql_

2021-01-23 15:13:41 101

原创 linux安装从官网上下载的git源码包详细攻略

第一步:官网所有git历史版本任君挑选:git官网版本飞机选择新鲜的下载第二步linux上传压缩包并解压rz使用rz指令上传从官网上下崽的包tar -zxvf git-2.29.2.tar.gz第三步安装编译所需要的依赖yum install curl-devel expat-devel gettext-devel openssl-devel zlib-devel gcc perl-ExtUtils-MakeMaker中间需要输入 y 回车键成功界面:第四步依赖

2020-12-16 16:53:40 1560 1

翻译 Spark基本原理概念

一 Spark起源Spark是一个基于scala语言开发的使用内存计算的大数据计算框架,诞生目的是为了解决传统计算框架如mapreduce基于磁盘计算导致计算速度慢所产生的弊端。目前Spark已经成长为一个优秀且强大的实时计算应用框架,可用于构建大型的、低延迟的数据分析应用程序。2009 年,Spark诞生于加州大学伯克利分校 AMPLab2013 年 6 月,成为 Apache 孵化项目2014年 2 月,成为 Apache 顶级项目2015年~, Spark在国内IT行业变得愈发火爆,大量的公

2020-07-24 16:05:19 272

转载 23种设计模式一网打尽(精品) JAVA语言实现

| | ||–|--|https://blog.csdn.net/u011642663/article/details/90597317| | |

2019-05-28 14:22:13 81

转载 网络通信之OSI七层模型

        博主是搞是个FPGA的,一直没有真正的研究过以太网相关的技术,现在终于能静下心学习一下,希望自己能更深入的掌握这项最基本的通信接口技术。下面就开始搞了。一、OSI参考模型        今天我们先学习一下以太网最基本也是重要的知识——OSI参考模型。 1...

2019-05-27 18:35:01 1354

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除