大数据
文章平均质量分 88
刘金宝_Arvin
不正规大数据开发工程师,
不正规数据挖掘开发工程师,
半路出家不正规程序员。
展开
-
五分钟,Docker安装flink,并使用flinksql消费kafka数据
根据自己的flink版本,下载对应的 flink-sql-connector-kafka jar包。命令,用户宿主机和docker容器文件传输。确保有一个可用的kafka,如果没有,可以五分钟内,Docker搭建一个。将下载的jar包,分别在jobmanager,taskmanager。顾名思义,用于连接flinksql和kafka。并且通过python,简单写一个生产者。可以看出,我的版本是1.18.0。进入jobmanager中,执行。进入 flink的bin目录。原创 2023-11-23 17:44:53 · 1513 阅读 · 0 评论 -
借助Docker学习大数据:Flink
借助Docker学习大数据:Flink注意:本博文基于WSL2 & Docker,如无法达到实验效果,请注意环境差异。如果你使用的是Ubuntu、虚拟机等方式,注意下文提到的hostname。WSL2安装Docker: https://zhuanlan.zhihu.com/p/163763066本文注重实验,原理可参考: https://blog.csdn.net/oTengYue/article/details/102689538一、Flink集群搭建1.1 镜像下载首先下载Flink原创 2020-08-09 17:27:41 · 677 阅读 · 1 评论 -
使用Docker学习Hbase
使用Docker学习Hbase近些日,想通过Docker深入了解下Hbase,但是发现,这方面的博文内容分散各处,良莠不齐,故把近期的学习心得总结如下,以飨读者。[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Ua05TPRi-1596417937050)(C:\Users\19041290\AppData\Roaming\Typora\typora-user-images\image-20200728193656015.png)]本博文侧重于实验理解。准备工作:Doc原创 2020-08-03 09:41:20 · 2315 阅读 · 9 评论 -
Windows下通过VMware虚拟机安装Ubuntu(Linux)及常见问题解决
Windows下通过VMware虚拟机安装Ubuntu(Linux)及常见问题解决原创 2017-09-19 08:34:46 · 17173 阅读 · 3 评论 -
二度好友推荐源码
二度好友推荐源码原创 2017-11-06 12:55:46 · 866 阅读 · 0 评论 -
解决Linux(Ubuntu)环境变量配置无效的问题:JDK,Hadoop,Spark,Scala等
解决Linux(Ubuntu)环境变量配置无效的问题:JDK,Hadoop,Spark,Scala等原创 2017-10-16 22:07:23 · 2739 阅读 · 1 评论 -
Hadoop学习3:Hadoop核心组件-MapReduce
Hadoop学习3:Hadoop核心组件-MapReduce原创 2017-10-23 15:18:20 · 520 阅读 · 0 评论 -
Spark安装(Ubuntu环境下)
Spark安装(Ubuntu环境下)原创 2017-10-23 12:31:05 · 6741 阅读 · 9 评论 -
Hadoop学习2:HDFS介绍
HDFS简介原创 2017-10-12 23:11:42 · 315 阅读 · 0 评论 -
Hadoop学习1:Hadoop概述
Hadoop概述原创 2017-10-12 22:36:37 · 305 阅读 · 0 评论 -
hadoop运行Eclipse项目:WordCount项目
hadoop运行Eclipse项目:WordCount项目原创 2017-10-03 14:54:50 · 1890 阅读 · 4 评论 -
Ubuntu下使用eclipse搭建Hadoop开发环境
Ubuntu下使用eclipse搭建Hadoop开发环境原创 2017-10-03 10:57:30 · 1039 阅读 · 2 评论 -
Hadoop问题:hadoop集群NameNode成功启动,而datanode未启动
Hadoop问题解决:hadoop集群NameNode成功启动,而datanode未启动原创 2017-10-02 18:04:45 · 1905 阅读 · 0 评论 -
解决ssh服务器报错:agent refused operation
解决ssh服务器报错:agent refused operation原创 2017-10-17 20:50:50 · 9571 阅读 · 3 评论