flink

最新推荐文章于 2024-07-25 23:49:05 发布
最新推荐文章于 2024-07-25 23:49:05 发布
阅读量41 收藏
点赞数
文章标签： scala spark 大数据 linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_63168851/article/details/130105597
版权

1、解压flink
    tar -zxvf flink-1.10.2-bin-scala_2.12.tgz -C /opt/programs

2、配置环境变量  (3台机器)
    vim /etc/profile
        export FLINK_HOME=/opt/programs/flink-1.10.2
        export PATH=$PATH:$FLINK_HOME/bin

4.刷新环境变量
    source /etc/profile

5.启动测试
    start-cluster.sh

6.查看进程
[hadoop@hadoop000 ~]$ jps
5460 StandaloneSessionClusterEntrypoint

7.查看flink ui 界面
http://192.168.74.17:8081/

小宏运维有点菜
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
Apache Flink：实时流处理与批处理的统一框架
聚焦于深度解析最新的编程语言特性、框架升级、架构设计、开发工具和最佳实践，涵盖Web前端（如Vue3, React, Angular等）、后端开发（如Node.js, Java, Python等）、移动端开发（iOS, Android原生及跨平台开发）
04-02 5万+
Apache Flink是一个强大的实时流处理和批处理框架，它打破了传统流处理和批处理的界限，提供了一个统一的平台来处理各种类型的数据。通过其精确一次的状态一致性、高吞吐量、低延迟等特性，Flink已经被广泛应用于各种实时分析和批处理任务中。
Flink WordCount实践
大头皮鞋的博客
04-09 2665
Flink WordCount实践
一文弄懂Flink CDC
a805814077的博客
07-25 7653
Flink CDC的详解，一文就能理解透彻
flink连接器jar包.rar
04-11
标题 "flink连接器jar包.rar" 暗示了我们正在讨论Apache Flink的数据连接器，这是一个关键组件，允许Flink与各种数据源和数据接收器进行交互。Flink作为一个强大的流处理和批处理框架，其连接器是实现数据输入和输出...
flink cdc postgresql
04-07
标题中的“flink cdc postgresql”指的是一项技术整合，即使用Apache Flink的数据变更数据捕获（CDC，Change Data Capture）功能来实时同步PostgreSQL数据库的数据变化。这项技术在大数据实时处理和流计算场景中非常...
flink-1.16.2下载安装包，flink-1.16.2-bin-scala-2.12.zip
02-29
Apache Flink是一个流行的开源流处理和批处理框架，它提供了高度容错的数据处理能力，能够实时处理大规模数据流。Flink 1.16.2是该软件的一个稳定版本，针对Scala 2.12构建，这意味着它可以充分利用Scala语言的强大...
flink-1.19.0-bin-scala-2.12.tgz flink-1.16.3-bin-scala-2.12.tgz
05-21
标题和描述中提到的"flink-1.19.0-bin-scala-2.12.tgz"和"flink-1.16.3-bin-scala-2.12.tgz"是Apache Flink的两个不同版本的二进制发行版。Flink是一个开源的流处理和批处理框架，它提供了低延迟、高吞吐量的数据...
flink-java-本地例子
08-17
在本教程中，我们将深入探讨"flink-java-本地例子"这一主题，它涉及Apache Flink的Java API以及如何在本地环境中运行Flink程序。Apache Flink是一个强大的开源流处理和批处理框架，广泛用于实时数据处理。我们将讨论...
Spark实时（五）：InputSource数据源案例演示
最新发布
Lansonli（蓝深李）的博客
07-25 515
实时监控json格式数据时，创建的Schema 中的字段需要与Json中的属性保持一致，否则在映射成表时，Schema中含有但在Json中没有的属性的字段对应的数据会为null。以上代码编写完成之后，向监控的目录“./data”中不断写入含有以下内容的文件，可以看到控制台有对应的流数据输出，这里一定是原子性的将文件复制到对应目录下。以上代码启动之后，向监控的目录“./data”下原子写入含有以下内容的json文件，在控制台可以看到实时监控内容。
探索Perl的奇妙世界：入门学习与实战指南
sinner小屋
07-25 530
《探索Perl的奇妙世界：入门学习与实战指南》为大家提供了一个全面的Perl编程学习路径，从基础知识到高级技巧，涵盖了Perl在Web开发、数据库操作和生物信息学中的实际应用。通过详实的代码案例和实战演练，本书帮助大家深入理解Perl的强大功能和灵活性。同时，文中还探讨了Perl的优势与局限，以及其在未来的发展潜力，适合所有希望提升Perl编程技能的读者。
Spark核心知识要点（八）Shuffle配置调优
ytp552200ytp的博客
07-25 531
Spark核心知识要点（八）Shuffle配置调优
Spark核心知识要点（三）
ytp552200ytp的博客
07-25 400
Spark核心知识要点（三）
Python--Spark RDD filter 方法使用及性能优化笔记
mmd666的博客
07-22 1046
在Apache Spark中，RDD（弹性分布式数据集）是基本的数据结构，用于处理大规模数据集。filter是 RDD 的一个常用方法，用于对数据进行过滤，只保留满足特定条件的数据。
【Spark官方文档部分翻译】RDD编程指南（RDD Programming Guide）
petrel2015的博客
07-21 1076
Spark官方RDD编程指南翻译及总结
Spark 解析嵌套的 JSON 文件
ytp552200ytp的博客
07-25 192
Spark 解析嵌套的 JSON 文件
Spark SQL----Hints
Gabriel Wang的博客
07-21 814
Join提示允许用户建议Spark应该使用的join策略。当在join的两侧都指定了不同的join策略提示时，Spark会按以下顺序对提示进行优先级排序：BROADCAST > MERGE > SHUFFLE_HASH > SHUFFLE_REPLICATE_NL。当两侧都使用BROADCAST提示或SHUFFLE_HASH提示时，Spark会根据join类型和relations的大小来选择构建侧。由于给定的策略可能不支持所有的join类型，因此不能保证Spark使用提示建议的join策略。
Spark核心知识要点（二）
ytp552200ytp的博客
07-25 358
Spark核心知识要点（二）
Apache Flink部署全攻略
"运行Apache Flink Everywhere" Apache Flink是一个开源流处理框架，设计用于处理无界和有界数据流，支持实时和批处理任务。"运行Apache Flink Everywhere"的主题表明，该资源主要关注Flink在各种不同环境和平台上...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小宏运维有点菜

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值