- 博客(15)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 制作flink的parcel包（cloudera管理flink）
反编译查看 opt/cloudera/parcels/FLINK-1.9.2-BIN-SCALA_2.11/lib/flink/lib/flink-shaded-需在 flink-shaded-9.0/flink-shaded-hadoop-2-uber/pom.xml 中的 dependencies 标签中添加如下依。路径是： flink-1.x.x/flink-disk/target/flink-1.x.x-bin。hadoop-2-uber-3.0.0-cdh6.3.2-7.0.jar，发现。
2024-07-05 15:44:08
988
原创 VMware安装CentOS
我们将鼠标移入到虚拟机中，并按下键盘中的“↑”键，选择Install CentOS 7，最后按下“Enter 键”。界面说明：Install CentOS 7 安装CentOS 7Test this media & install CentOS 7 测试安装文件并安装CentOS 7Troubleshooting 修复故障。
2023-05-25 16:34:10
402
原创 DolphinScheduler任务调度工具
Apache DolphinScheduler 是一个分布式、易扩展的可视化DAG工作流任务调度平台。致力于解决数据处理流程中错综复杂的依赖关系，使调度系统在数据处理流程中开箱即用。
2023-05-18 10:42:55
601
1
原创 Zookeeper的客户端命令行操作
（1）在node02主机上注册监听/test节点的子节点变化。（1）在node02主机上注册监听/test节点数据变化。（2）在node01主机上修改/test节点的数据。（2）在node01主机/test节点上创建子节点。（3）观察node02主机收到子节点变化的监听。（3）观察node02主机收到数据变化的监听。（3）再次查看根目录下短暂节点已经删除。（2）退出当前客户端然后再重启客户端。（1）在当前客户端是能查看到的。（1）先创建一个普通的根节点。（2）创建带序号的节点。
2023-05-11 16:07:43
711
原创 Zookeeper分布式应用协调服务工具
是一个数字，表示这个是第几号服务器；集群模式下配置一个文件myid，这个文件在dataDir目录下，这个文件里面有一个数据就是A的值，Zookeeper启动时读取此文件，拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。ZooKeeper数据模型的结构与Unix文件系统很类似，整体上可以看作是一棵树，每个节点称做一个ZNode。是万一集群中的Leader服务器挂了，需要一个端口来重新进行选举，选出一个新的Leader，而这个端口就是用来执行选举时服务器相互通信的端口。
2023-05-09 16:44:32
2157
原创 Linux安装Htop
平均负载部分提供了三个数字，这仅仅表示的是过去的5分钟、10分钟和15分钟系统的平均负载而已，在单核的系统中平均负载为1表示的是百分之百的 CPU 利用率。与top只提供最消耗资源的进程列表不同，htop提供所有进程的列表，并且使用彩色标识出处理器、swap和内存状态。F 跟踪进程: 如果排序顺序引起选定的进程在列表上到处移动，让选定条跟随该进程。使用方向键会停止该功能。1、 可以横向或纵向滚动浏览进程列表，以便看到所有的进程和完整的命令行。• NI：进程的优先级别值，默认的为0，可以进行调整。
2023-05-08 17:42:42
1163
原创 Linux安装Mysql
MySQL 是最流行的 关系型数据库管理系统 之一，在 WEB 应用方面，MySQL是最好的 RDBMS (Relational Database Management System，关系数据库管理系统) 应用软件之一。MySQL是一种关系型数据库管理系统，关系数据库将数据保存在不同的表中，而不是将所有数据放在一个大仓库内，这样就增加了速度并提高了灵活性。
2023-05-08 17:15:42
284
原创 HDFS的Java API操作
winutils： 适用于Hadoop版本的Windows二进制文件，这些是直接从用于创建官方ASF版本的相同git提交构建的;它们被检出并构建在Windows VM上，该VM专用于在Windows上测试Hadoop / YARN应用程序。件 >（3）然后是服务器的自定义配置（xxx-site.xml）>（4）服务器的默认配置（xxx-default.xml）参数优先级排序：（1）客户端代码中设置的值 >（2）ClassPath 下的用户自定义配置文。(点击蓝色字体跳转)
2023-04-03 16:15:03
868
原创 HDFS的Shell操作
3）-chgrp、-chmod、-chown：Linux 文件系统中的用法一样，修改文件所属权限。5）-cp：从 HDFS 的一个路径拷贝到 HDFS 的另一个路径。11）-setrep：设置 HDFS 中文件的副本数量。7）-tail：显示一个文件的末尾 1kb 的数据。9）-rm -r：递归删除目录及目录里面内容。6）-mv：在 HDFS 目录中移动文件。10）-du 统计文件夹的大小信息。8）-rm：删除文件或文件夹。2）-cat：显示文件内容。4）-mkdir：创建路径。
2023-04-03 10:52:16
262
1
原创 Linux安装JDK
JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。
2023-03-30 16:46:39
577
2
原创 ORA-39346: data loss in character set conversion for object COMMENT
ORA-39346: data loss in character set conversion for object COMMENT
2022-08-30 14:29:37
5890
原创 Kettle ETL处理工具
（1）创建环境变量（spoon.sh 会判断PENTAHO_DI_JAVA_OPTIONS是否为空）（1）打开kettle图像化界面，点击右上角connect，选择Other Resporitory。（2）点击add后点击Other Repositories。每次添加转换和作业都需要配置日志表（有的时候可能会忘记）（2）选择Database Repository。（3）配置Run configurations。（2）配置Kettle集群schemas。（4）配置转换使用集群执行。（1）选择connect。
2021-08-12 21:27:16
4481
1
jdk-8u144(Linux/windows)
2023-04-03
winutils 2.6.1-3.2.2
2023-04-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人