自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(6)
  • 收藏
  • 关注

原创 Flink程序打包问题记录。

provided适合在编译和测试的环境,和compile功能相似,但provide仅在编译和测试阶段生效,provide不会被打包,也不具有传递性。比如:上面讲到的spring-boot-devtools、servlet-api等,前者是因为不需要在生产中热部署,后者是因为容器已经提供,不需要重复引入。我使用的是provided,也就是说当我程序运行起来时,被打上provided标签的两个依赖实际上并未真正导入到我本地的flink程序中。控制依赖的使用范围,指定当前jar包的依赖范围和依赖的传递性。

2023-10-09 09:41:58 190 1

原创 Flink学习笔记(一)

Apache flink是一个框架和分布式处理引擎,用于对无界和有界数据流进行状态计算。

2023-10-08 17:21:05 76 1

原创 记录下dolphinscheduler开发datax脚本报错:: /opt/soft/python/bin/python2.7: No such file or directory

例如:如果Python的可执行文件路径为/usr/bin/python,则将配置项修改为:python.env=/usr/bin/python;dolphinscheduler在调用python命令时,使用的是安装包自带的pyhon环境变量。详情见/conf/env/dolphinscheduler_env.sh。

2023-09-27 16:57:20 523

原创 记录一下CDH重装遇到的问题:

python2和python3的部分语法区别:捕获异常:2.X使用,连接异常类型和异常变量名,3.0则使用as连接在Python2中,我们可以使用这样的语句进行异常处理:try:(空)#put your code hereexcept Exception, e:(空)print str(e)在Python3中,我们要使用这样的语句:try:(空)#put your code hereexcept Exception as e:(空)print (str(e))

2023-08-26 14:54:27 509

转载 python3 使用yum安装时报错( File “/usr/libexec/urlgrabber-ext-down“, line 28 except OSError, e: )

一般是因为安装了Python3之后,又直接建立了一个软连接,将其指向为Python3了,而除非你同时升级yum,不然直接使用yum命令是不被允许的。还有一种方法是修改报错文件头行,我采用的是第二种。python3 使用yum安装时报错( File “/usr/libexec/urlgrabber-ext-down“, line 28 except OSError, e: )1、修改报错文件,将头行"#!/usr/bin/python" 改为 "#!/usr/bin/python2"即可。

2023-08-02 15:18:20 581

原创 记录CDH断电后,cloudera-scm-server启动报错的问题

备注:Linux上mysql未正常关闭时,/var/run/mysqld 文件夹会被自动删除,导致mysqld.pid进程文件无法被创建,所以mysql服务无法正常启动。①、切换到/var/run/mysqld文件夹,发现果然是mysqld文件夹被删,导致mysql启动无法创建mysqld.pid文件。systemctl status mysql.service ,果然Mysql未正常启动。①、手动新建/var/run/mysqld文件夹,并赋予mysql组权限。昨晚电脑断电,今早重新启动各个虚拟机后。

2023-07-31 11:27:50 484 2

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除