- 博客(10)
- 资源 (6)
- 收藏
- 关注
RSS订阅原创 yanagishima 22.0 内网机使用
编译安装安装 Gradlecd /opt# 如果下载失败，请使用迅雷进行下载，然后上传到服务器节点wget https://services.gradle.org/distributions/gradle-5.2-bin.zip# 解压unzip gradle-5.2-bin.zip# 配置环境变量vi /etc/profile.d/gradle.shexport GRADLE_HOME="/opt/gradle-5.2"export PATH=$PATH:$GRADLE_HOM
2021-08-05 11:01:31
560
原创 CDH 6 启用 kerberos 基于密钥的客户端连接
使用kadmin创建一个bde的principalkadmin.localAuthenticating as principal root/admin@HADOOP.COM with password.kadmin.local: addprinc bde@HADOOP.COMWARNING: no policy specified for bde@HADOOP.COM; defaulting to no policyEnter password for principal "bde@HADO
2021-06-25 13:17:42
332
原创 CDH6.2 启用 kerberos
# 创建域 HADOOP.COMkdb5_util create -r HADOOP.COM -s# kadmin 创建管理员用户kadmin.localAuthenticating as principal root/admin@HADOOP.COM with password.kadmin.local: addprinc cloudera-scm/admin@HADOOP.COM WARNING: no policy specified for cloudera-scm@H.
2021-06-25 12:09:38
206
原创 Spark写ORC异常
报错信息SLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/opt/cloudera/parcels/CDH-6.2.0-1.cdh6.2.0.p0.967373/jars/slf4j-log4j12-1.7.25.jar!/org/slf4j/impl/StaticLoggerBinder.class]SLF4J: Found binding in [jar:file:/o.
2021-04-22 18:59:24
830
原创 SPARK任务提交资源分配
spark-defaults.confspark.master=yarn# spark_deploy_mode=clusterspark.driver.memory=1Gspark.executor.memory=1Gspark.testing.reservedMemory=0# 去除1.5*300M 最小提交内存限制，环境资源紧张时可以设为0yarn-site.xml<property> <name>yarn.nodem...
2021-04-20 12:29:30
577
原创 Presto 0.244.1 aarch64编译
CPU Phytium,FT-2000+/64 OS Kylin Linux Advanced Server 10 参考华为鲲鹏解决方案netty移植# 略jline-2.14.6移植<jansi-native-version>1.6</jansi-native-version><groupId>org.fusesource.jansi</groupId> <arti...
2020-12-15 14:53:37
1598
1
原创 kerberos高可用部署
1.环境准备system-OS：centos73CDH version：5.11cat /etc/hosts192.168.11.181 deploy-1192.168.11.182 deploy-2192.168.11.183 deploy-3主备节点使用keepalived虚IP漂移vip：192.168.17.180主节点：deploy-2备节点：deploy-3...
2019-10-06 21:39:56
500
原创 GitLab部署使用
gitlab帮助文档：https://docs.gitlab.com/ce/README.htmlGitLab是利用Ruby on Rails一个开源的版本管理系统，实现一个自托管的Git项目仓库，可通过Web界面进行访问公开的或者私人项目。GitLab安装cat /etc/yum.repos.d/gitlab-ce.repo[gitlab-ce]name=Gitlab CE ...
2019-10-06 21:29:35
145
原创 git常用命令
创建git用户useradd -r -c 'git version control' -d /home/git -m gitpasswd git#禁止该git用户使用shell登录系统vi /etc/passwd git:x:996:994:git version control:/home/git:/usr/bin/git初始化本地仓库git init --bare re...
2019-10-06 21:16:50
160
原创 kafka-manager-1.3.3.18 【已编译，上传修改zookeeper直接使用】
Kafka-manager安装查看和管理Kafka，完全使用控制台命令并不方便，我们可以使用雅虎开源的Kafka-manager，GitHub地址如下：https://github.com/yahoo/kafka-manager我们可以使用Git或者直接从Releases中下载，然后编译，编译耗时，以编译1.3.3.18版本下载地址：https://download.cs...
2018-07-19 15:02:48
1926
yanagishima-22.0.tgz
2021-08-05
hadoop-2.7.3.tar.gz arm
2020-07-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人