- 博客(13)
- 资源 (2)
- 收藏
- 关注
RSS订阅翻译 Zookeeper&&Kafka
Zookeeper分布式安装部署1）集群规划在hadoop102、hadoop103和hadoop104三个节点上部署Zookeeper。2）解压安装（1）解压Zookeeper安装包到/opt/module/目录下[spring@hadoop102 software]$ tar -zxvf zookeeper-3.5.7.tar.gz -C /opt/module/（2）同步/opt/module/zookeeper-3.5.7目录内容到hadoop103、hadoop104[spring@
2022-03-13 15:43:24
203
原创 Ubuntu安装pytorch时报错，CondaHTTPError: HTTP 000 CONNECTION FAILED for url ＜https://repo.anaconda.com/
Ubuntu使用conda安装CPU版本：PICTURE:/home/worker02/.config/tencent-qq//AppData/file//sendpix0.jpg进入个人创建的 conda python38环境worker02@worker02:~/desktop$ source activate python38(python38) worker02@worker02:~/desktop$ conda install pytorch torchvision torchaudio
2021-11-09 16:50:52
2072
原创 Anaconda基本命令总结
Anaconda安装教程：https://www.jianshu.com/p/3084e62f51b1基本命令总结:（1） 通过anaconda安装不同的python环境。输入命令>> conda create –n python38 python=3.8 （python38为自己定义的环境名）（2） 安装完成后通过命令进入到不同的环境中。命令>> activate python38（3） 退出环境。deactivate python36（4） 查看a
2021-09-08 10:35:20
232
原创 搭建HA问题
搭建好HA后，使用start-dfs.sh启动集群，发现namenode过一会(10s)就掉,再通过hdfs --daemon start namenode 启动后，运行正常.在core-site.xml中加入如下两个配置:ipc.client.connect.max.retries100Indicates the number of retries a client will make to establisha server connection. ipc.client.
2021-04-08 22:37:01
659
原创 Hadoop namenode格式化
删除 data（mytmpdir）和 logs目录.，删除cluster目录。关闭所有HDFS服务：stop-dfs.sh启动Zookeeper(zk.sh start)先启动journalNode再进行格式化.在各个JournalNode节点上，输入以下命令启动journalnode服务:hdfs --daemon start journalnode格式化：hdfs namenode -format格式化完成后将“hadoop”目录下的“name”目录发给集群中所有备用主节点的主机。初
2021-04-01 00:39:26
1153
原创 WARN [Producer clientId=console-producer] Error: NOT_LEADER_FOR_PARTITION
[2021-03-18 18:04:23,503] WARN [Producer clientId=console-producer] Got error produce response with correlation id 17 on topic-partition sensors-0, retrying (2 attempts left). Error: NOT_LEADER_FOR_PARTITION (org.apache.kafka.clients.producer.internals.Sen
2021-03-18 20:04:03
2795
1
原创 Hadoop、Zookeeper、kafka集群启停脚本+分发脚本+状态查看脚本
Hadoop、Zookeeper、kafka集群启停脚本+文件分发脚本+状态查看脚本说明：一、Hadoop集群启停脚本1. 在~/bin/目录下创建mycluster.sh2.集群编写3.脚本使用二、Zookeeper启停脚本：1. 在~/bin/目录下创建zk.sh2.脚本编写3.脚本使用：三、kafka集群启停脚本：1. 在~/bin/目录下创建kafka-start.sh (以及kafka-stop.sh）2. 群起脚本（两种方法）3. 群停脚本（两种方法）四、状态查看（jps）1. 在~/bin/目
2021-03-16 15:21:05
626
原创 Java+MySQL实现简单学生信息管理系统(控制台交互)
本次主要介绍使用Java语言实现学生信息管理系统，采用控制台输入输出，完成主要的增删改查功能，使用的开发工具主要有eclipse、navicat、mysql数据库。以下是界面展示：简介：创建一个zq.stu的package和一个lib包,导入MySQL的JDBC驱动jar包到lib，Build Path > Add to Build PathDBUtils类：数据库连接与关闭View: 负责菜单的显示和处理用户操作Main: 主函数 及用户注册、登录的实现Register: 注册信息类
2021-01-15 23:18:38
5927
12
原创 如何修改MySQL数据库的密码
如何修改MySQL数据库的密码使用安全模式登录。通过任务管理器或者服务管理,关掉mysqld(服务进程)通过命令行+特殊参数开启mysqldmysqld --skip-grant-tables此时,mysqld服务进程已经打开,并且,不需要权限检查mysql -uroot 无密码登陆服务器修改权限表--A: use mysql;--B: update user set Password = password('123456') where User = 'ro
2021-01-01 09:45:11
109
原创 @Test 测试注解的作用
@是注解@Test注解是JUnit测试的基础，JUnit 4的优势就在于支持了注解。@Test的使用 是该方法可以不用main方法调用就可以测试出运行结果，是一种测试方法，一般函数都需要有main方法调用才能执行，注意被测试的方法必须是public修饰的。...
2020-12-22 10:54:44
4115
原创 MySQL学习笔记总结(小白必看+基础篇)
DDL:数据库模式定义语言DDL(Data Definition Language)，是用于描述数据库中要存储的现实世界实体的语言。DML:数据操纵语言DML（Data Manipulation Language），用户通过它可以实现对数据库的基本操作。DCL:数据控制语言 (Data Control Language) 在SQL语言中，是一种可对数据访问权进行控制的指令，它可以控制特定用户账户对数据表、查看表、存储程序、用户自定义函数等数据库对象的控制权。由 GRANT 和 REVOKE 两个指令组成
2020-11-16 23:11:46
1318
3
elasticsearch+logstash+kibana+filebeat.7z (ELK 7.9.0)
2021-04-25
C语言程序设计(谭浩强)第四版-课后答案.doc
2020-11-18
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人