- 博客(719)
- 资源 (21)
- 收藏
- 关注
原创 datagrip访问远程hive库
1、hadoop在虚拟机的ubuntu系统中安装好并启动成功后,可以在本地使用master:9870进行访问。五、若只显示default数据库,需要hive库中显示所有数据库,进行设置,选择apply。2、hive数据库可以使用安装在ubuntu系统中dbeaver-ce进行访问。
2025-11-30 21:08:44
232
原创 hive初始化元数据报错java.lang.classnotfoundexception
未将mysql-connector-java-5.1.35.jar复制到$HIVE_HOME/lib路径下。将mysql-connector-java-5.1.35.jar复制到$HIVE_HOME/lib路径下。
2025-11-26 11:16:04
201
原创 java学习一-java程序运行过程
Java程序的运行是一个从源代码到机器指令的转换过程,涉及编写、编译、加载、验证和执行五个步骤。每个步骤都至关重要,确保了Java程序的跨平台性和高效运行。
2025-11-23 21:38:27
720
原创 hbase启动报错-keeperErrorCode
判断是配置出问题了,所以去检查配置文件,我们可以看到hbase中conf下的hbase-site.xml的。如果配置环境变量了可以在任意目录下输入 hase shell,然后就会进入到hbase控制台。错误内容为: cannot get master address from zookeeper。第二步:查看日志,$HBASE_HOME/logs文件夹中。hadoop配置core-site.xml为。HMaster进程消失。
2025-11-06 16:56:21
178
转载 IDEA server乱码
IntelliJ IDEA 如果不进行配置的话,运行程序时控制台中文乱码问题会非常严重,严重影响我们对信息的获取和程序的跟踪。特总结以下 4 点用于解决控制台中文乱码问题,希望有助于大家。注意:下面根据我日常工作的经验总结,排序的先后即为我们需要注意修改的先后。在每次进行修改之后一定要重启 IntelliJ IDEA 使配置生效。上方导航栏“Help→Etit Custom VM Options…”进入自定义虚拟机选项页面。
2025-07-09 09:45:01
217
原创 Failed to execute goal org.apache.maven.plugins:maven-archetype-plugin:3.4.0:generate (default-cli)
下载最新的 Maven: 前往 Maven 官方下载页面。下载 apache-maven-3.6.3-bin.zip 或更高版本。解压文件并配置环境变量: 设置 MAVEN_HOME 为解压路径。-- 使用兼容的较低版本 -->文件,将插件版本降级到与当前 Maven 兼容的版本。,而当前使用的 Maven 版本低于此要求。如果无法升级 Maven,可以修改项目的。要求 Maven 的最低版本为。
2025-07-07 16:14:19
492
原创 下载链接记录
下载歌曲:https://www.gequbao.com/music/79500pdf转word:下载文件 | iLovePDF识别文字:CatOCR: 易飞文字识别, 免费在线图片转文字
2025-06-20 23:36:02
286
原创 hive安装日志
可以看到,hive cli加载的配置文件是 /opt/cloudera/parcels/CDH-5.14.4-1.cdh5.14.4.p0.3/jars/hive-common-1.1.0-cdh5.14.4.jar!2、在${HIVE_HOME}/conf/hive-log4j.properties文件中找到 hive.root.logger 属性,并将其修改为下面的设置。在 ${HIVE_HOME}/conf/hive-log4j.properties 文件中记录了Hive日志的存储情况,
2025-05-12 09:09:47
1276
原创 Centos7 ftp、sftp无法使用ftp连接虚拟机
默认情况下vsftp是不允许root用户登录的,可以通过修改限制来解决这个问题。在ftpusers user_list中将root用户注释,重新启动vsftpd。2、查看ssh服务是否已经安装,是否已经启动,ssh配置是否正确。之后开启服务:systemctl start vsftpd。4、查看虚拟机IP地址,与虚拟网络编辑器设置在同一网段。命令:yum -y install vsftpd。/etc/ssh/sshd_config文件中。1、查看是否安装vsftpd。首先找到vsftp的配置目录。
2025-04-20 14:31:43
619
原创 zookeeper启动报错have small server identifier
2、查看server.X 与myid的X是否一致。3、启动顺序为myid从小到大的服务器顺序。1、查看myid是否有重复。
2025-04-18 16:10:59
236
原创 hive分区数据插入分区表报错 number of reduce tasks not specified
再将此文件同步给hadoop集群其他节点,然后关闭hadoop集群,重新开启。如果无效,修改hadoop配置文件yarn-site.xml。如果还是不行,再运行一次。笔者通过此方案解决了。
2025-04-07 11:16:11
398
原创 启动nginx报错failed to start nginx - high performance web server
打开/etc/nginx/nginx.conf配置文件,查看是否有 server模块,如果有,将里面的 listen端口号改为8082,如果没有,打开默认文件/etc/nginx/conf.d/default.conf修改 server模块的 listen端口号。日志位置在/etc/nginx/nginx.conf中显示。systemctl restart nginx即可。错误内容显示:80端口已经被占用。然后重新加载nginx。1、查看日志报错内容。
2025-04-02 21:22:35
1068
转载 Hive在执行插入数据等job任务出错
1.job的输入数据大小必须小于参数:hive.exec.mode.local.auto.inputbytes.max(默认128MB)2.job的map数必须小于参数:hive.exec.mode.local.auto.tasks.max(默认4)(注:可用参数hive.mapred.local.mem(默认0)控制child jvm使用的最大内存数。(默认为false)3.job的reduce数必须为0或者1。然后再去执行就OK了。
2025-03-28 15:55:10
107
原创 hive报错Exception in thread “main“ java.lang.NoClassDefFoundError: jline/console/completer/ArgumentCom
此问题是hadoop与hive中的Jline包版本不一致导致的,解决办法就是将hive/lib下的Jline-2.12.jar复制到hadoop/share/hadoop/yarn/lib/下即可。
2025-03-24 11:34:49
198
原创 mysql部署错误
1、查看 /etc/my.cnf日志所在路径:/var/log/mysqld.log。删除/var/lib/mysql下所有文件内容,重新启动即可。第一次编辑/etc/my.cnf错误,修改后再次运行。
2025-03-24 11:27:04
332
原创 hadoop在put数据时,出现org.apache.hadoop.hdfs.server.namenode.NotReplicatedYetException 分析
NotReplicatedYetException这个异常是在写文件过程中新分配一个数据块getAdditionalBlock()时调用checkFileProgress(pendingFile, false)检查。检查$HADOOP_HOME/etc/hadoop/worker文件中是否至少有三个节点,如果不够,请添加三个节点及以上。,不达到则抛NotReplicatedYetException。
2025-03-17 09:13:37
397
原创 云服务培训四-网络服务
虚拟私有云(Virtual Private Cloud,VPC)是用户在云上的私有网络,为云服务器、云容器、云数据库等云上资源构建隔离、私密的虚拟网络环境。
2025-03-02 21:19:03
740
原创 云服务培训二-计算服务
可以拆分为弹性、云服务器两个词理解。弹性,代表以灵活调整,如弹性工作制,员工可以灵活自由地安排工作时间。所以,弹性在计算上,就体现为可以调整的计算能力。云服务器,可以简单理解为就是一台服务器;同时作为一种云计算资源,具备云计算按需使用、按量付费等特点。可以看成一次性资源,仅在使用时支付费用。其次,对于用户来说,拥有完整的服务器控制权,且只需关注操作系统以上的部分。
2025-03-02 18:00:42
443
原创 云服务培训一了解云服务
ICT 是 Information and Communication Technology 的缩写,即信息和通信技术。 虚拟化:针对范围悠闲的集群,手动配置CloudOS:云提供服务,按需购买1、互联网2、编程接口 (使用资源的入口)区域之间,互联网连接,传输较慢区域内,可用区之间使用物理专线(光纤)连接,传输速度延时小
2025-03-02 17:20:52
272
原创 【Bug解决】yum提示Another app is currently holding the yum lock; waiting for it to exit...
然后重新运行刚才的yum命令即可。今天想在虚拟机上安装htop。你可以看一下是否有yum进程。
2025-02-25 21:43:59
255
原创 centos7安裝 mysq8并处理错误Public key for mysql-community-server-5.7.37-1.el7.x86_64.rpm is not installed
centos7.9【yum -y install mysql mysql-server】安装时提示Public key for mysql-community-libs-compat-5.7.38-1.el。用这个指令能解决,这种情况的解决方法就是加上- -nogpgcheck就可以了:禁掉GPG验证检查。5、 配置 MySQL 安全设置。4. 获取临时 root 密码。输入临时 root 密码。设置新的 root 密码。禁止 root 远程登录。
2025-02-18 17:53:23
439
转载 SELinux相关命令
SELinux是Linux 内核中提供的强制访问控制系统。permissive:开启控制系统,但是处于警告模式。即使你违反了策略的话它让你继续操作,但是把你的违反的内容记录下来。在关闭(Disabled)与开启警告permissive、开启强制Enforcing之间进行切换。Enforcing:开启控制系统,处于强制状态。一旦违反了策略,就无法继续操作下去。Disabled :不启用控制系统。#切换到permissive。进行修改,后重新启动系统。#切换到Enforcing。
2025-02-17 23:35:23
120
原创 【Bug解决】yum下载报错Could not resolve host: mirrorlist.centos.org; Unknown error
添加并修改配置:(IP地址范围为128-254)2、修改network配置。4、再次运行下载命令则无误。3、重启network服务。1、查看虚拟机IP范围。
2025-02-17 20:39:33
475
原创 ES语法学习2
如果提供此值,第一次迭代时 accumulator 为 initialValue,否则为数组的第一个元素。• callback:必需,回调函数,用于处理数组每个元素。accumulator:累积值,函数上一次执行的返回值。currentIndex:当前数组元素的索引(可选)。currentValue:当前数组元素的值。// 由于传入了初始值0,所以开始时prev的值为0,// 以此类推,直至完成所有数组项的和并返回。array:原数组(可选)。// cur的值为数组第一项3。//item是操作的当前元素。
2025-01-17 11:24:25
928
hive web配置过程及所用资源
2023-12-05
ssd_mobilenet_v2_coco_2018_03_29.tar.gz
2020-01-06
intellibot.rar
2020-08-02
火狐53和seleniumIDE2.9.rar
2019-09-16
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅