- 博客(34)
- 资源 (1)
- 收藏
- 关注
RSS订阅
原创 绝对路径与相对路径的区别以及实例
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...
2019-12-10 13:32:32
679
原创 dbeaver 连接trino 出现Datasource was invalidated
就可能是你地址的问题，如果你的地址和端口都没有问题，有可能是端口冲突引起的（我的就是），netstat -ano | findstr “1234” 就可以查看端口的占用情况，最后把端口修改一下就行了。3.在浏览器上搜索连接的IP是否有结果 eg：192.168.56.32:1234。如果没有此界面，说明你是无法访问到你所连接的数据库的。1.首先是看自己的dbeaver连接配置是否有问题。2.看驱动配置是否ok。
2023-11-05 20:43:36
2384
原创 虚拟机ping www.baidu.com不通问题
问题描述从问题中我们可以看到是的虚拟机无法识别 www.baidu.com这个域名，那我们就先看看能不能ping通百度的ip1.查看百度ip（在cmd窗口中输入nslookup www.baidu.com）2.在虚拟机ping 一下这个ip发现可以ping通，那就是域名映射的问题发现了问题就解决问题在/etc/resolv.conf中添加nameserve 8.8.8.8来进行域名和ip的地址映射就可以了最后重启网络 systemctl restart network在尝试pi
2022-05-04 12:12:39
3309
1
原创 mysql8 压缩版忘记密码解决
mysql8 压缩版忘记密码解决：mysql登录也是需要密码的认证的，而他的密码也是存储到mysql.user表中的，只是使用了md5加密算法进行了加密而已，本次忘记密码就是通过使用 --skip-grant-tables 跳过密码认证的步骤直接登录到mysql中的，然后使用修改认证表中的数据来改变登录密码的。1.关闭MySQL服务2.使用管理员权限打开cmd窗口（如果没有设置MySQL的环境变量，需要到MySQL安装路径下的bin目录下)：执行mysqld --console --skip-gran
2021-09-15 20:09:28
259
原创 centos8+mysql8+hive2.3(远程连接模式)
这是对hive远程连接模式的全程安装操作！！！因为这个模式需要mysql依赖，所有首先在centos8上安装mysql（使用yun安装）一、mysql8安装1.首先查看本地是否安装了mysql：rpm -qa | grep -i mysql，如果没有安装请直接跳过前四条2.删除这些依赖和安装包yum remove mysql mysql-server mysql-libs或者用rpm -e --nodeps 名字一个一个删除（下面有例子）3.查看依赖，注册，日志等配置文件find / -nam
2020-12-19 13:01:20
961
2
原创 Exception in thread “main“ java.lang.RuntimeException: Error while running command to get file permi
注意！！！这是在eclipse里面运行的Hadoopapi问题描述：Exception in thread "main" java.lang.RuntimeException: Error while running command to get file permissions : java.io.IOException: (null) entry in command string: null ls -F D:*******具体代码如下（不包括map和reduce部分）：package com
2020-12-15 20:46:34
5094
3
原创 Exception in thread “main“ java.lang.ClassNotFoundException: WriteFile at java.net.URLClassLoader.f
问题描述：Exception in thread "main" java.lang.ClassNotFoundException: WriteFile at java.net.URLClassLoader.findClass(URLClassLoader.java:382) at java.lang.ClassLoader.loadClass(ClassLoader.java:424) at java.lang.ClassLoader.loadClass(ClassLoader.java:357)
2020-12-11 16:56:55
468
原创 xsync脚本和jpsall脚本
注意！！！！1.两个脚本都是在root用户下编写，然后还要有执行权限chmod 777 xsync/jpsall2.这两个脚本都必须在PATH环境变量之下xsync脚本:用于集群文件分发的脚本前提是：需要安装rsync—>用于文件分发的软件包yum install rsync#!/bin/sh# 获取输入参数个数，如果没有参数，直接退出pcount=$#if((pcount==0)); thenecho no args;exit;fi#2 获取文件名称p1=$1
2020-12-08 19:58:27
688
原创 centos8.x版本的时间同步问题
问题描述：由于centos8.x版本已经不支持ntp了！！！yum install ntp 是没有用的，所以我们通过wlnmp提供的源，来安装ntp服务解决方案：注意：一下操作都是在root用户之下！！！一、添加wlnmp源rpm -ivh http://mirrors.wlnmp.com/centos/wlnmp-release-centos.noarch.rpm或rpm -ivh http://mirrors.wlnmp.com/centos/wlnmp-release-centos.no
2020-12-08 19:39:40
619
1
原创 Hadoop集群中的完整配置文件（反正我是成功了的）
Hadoop中的文件配置：一、配置java和Hadoop的环境变量：两种方式：1.在/etc/profile.d文件下创建了my_env.sh文件2.在/etc/profile文档最后增加export JAVA_HOME=/opt/java/jdk1.8export PATH=$PATH:$JAVA_HOME/binexport HADOOP_HOME=/opt/hadoop/hadoop2export PATH=$PATH:$HADOOP_HOME/binexport PATH=$P
2020-12-08 11:10:45
835
原创 Container [pid=7204,containerID=container_1607355221856_0001_01_000002] is running beyond virtual me
问题描述：0/12/07 23:36:07 INFO client.RMProxy: Connecting to ResourceManager at master/192.168.21.132:803220/12/07 23:36:12 INFO input.FileInputFormat: Total input paths to process : 120/12/07 23:36:13 INFO mapreduce.JobSubmitter: number of splits:120/12/0
2020-12-07 16:19:19
2225
8
原创 IP地址，子网掩码，网关三者的关系和作用
IP地址（Internet Protocol Address）：IP地址是32位，分为网络号和主机号 一般ip地址常见的有三类 A类：前8位是网络号，后24位是主机号 **网络地址的最高位必须是“0”** B类：前16位是网络号，后16位是主机号 **网络地址的最高位必须是“10”** C类：前24位是网络号，后8位是主机号 **网络地址的最高位必须是“110”**子网掩码：什么是子网掩码 子网掩码不能单独存在，它必须结合IP地址一起使用。子网掩码只有一个作用，就是将某个IP地址划
2020-11-30 10:28:29
11704
原创 如何搭建一个完整的Hadoop集群（三台虚拟机）
创建一个完整Hadoop虚拟机基本步骤使用软件：VMwareLinuxcentos8jdk1.8hadoop2.71.首先是创建一个安装一个虚拟机（master）hostname：查看当前主机名hostnamectl set-hostname 修改后的名字 //修改名字只是为了能够达到见名知意2.设置静态ip和本地网络设置（vmnet8）（具体是啥意思不懂！！！）然后进入/etc/syscofig/network-scripts编辑ens32/ens33具体的
2020-11-29 23:17:46
1326
原创 运行Hadoop集群时namenode无法运行，在logs日志文件中出org.apache.hadoop.hdfs.server.common.InconsistentFSStateException
这也是作为初学者所犯的错：没有将datanode和namenode存放在同一文件夹下面需要按照/etc/local/hadoop/etc/hadoop下面的hdfs-site.xml文件去创建文件（mkdir）然后再使用格式化namenode（Hadoop namenode -format）最后重新启动就好start-all.sh/stop-all.shsbin/start-dfs.sh/sbin/stop-dfs.sh...
2020-11-29 16:21:48
251
原创 使用systemctl restart network 或 service network restart 命令重启网卡失败。
由于我使用的是centos8版本的虚拟机，所以这个命令是没有的需要使用：nmcli c reload 命令
2020-11-28 11:14:06
3767
原创 linux查看hostname以及修改hostname
查看hostname ： hostname修改hostname ： hostnamectl set-hostname master (比如要修改为master)修改完重启生效 ：reboot
2020-11-27 21:27:15
935
原创 在VMware的/etc/yum.repos中设置centos8的阿里云镜像源
CentOS8现已可使用国内的aliyun阿里云镜像站，方法如下:用cd命令切换到yum.repos目录，备份原始的3个repo文件：cd /etc/yum.repos.d/sudo cp CentOS-AppStream.repo CentOS-AppStream.repo.baksudo cp CentOS-Base.repo CentOS-Base.repo.baksudo cp CentOS-Extras.repo CentOS-Extras.repo.bak编辑上面3个repo文件，在
2020-11-27 20:05:27
375
原创 在Windows上面安装Scala时出现问题的解决
首先来个问题描述：我安装了Scala 2.12.11版本的Scala，同时也很自觉的配置好了Scala的系统环境：Scala_HOME,path,Classpath。因为我检查很多遍了，所以确定没有错但是在cmd上面运行Scala命令时显示没有Scala命令**，在网上找了半天都没有得到解决。接下来就是解决的方法：通过我在百度上面的搜索和经验：原因可能是因为不能够识别我设置的变量，我在cmd上设置path路径：set PATH=%SCALA_HOME%\bin;最后居然可以了！！！...
2020-05-25 19:13:06
1601
4
原创 如何在idea中创建maven项目并部署tomcat服务
1.创建maven项目这是第一次打开后的界面2.配置mavena.打开setting，并找到mavenb.然后到官网下载maven下载地址：maven下载地址，版本的话就自己选择(下载并解压)c.配置maven项目中央仓库<mirror> <id>nexus-aliyun</id> <mirrorOf>*</mirrorOf> <name>Nexus aliyun</name>
2020-05-16 12:47:39
510
原创 python中的四种集合数据类型（列表，元组，集合，字典）
注意在集合中可以是任意类型—也就是说同一个集合中可以用多种类型的存在python中的四种集合数据类型是：列表（List）：有序，可更改，可以有重复的成员元组（tuple）：有序，不可更改，可以有重复的成员集合（set）：无序，无索引，没有重复的成员。字典 （Dictionary）：无序，可更改，有索引，没有重复的成员列表[]创建列表：a=[“hello”,“world”]...
2020-05-08 17:12:31
13352
原创 在HDFS中创建目录失败链接失败——connection refused
问题描述：今天我启动了dfs和yarn后想HDFS上创建/tmp我的代码是 hadoop fs -mkdir /tmp结果是从上面的图片我们可以看出没有namenode希望能帮助到一些人吧解决方法：1.先停止HDFS相关的所有的进程 关停指令 stop-all.sh2.需要做一次格式化指令：hdfs namenode -format3.启动HDFS start-all...
2020-04-30 18:34:16
3220
原创 如何在conda中使用jupyter notebook----一个预编译工具
jupyter notebook—是一个用于数据预处理的工具注意！！！！我是在conda环境中安装的jupyter notebook（一般安装了anaconda的里面是有jupyter notebook的）具体步骤：1.查看conda的环境有哪些（conda info -e）2.激活conda的其中一个环境，activate 环境名3.安装jupyter notebook（pip i...
2020-04-27 17:24:40
980
原创 static关键字
一，static关键字的特点1、static是一个修饰符，用于修饰成员。（成员变量，成员函数）static修饰的成员变量 称之为静态变量或类变量。2、static修饰的成员被所有的对象共享。3、static优先于对象存在，因为static的成员随着类的加载就已经存在。4、static修饰的成员多了一种调用方式，可以直接被类名所调用，（类名.静态成员）。5、static修饰的数据是共享数据...
2020-04-20 11:43:35
287
原创 面向对象的三大特性和五大原则
三大特性：封装，继承，多态封装在Java中的体现主要是两个方面1.方法（就是将一些具体的步骤和一些细节的东西隐藏起来，让外部无法看到）2.通过类将客观的事物抽象化继承（extends）简而言之就是子类对父类的继承关系特点是：1.子类可以继承父类的成员方法和变量2.子类也可以拥有自己的方法和变量多态继承是多态的前提！！！简而言之就是一个对象具有多种形态（比如狗具有狗的形态，同...
2020-04-18 00:51:37
94
原创 super and this
super关键字的使用：1.在子类中调用父类的成员变量和成员方法2.在子类的构造方法中调用父类的构造方法**（注：super调用的父类构造方法必须是子类构造方法中的第一个语句）**this关键字的使用1.调用本类中的的成员变量和其他成员方法（补充：成员变量和局部变量的区别）2.调用本类中的其他构造方法（注意：1.this调用的构造方法也只能是第一个语句；2.super和this不能同时使...
2020-04-16 23:46:25
143
原创 仅仅一字之差（重载/重写）
方法重载：方法的名称一样参数列表不同有关：参数的类型参数的个数参数的类型的顺序不同无关：参数的名称返回值类型方法的重写：发生在继承关系中，他的方法名称一样参数列表也要一样（方法的覆盖重写）注意：当子类和父类中的方法相同时优先使用子类方法必须保证父子类的方法名称和参数列表也相同（参数个数，类型，顺序等）子类方法的返回值必须小于等于父类方法的返回值范围子类方法的权限必须大于等于父...
2020-04-15 22:52:37
177
原创 通过虚拟机在浏览器中打开dfs
首先通过sbin/start-dfs.sh启动dfs然后看插件是否启动然后在浏览器中打开之后就可以在虚拟机中操作上传下载等操作打开ssh服务systemctl start ssh关闭ssh服务systemctl stop ssh查看ssh状态systemctl status ssh...
2020-04-15 00:19:22
642
原创 idea中maven项目的生命周期
图片描述常用插件的作用clean：清理编译文件（前提是要搭建好maven环境）compile：编译主目录的文件test：编译并运行test目录的代码package：将代码打包install：把项目发布到本地仓库三个生命周期clean生命周期是用来做清理工作的cleanDefault生命周期：是构建的核心部分，编译，测试，打包等等，Default生命周期是Maven生命周期中...
2020-04-13 10:54:33
368
原创 带你认识在数据挖掘中的聚类分析方法
什么是聚类？聚类是将数据分类到不同的类或者簇这样的一个过程，所以同一个簇中的对象有很大的相似性，而不同簇间的对象有很大的相异性。聚类和分类的区别：前者是无监督的而后者是有监督的补充说明：有监督的方式是按照一定的类别来分的无监督的方式是按照对象的相似程度来划分的，是不固定类别的从数据挖掘的角度来说聚类分析方法分为这几种1.划分聚类2.层次聚类3.基于密度的聚类4.基于网格的聚类划...
2020-04-12 00:12:37
1616
原创 解决通过csv写入数据时出现多余行和在excel中出现的乱码问题
问题描述这是我的代码和运行后得到的结果解决方法多余空行解决：加上newline=’‘的代码：他是csv模块中专门用来换行的（这是我的理解)with open(‘b.csv’, ‘w’, encoding=‘utf-8’, newline=’’) as fp:乱码问题：在with open中添加这样一句 ：fp.write(u’\ufeff’)就相当于在写入数据时在头上面添加 feff ...
2020-04-04 08:50:38
652
原创 Javaweb中的静态网页基础标签
Java代码在计算机中经历的阶段：三个源代码文件阶段：源代码经过编译形成字节码文件（Test.class）（该过程没有进入内存，还在硬盘上）class类对象阶段：该阶段将字节码文件通过类加载器加入到内存中Javaweb的概念：使用Java语言开发基于互联网的项目；软件架构：c/s:优点：用户体验好缺点：开发，安装，维护麻烦B/S:优点：开发，安装，维护简单缺点：应用过大，会影响用户体...
2020-04-01 13:09:33
529
原创 在虚拟机中ping了停不下来怎么办？
那天弄的时候不知道怎么回事就一直运行，用了ctrl+c和ctrl+z都没有用，哎太难了，最终还是直接关闭了虚拟机，如果有知道的大神可以私信我，谢谢
2020-03-29 20:35:22
9843
4
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人