tutouxiaocaiji-CSDN博客

原创 linux端更新pip

linux默认安装的是python2，若想使用python3环境更新pip版本：sudo python3 -m pip install --upgrade pip（sudo防止有权限报错为题）

2022-05-23 10:07:16 3195

原创关于hive报错expression not in group by key ‘.....‘

hive中在做两个select语句相除的时候，一直报错expression not in group by key ‘…’。注：上面的图片是正确的语句起初错误的原因是第一个select语句我没有用sum进行每个字段的求和，而是后面用where筛选了条件为1，然后再嵌套select语句进行求和。后来报错就是说没有group by,where后面的条件。后来干脆分字段直接求和，避免了where和group by的使用。也就没这错误了。...

2022-01-12 14:22:03 1875

转载 Hive报错： Correlating expression cannot contain unqualified column references.

Hive报错： Correlating expression cannot contain unqualified column references.

2022-01-06 17:02:24 1089

转载 Client cannot authenticate via:[TOKEN, KERBEROS]

尝试把用户kdestroy然后再kinit。https://blog.csdn.net/zhanglong_4444/article/details/115287040

2021-10-26 10:49:38 4300

原创 azkaban.executor.ExecutorManagerException: No active executors found

在三台服务器都启动了AzkabanExecutorServer服务进程了之后，进而启动AzkabanWebServer发现只能启动一下，进程就消失不见了。然后查看报错日志发现报错内容：azkaban.executor.ExecutorManagerException: No active executors found。这是因为没有激活executor。所以需要进行激活三台机器，进而再进行启动WebServer。激活命令如下：curl -G “master:12321/executor?action=ac

2021-10-18 18:17:30 760

原创 DataGrip连接hive报错：[ 08S01] Could not open client transport with JDBC Uri: jdbc:hive2://hadoop102:1000

报错代码：datagrip连接hive报错：[ 08S01] Could not open client transport with JDBC Uri: jdbc:hive2://hadoop102:10000/gmall: java.net.ConnectException: Connection refused: connect java.net.ConnectException: Connection refused: connect.这是因为hive的远程连接没有开启，开启即可：hive --s

2021-10-08 08:57:12 7409

原创搭建hive-2.3.9与spark2.0.0搭建及spark2.0.0下载

1：hive与spark对应关系之前在hive-2.3.9安装配套的是spark-3.0.0，发现会有报错，按照网上的说话我的hive版本对应的应该是spark2.0.0。于是重新安装之后，集群正常使用。2:spark-2.0.0下载链接：https://pan.baidu.com/s/1XD1u_KMAMjizzVKcWMirsQ提取码：n3q3...

2021-10-06 18:27:54 603 1

原创 hive启动元数据报错:org.apache.hadoop.conf.Configuration.getPassword(Ljava/lang/String；)[C

或者在show databases时候报错：Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient在跟着尚硅谷数仓4.0视频学习的时候，所有都是按照视频中配置，hadoop版本为hadoop3.1.3,hive版本为hive3.1.2。之后就遇到了再启动hive服务之后，使用show databases,报错Unable to instantiate org.apache.hadoop.hive

2021-10-05 11:59:55 1223 8

转载 LeedCode15 三数之和

给你一个包含 n 个整数的数组 nums，判断 nums 中是否存在三个元素 a，b，c ，使得 a + b + c = 0 ？请你找出所有和为 0 且不重复的三元组。注意：答案中不可以包含重复的三元组。public class Soulution { public List<List<Integer>> threeSum(int[] nums) { //难点在于去重，去重可以使用排序来解决 List<List<Integer

2021-09-27 19:39:26 50

转载 leedCode11. 盛最多水的容器

给你 n 个非负整数 a1，a2，…，an，每个数代表坐标中的一个点 (i, ai) 。在坐标内画 n 条垂直线，垂直线 i 的两个端点分别为 (i, ai) 和 (i, 0) 。找出其中的两条线，使得它们与 x 轴共同构成的容器可以容纳最多的水。说明：你不能倾斜容器。public class Solution { public int maxArea(int[] height) { //int a=0; int area=0; int temp

2021-09-25 19:25:17 56

转载 LeetCode10. 正则表达式匹配

给你一个字符串 s 和一个字符规律 p，请你来实现一个支持 ‘.’ 和 ‘’ 的正则表达式匹配。‘.’ 匹配任意单个字符'’ 匹配零个或多个前面的那一个元素所谓匹配，是要涵盖整个字符串 s的，而不是部分字符串。public boolean isMatch(String s, String p) { int len1=s.length(); int len2=p.length(); boolean[][] dp=new boolean[len

2021-09-24 17:51:42 74

转载 leedCode 4寻找两个正序数组的中位数

给定两个大小分别为 m 和 n 的正序（从小到大）数组 nums1 和 nums2。请你找出并返回这两个正序数组的中位数。class Solution { public double findMedianSortedArrays(int[] nums1, int[] nums2) {// int medium = 0;// ArrayList<Integer> arrayList=new ArrayList<>();//

2021-09-22 18:55:47 72

转载 leetCode3.无重复字符的最长子串

描述：给定一个字符串 s ，请你找出其中不含有重复字符的最长子串的长度。class Solution { public int lengthOfLongestSubstring(String s) { String s1 = new String(); s1 = s; int res = 0; HashSet<Character> hashSet = new HashSet<>() for

2021-09-21 10:57:03 52

转载 leetCode2 两数相加

题目描述：给你两个非空的链表，表示两个非负的整数。它们每位数字都是按照逆序的方式存储的，并且每个节点只能存储一位数字。请你将两个数相加，并以相同形式返回一个表示和的链表。你可以假设除了数字 0 之外，这两个数都不会以 0 开头。首先来谈谈逆序存储的好处在于：相加的时候个位对准个位，百位对准百位等等。public ListNode addTwoNumbers(ListNode l1, ListNode l2) { ListNode listNode1=l1;

2021-09-20 15:33:42 55

转载 LeetCode 1.两数之和

题目叙述：给定一个整数数组 nums 和一个整数目标值 target，请你在该数组中找出和为目标值 target 的那两个整数，并返回它们的数组下标。你可以假设每种输入只会对应一个答案。但是，数组中同一个元素在答案里不能重复出现。你可以按任意顺序返回答案。示例1：输入：nums = [2,7,11,15], target = 9输出：[0,1]解释：因为 nums[0] + nums[1] == 9 ，返回 [0, 1] 。刚开始在思考的时候只有想到暴力破解，如下：public cl

2021-09-19 14:37:34 48

转载 2021-09-16

剑指Offer 09 用两个栈实现队列用两个栈实现一个队列。队列的声明如下，请实现它的两个函数 appendTail 和 deleteHead ，分别完成在队列尾部插入整数和在队列头部删除整数的功能。(若队列中没有元素，deleteHead 操作返回 -1 )class CQueue { Stack<Integer> s1; Stack<Integer> s2; //实现两个栈 int size;public CQueue()

2021-09-16 19:39:32 57

转载 2021-07-01

在idea中关于.var之后，未保存问题转载至：https://blog.csdn.net/weixin_41772761/article/details/107611474

2021-07-01 09:10:09 46

原创关于尚硅谷视频p135配置完yarn-site.xml的硬件资源配置后

idea中写scala程序没有Add Framework Support的解决办法1：点击File–>Project Structure–>Global Libraries2：续以上步骤3：下载完之后,右击项目名，点击Add Framework Support，如下图所示：然后找到Scala再应用就可以了。此时再右击Source Boot类型的项目包就可以创建Scala class类型的项目了。...

2021-06-30 13:41:56 102

转载 idea中解决org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String；I)Z

idea中解决org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z在自己电脑的hadoop安装文件中按照如下修改。https://blog.csdn.net/weixin_39868387/article/details/103198295

2021-05-09 14:59:06 400

原创 Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.yarn.exceptions.YarnRuntimeException

关于hadoop报错：Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.yarn.exceptions.YarnRuntimeException 具体报错内容为：Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.yarn.exceptions.YarnRuntimeException at java.net.URLClassLoa

2021-05-05 13:56:30 5435 5

原创 idea关于项目部署到谷歌浏览器乱码问题的修改心得

idea关于项目部署到谷歌浏览器乱码问题的修改心得首先废了好久的时间按照网上的说的更改idea的相关字符设置但是都没有解决我的问题比如像这种但是都没有解决我的问题。后来一激灵干脆把谷歌浏览器的的默认编码改为UTF-8吧，虽然这样idea控制台的信息还是乱码，但是部署到谷歌浏览器的乱码问题已解决。解决谷歌浏览器默认编码步骤插件在此：自取：链接：https://pan.baidu.com/s/1yLfoeQwk-FOLgMVqifv6Pw提取码：ijuu复制这段内容后打开百度网盘手机A

2021-03-30 11:00:10 492

tutouxiaocaiji的博客