- 博客(7)
- 收藏
- 关注
RSS订阅原创 MySql-Json函数Json数组查找JSON_SEARCH()使用-查找Json数组的值-JSON_SEARCH查找数值类型使用
Mysql的JSON_SEARCH()使用
2022-08-23 17:56:11
5003
1
原创 SparkSql优化-读取MySql慢优化-写入MySql慢优化-表关联注意
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、SparkSql读取mysql慢优化二、spark写入mysql数据慢1.批量写入mysql数据2.计算完之后在重新分区，防止数据倾斜写入的时候特别慢3.调整shuffle的分区数量三、SparkSql关联查的坑1.spark 区分大小写 mysql不区分，关联查的时候尽量都转大写，并且要去除前后空格2.SparkSql时区问题3.spark在进行比较或者过滤的时候是区分类型的前言SparkSqk读mysql计算写入m
2021-07-29 17:45:57
1939
原创 2020年工作笔记整理-大数据-java工作中的问题
2020年工作笔记整理-大数据-java工作中的问题学习https://www.cbedai.net/xxlcube/ 2737a.@ ld777报错导入缺少jar运行import com.sun.tools.javac.util.Assert;开发工具导入失败com.sun.tools.javac.utilhttps://blog.csdn.net/weixin_42319815/article/details/105683113Connection reset by peer: so
2021-02-04 14:25:59
1780
原创 IDEA连接hive-连接hive工具-IDEA连接hive报错
IDEA连接hive-连接hive工具-连接hive报错前言使用步骤前言之前一直用hue来写hive语句，hue页面很容易丢（习惯刷新，习惯快捷键执行sql），如果查询字段很多展示的很不好经常需要导出来再看，偶然见发现idea也可以链接hive使用步骤在idea中链接hive自己用的idea2020.2 自带hive，没有的用drivr输入hive链接信息，点击测试链接，链接成功就可以跳过了，链接失败报错链接失败，大多都是驱动的问题版本不对，例如报错：[ 08S01] Cou
2020-11-24 18:13:27
3108
原创 查看hive版本-获取hive-jdbc驱动-连接hive报错
查看hive版本-获取hive-jdbc驱动-连接hive报错前言一、使用步骤报错示例前言链接hive报错大多数都是hive的jdbc驱动版本有问题跟链接的hive版本不一样一、使用步骤在hadoop集群，hive 找到jar包路径退出hive : quit; 进入路径使用工具导出jar包报错示例[ 08S01] Could not open client transport with JDBC Uri: jdbc:hive2://192.168.4.11:10000/d
2020-11-24 17:51:34
4532
1
原创 大数据学习总结+JAVA学习总结+大数据面试+java面试+大数据java异常总结
文章目录一、java模块面试问题1.动态代理2.浏览器禁用Cookie后的Session处理3.主从复制的流程[重要]5.redis的数据类型[重要]6.Junit测试的注解7、缓存问题二、项目中java模块的难点异常[重要]1.MultipartiFile图片从前台用Restfull到后台问题2.批量删除参数问题3.前台后台的请求方式post,get,del4.后台给页面响应string(返回值时String)的时候就需要进行处理5.导出到excel表格的时候JSON反序列化问题6.埋点，统计用户输入特征
2020-09-28 13:49:41
3570
1
原创 Shell脚本-定时任务学习笔记
文章目录Shell介绍第一个shell脚本程序：Shell脚本的执行shell脚本在执行时，向脚本传递参数定时任务，定时执行shell脚本获取系统时间并且序列化成想要的格式变量:定义变量:**使用变量:**变量类型1) 局部变量2) 环境变量3) shell变量Shell中的替换**转义符：****命令替换:****变量替换**:Shell运算符**算数运算符:****关系运算符：****布尔运算符：****字符串运算符：****文件测试运算符:**Shell中的字符串单引号和双引号拼接字符串：获取字符串长
2020-08-29 16:35:14
7323
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人