- 博客(9)
- 收藏
- 关注
原创 mysql连接datagrip出现以下错误
原因:我的mysql版本是5.7.16,但是mysql的版本是5.7之后的版本在连接时必须要加上useSSL=false,而datagrip中useSSL=true,需要手动修改。修改之后测试连接,连接成功!
2024-01-17 16:20:55 713
原创 hive函数
1创建一个Maven工程Hive2)导入依赖3创建一个类/*** 我们需计算一个要给定基本数据类型的长度*/GenericUDF/*** 判断传进来的参数的类型和长度* 约定返回的数据类型*/@Override=1) {if (!/*** 解决具体逻辑的*/@Overridereturn 0;@Override// 用于获取解释的字符串return "";4创建临时函数。
2024-01-16 11:45:37 898 1
原创 数据分析与可视化 第三章-Pandas数据分析基础
导出为.csv文件: df.to_csv(path_or_buf, sep=‘,’, float_format=None, columns=None, header=True, index=True);导入csv文件: pd.read_csv(filepath_or_buffer,sep=‘,’,header,encoding=None);导出为.xls文件: df.to_excel(),如:df.to_excel('nbasalary.xls',index=True);subset:设置想要检查的列;
2024-01-13 10:18:59 921 1
原创 [08S01][2] Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.
在使用datagrip操作hive进行插入操作的时候发生了这个错误。查阅资料可知是hive启动堆栈内存不足,修改如下配置,亲测有效。2.修改配置文件hive-config.sh。1.修改配置文件hadoop-env.sh。
2024-01-11 15:08:09 1189
原创 数据分析与可视化 第二章-如何做好数据可视化
(2)表示数据值:如收入、温度、速度等,用顺序颜色刻度;分布型图表:散点图,气泡图,直方图,概率密度图,箱型图(IQR = Q3 - Q1;(3)作为突出显示工具:数据中可能有特定类别或值,携带想要讲述的故事的关键信息。5)颜色空间:HSV(色调,饱和度,亮度)HCL(色调,名度,亮度)2)色彩的三要素:色调,饱和度(鲜艳程度),亮度(明亮程度)构成型图表:饼图,环形图堆积百分比柱状图/堆积百分比面积图。联系型图表:关系图,和弦图,桑基图,旭日图。对比型图表:柱状图,条形图,雷达图。3)颜色选择:色相环。
2023-11-22 17:01:57 61
原创 数据分析与可视化 第一章-概论
谎言因子LF=数据所对应的图形元素的相对变化量/数据的真实变化量,在(0.95,1.05)(2)达:清晰地表达信息,少即是多,太多细节会淡化结果,在表达清楚信息的情况下用尽量少的元素。信息可视化:处理的数据具有抽象的数据结构,关注于将抽象的概念转化成可视化信息。1)Playfair:统计制图法创始人,创造了第一张有意义的线图,条形图,饼图,面积图。(2)广义数据可视化:是数据可视化、信息可视化以及科学可视化等多个领域的统称。可视化本质上是对信息的传递,需要正确、清晰、优雅地表达信息。3.数据可视化的历史。
2023-11-22 16:27:21 96
原创 关于DataGrip连接MySQL出现“CLIENT_PLUGIN_AUTH is required“问题的解决
问题原因:MySQL版本太低,我一开始装的MySQL是老师给发的5.多的版本,导致在进行连接时发生了"CLIENT_PLUGIN_AUTH is required"错误。解决方法:彻底删除MySQL,下载版本较高的MySQL,可以参考。此处的密码设置成MySQL的登录密码才可以解决。
2023-05-02 18:24:15 1158 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人