大数据
文章平均质量分 63
qq_34669699
这个作者很懒,什么都没留下…
展开
-
pyspark.sql函数 from_json(col, schema, options={})问题
字符串转换为map类型的数据原创 2023-03-06 16:57:43 · 552 阅读 · 0 评论 -
spark保存取数结果为csv文件技巧
生成的取数结果含有纯数字,在保存为csv文件并用Excel或WPS查看结果时,数字会以科学表达式,或Excel默认的单元格格式展示,非常的不友好。原创 2023-03-02 14:50:54 · 809 阅读 · 0 评论 -
pyspark.sql两种行转列pivot和collect用法比较及concat_ws 组合使用
pyspark.sql两种行转列pivot和collect用法比较及concat_ws 组合使用原创 2023-02-20 16:43:50 · 742 阅读 · 0 评论 -
pyspark.sql.functions中collect_list(col)和array_join(col, delimiter, null_replacement=None)组合使用
collect_list(col)和array_join(col, delimiter, null_replacement=None)组合使用原创 2023-02-17 16:35:45 · 745 阅读 · 0 评论 -
concat_ws(sep, *cols)和concat(*cols) pyspark.sql.functions使用详解
concat(*cols)和concat_ws(sep, *cols)使用原创 2023-02-17 11:05:02 · 479 阅读 · 0 评论 -
CDH6.1.0环境安装kylin2.6.4 遇到的问题
kylin安装参考(本人之前的文章):https://blog.csdn.net/qq_34669699/article/details/103139072问题一错误信息:Retrieving hbase dependency...错误: 找不到或无法加载主类 org.apache.hadoop.hbase.util.GetJavaProperty解决方式:修改vim /op...原创 2019-11-19 15:08:52 · 418 阅读 · 1 评论 -
cdh6.1.0的环境安装kylin2.6.4
本文基于cdh6.1.0的环境安装kylin2.6.4各个组件版本信息首先确定你的安装环境里各个组件的版本信息,来确定选择kylin的版本1.java 版本$ java -versionjava version "1.8.0_201"Java(TM) SE Runtime Environment (build 1.8.0_201-b09)Java HotSpot(TM) 64-Bit...原创 2019-11-19 14:48:55 · 873 阅读 · 2 评论