- 博客(13)
- 收藏
- 关注
RSS订阅
2原创 大数据学习路线
大数据学习路线文章目录大数据学习路线前言零、学习路线图一、基础部分1.Java2.Mysql3.Linux二、Hadoop生态1.Hadoop基础2.Zookeeper3.HDFS4.YARN5.MapReduce6.Hive7.HBase三、Spark生态1.Scala2.Spark3.Kafka四、Flink生态五、其他相关平台六、项目实战总结前言以下学习路线图为个人学习路线，目前居住二线省会城市，所属金融行业，从事大数据开发工程师岗位。把以下学习路线图分享给大家，欢迎大家留言建议，共同进步。
2022-04-07 00:06:31
3000
原创 java.lang.UnsupportedClassVersionError: Unsupported major.minor version 52.0
1 报错问题具体报错日志截图如下:核心日志提示:Exception in thread "main" java.lang.UnsupportedClassVersionError: org/apache/spark/network/sasl/SecretKeyHolder : Unsupported major.minor version 52.0 at java.lang.ClassLoader.defineClass1(Native Method)2 问题定位初步分析该错误是由于jdk版
2022-03-05 22:07:51
3006
转载 Spark SQL中列转行（UNPIVOT）的两种方法
行列之间的互相转换是ETL中的常见需求，在Spark SQL中，行转列有内建的PIVOT函数可用，没什么特别之处。而列转行要稍微麻烦点。本文整理了2种可行的列转行方法，供参考。1 测试数据准备本文的环境是Windows 10, Spark 2.4，开发语言是Python。首先构建一点初始测试数据，from pyspark.sql import SparkSessionspark = SparkSession.builder.appName('TestAPP').enableHiveSupport(
2020-12-15 19:09:03
1818
转载 HIVE----count(distinct ) over() 无法使用解决办法
在使用hive时发现count(distinct ) over() 报错hive> with da as ( > select 1 a, 'a' b union all > select 1 a, 'a' b union all > select 2 a, 'a' b union all > select 2 a, 'a' b union all > select 2 a, 'a' b union all > se
2020-11-26 14:21:46
4036
原创 推荐几本计算机经典书籍
一 语言类1《C Primer Plus》(第6版）中文版 买新版2《C++Primer》中文版3《C++ Primer Plus》 比2更适合零基础4《Java编程思想》5《Java核心技术》卷1卷26《Python核心编程》7《Python编程从入门到实战》8《Go语言实战》 or《Go In Action》二 算法类9《算法导论》 不适合初学者10《算法》第四版 红色三 通信网络11《TCP/IP详解》12《计算机网络 自顶向下》四 linux环
2020-07-04 10:55:18
512
原创 分享两个实用的sql函数
分享两个实用的sql函数1 group_concat()语法：group_concat( [distinct] 要连接的字段 [order by 排序字段 asc/desc ] [separator ‘分隔符’] )功能：将group by产生的同一个分组中的值连接起来，返回一个字符串结果举例：select c_id,GROUP_CONCAT(price) from product group by c_id; 结果：
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人