- 博客(3)
- 收藏
- 关注
RSS订阅原创 spark中reduceByKey中self
问题记录：今天在看reduceByKey源码的时候，有点在意self到底是什么时候赋值的。他是作为PairRDDFunctions的一个属性出现，我们在外面直接使用RDD来调用reduceByKey的时候似乎并没有对self进行赋值，那么self到底是代表的什么东西？我们盲猜他就是调用reduceByKey这个算子的RDD，后面将用源码佐证。分析步骤：1、首先我们进到RDD类里面（因为我们对象是RDD），查看后发现他没有ReduceByKey算子，这时我们就想到有什么东西将RDD和PairRDDFun.
2021-09-07 19:48:29
98
原创 Hive错误记录之Invalid table alias or column reference
Hive错误记录之Invalid table alias or column referencehive (mydatabase)> select > explode(catagory) exp_cat > from > vedios > order by > views
2021-08-08 13:09:53
17610
原创 datanode无法启动
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Markdown编辑器你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mar
2021-07-31 10:33:49
474
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人