![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
scala
cp7719
这个作者很懒,什么都没留下…
展开
-
GraphFrame相关的概念
1.图的概念图(Graph)是一种数据结构。图型结构都是由顶点和边组成的,记作G=(V,E),其中V是顶点的非空有限集合,E是连接V中两个不同顶点的边的有限集合。无向图:如果图中每条边都是没有方向的,称此图为无向图。有向图:如果图中每条边都是有方向的,即每条边在图示时用箭头表示方向,称此图为有向图。2.示例这里V就是顶点(vertices),E就为边(edges)vertices:("a", "Alice", 34),("b", "Bob", 36),("c", "Charlie"原创 2021-11-10 16:04:22 · 688 阅读 · 0 评论 -
spark自定义UDF函数toDF导入报错的引用方法
这里自定义了一个转换大写的UDF函数,用scala建表时会出现toDF不能导入的问题,后面通过查看源码可以找知道toDF的使用方法正确代码import org.apache.spark.SparkConfimport org.apache.spark.sql.SparkSessionobject ScalaTest { def main(args: Array[String]): Unit = { val sparkConfig = new SparkConf().setMaster("原创 2021-10-30 11:17:20 · 1835 阅读 · 0 评论