大数据
Hadoop、Spark等
冰糖葫芦五加皮耶
学习永无止境,Fighting!
展开
-
Spark统计人口平均年龄
(1) 请编写Spark应用程序,该程序可以在本地文件系统中生成一个数据文件peopleage.txt,数据文件包含若干行(比如1000行,或者100万行等等)记录,每行记录只包含两列数据,第1列是序号,第2列是年龄。效果如下:(2) 请编写Spark应用程序,对本地文件系统中的数据文件peopleage.txt的数据进行处理,计算出所有人口的平均年龄。原创 2020-05-18 13:06:30 · 1489 阅读 · 1 评论 -
Spark大作业练习题(单选及spark的优势)
提供两个Scala在线编程的网站:https://scalafiddle.io/http://www.scalakata.com学习spark的网站:http://dblab.xmu.edu.cn/blog/1709-2/(大数据之Spark入门教程(Python版))单项选择题1、Scala程序编译后的文件以什么结尾:A、.class B、java C、.scala D、.sc2、以下哪种Scala方法可以正确计算数组a的长度:A、count() B、take(1) C、t原创 2020-05-12 20:33:13 · 8816 阅读 · 14 评论 -
sql语句循环插入表
sql:DROP PROCEDURE IF EXISTS proc_initData;DELIMITER $ (诉mysql解释器,该段命令是否已经结束了,mysql是否可以执行了。默认情况下,delimiter是分号。在这里是规定mysql结束符号是$)CREATE PROCEDURE proc_initData()BEGINDECLARE i INT DEFAULT 1; ...原创 2020-04-20 10:22:41 · 699 阅读 · 0 评论 -
Scala中的单例对象
scala中的单例对象说明:1.Scala中由于没有像Java中的static关键字,因此Scala类不存在静态成员。但是Scala可以使用“object”关键字实现单例模式(其实理解为Java中的static也行)。2.Scala中使用单例模式时需要使用object定义一个单例对象(object)对象,单例对象就是在整个程序中只有这么一个实例,定义object对象与class对象的区别是o...原创 2020-04-17 21:49:24 · 1105 阅读 · 0 评论