Problem
做题
睡覺了
我现在能做的,便是以一段拙劣的文字来祭奠我那段流逝的岁月
展开
-
判断日期是否为 法定节假日、休息日、工作日
package com.czxy; import java.io.BufferedReader;import java.io.InputStream;import java.io.InputStreamReader;import java.net.HttpURLConnection;import java.net.URL;import java.text.ParseExceptio...原创 2020-04-25 18:27:13 · 12714 阅读 · 0 评论 -
大数据相关命令
安全模式 关闭hdfs dfsadmin -safemode leave查看历史命令history查看ps -ef | grep 名称 hive Zookeeper 开启与关闭全部 开启zkstart-all.sh 逐个节点关闭cd /export/servers/...原创 2020-04-24 10:36:43 · 7061 阅读 · 0 评论 -
StructStreaming 代码
//需求 统计年龄小于25岁的人群的爱好排行榜 读取文件package day26import org.apache.spark.sql.{DataFrame, Dataset, Row, SparkSession}import org.apache.spark.sql.types.StructTypeobject StructStreaming_files { d...原创 2020-04-22 12:00:30 · 8127 阅读 · 7 评论 -
Scala 样例类
目录1、创建一个demo1的单例,在demo1中创建一个样例类名字为student1,成员变量为name:String, age:Int创建主方法实例化student,并传参数(“xiaoming”,20),打印输出student1对象到控制台2、创建一个demo2的单例,在demo2中创建一个样例类名字为student2,成员变量为name:String, age:Int创建主方法实例化...原创 2020-04-22 11:55:20 · 8753 阅读 · 2 评论 -
Structured Streaming SQL
package Sparkimport org.apache.spark.sql.{DataFrame, SparkSession}/** * 使用Structured Streaming读取Socket数据,把单词和单词的反转组成 json 格式写入到当前目录中的file文件夹中 * (abc,cba) */object demo01 {def main(args: A...原创 2020-04-22 11:43:07 · 7696 阅读 · 4 评论 -
SparkRDD 练习
以下是租房信息的数据结构:数据之间使用tab进行分割,数据在housedata.txt文件中。(这里为一部分数据)1111000004310 什坊院甲3号院 https://bj.lianjia.com/xiaoqu/1111000004310/ 海淀 田村 0 2017/11/29 15:471111027373682 大慧寺6号院 https://bj.lianjia.com/x...原创 2020-04-22 11:23:11 · 8706 阅读 · 2 评论