- 博客(6)
- 收藏
- 关注
RSS订阅原创 全国大学生大数据技能竞赛——基于Scala和Echart的大数据分析与挖掘
基于Scala和Echart的大数据分析与挖掘题目三：大数据分析与挖掘案例Spark基站统计分析Scala语法基础数据读取1．读取文件数据（1）按行读取（2）按字符读取2．写入数据数据切割数据过滤数据解析数据缓存分组聚合分组 | groupBy聚合操作数据可视化Echarts题目三：大数据分析与挖掘案例搜狗实验室提供【用户查询日志(SogouQ)】数据数据：本项目是对日志数据；要求：搜索关键字进行统计，可以作为热点词汇来帮助用户快速查询相关信息；并且针对用户点击数进行统计分析，可以作为搜索引擎搜索效
2021-11-24 08:12:14
2878
原创 2021年大数据竞赛（随堂笔记）
一、基础搭建1.1 配置hosts文件通过ifconfig查看各节点的 IP 地址，将三个节点的 IP 地址以及其对应的名称写入hosts文件xxx.xxx.xxx.xxx masterxxx.xxx.xxx.xxx slave1xxx.xxx.xxx.xxx slave21.2 关闭防火墙关闭防火墙：systemctl stop firewalld查看状态：systemctl status firewalld1.3 ntp时间同步选择时区：tzselectmaster 作为 ntp
2021-09-06 22:25:17
415
原创 全国大学生大数据技能竞赛 —— 分布式平台搭建（待更）
全国大学生大数据技能竞赛 —— 分布式平台搭建基础部分一、基础搭建1、更改主机名2、配置hosts文件（三台机器都要执行）二、安装JDK三、安装zookeeper四、安装hadoop五、安装hbase六、安装hive提高部分七、Spark安装
2021-08-13 16:31:31
1755
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人