woshinsy的博客

本地矩阵具有整型的⾏、列索引值和双精度浮点型的元素值，它存储在单机上。MLlib⽀持稠密矩阵DenseMatrix和稀疏矩阵Sparse Matrix两种本地矩阵，稠密矩阵将所有元素的值存储在⼀个列优先（Column-major）的双精度型数组中，⽽稀疏矩阵则将⾮零元素以列优先的CSC（Compressed SparseColumn）模式进⾏存储。

写在前面：此笔记是本人在备战2022年大数据赛项整理出来的，不涉及国赛涉密内容，如点赞收藏理想，我将会把所有模块的笔记开源分享出来，如有想询问国赛经验的可以关注私聊我，我会一一回复。Scala 是一门满足现代软件工程师需求的语言；它是一门静态类型语言，支持混合范式；它也是一门运行在 JVM 之上的语言，语法简洁、优雅、灵活。Scala 拥有一套复杂的类型系统，Scala方言既能用于编写简短的解释脚本，也能用于构建大型复杂系统。3. 类和对象创建类创建对象apply方法伴生类和伴生对象注意点：重

hive实战

Spark安装与配置

Hive安装与配置

大数据系列 | Hadoop完全分布式安装

vmware虚拟机ubuntu18.04桌面版安装教程一. 安装环境：VMware Workstation： 15.5ProUbuntu： 18.04桌面版二. 安装教程：创建虚拟机选择【自定义(高级)】并点击【下一步】硬件兼容性选择Workstation一致选择【稍后安装操作系统】点击【下一步】客户机操作系统选择【Linux】版本选择【ubuntu 64位】点击【下一步】点击【浏览】可自定义安装位置（建议不要安装在C盘）点击【下一步】分配处理器数量和内核数

解决Hadoop不能打开端口8088的网页问题(50070可以打开)原因：本地hosts文件没有添加集群ip集群环境没有开放8088端口hadoop的配置文件yarn-site.xml问题解决方法：首先检查一下使用集群ip:8088是否可以访问 可以访问即是本地hosts配置问题以管理员身份打开WindowsPowershellC:> CD C:\Windows\System32\drivers\etcC:\Windows\System32\drivers\etc>

linux 离线安装配置mysql5.7.25最详细教程（附mysql命令大全）

问题报错提示：Distinct window functions are not supported: count(distinct xx) windowspecdefinition(name#9, _w4#39, ROWS BETWEEN UNBO问题报错原因：查阅资料后发现sparksql中的窗口函数不支持COUNT(DISTINCT xxx)导致报错