- 博客(5)
- 收藏
- 关注
原创 认识spark,Scala简介
Spark是一种基于内存的快速、通用、可扩展的大数据分析计算引擎。是加州大学伯克利分校AMP实验室(Algorithms, Machines, and People Lab)开发的通用内存并行计算框架Spark得到了众多大数据公司的支持,这些公司包括Hortonworks、IBM、Intel、Cloudera、MapR、Pivotal、百度、阿里、腾讯、京东、携程、优酷土豆。当前百度的Spark已应用于大搜索、直达号、百度大数据等业务;
2024-03-06 11:20:21
843
原创 spark+Scala搭建
在主节点master上出现Master 在s1上出现Worker在s2上出现Worker。source /etc/profile使环境变量生效。浏览器查看192.168.10.100:8080。(1)上传并解压安装scala安装包。(1)上传并解压安装spark安装包。(3)验证scala 启动成功。
2024-03-06 11:13:59
352
原创 安装code
如将官网下载链接:https://az764295.vo.msecnd.net/stable/dfd34e8260c270da74b5c2d86d61aee4b6d56977/VSCodeUserSetup-x64-1.66.2.exe。但是,只要将下载链接中的“az764295.vo.msecnd.net” 替换为国内镜像地址“vscode.cdn.azure.cn”,下载速度直接飙升至几十 Mb/s。VS Code的官网: https://code.visualstudio.com/
2024-03-04 11:33:36
346
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人