温润如风的博客

别人一夸我,我就担心,担心别人夸得不够 。

spark学习之路------spark安装和部署

学习一门语言,或者学习一种应用,都学要把运行环境给搭建起来,这就是基础,可不能绕过啊 一、安装VMWare,步骤略,网上好多啊,而且我用的是vm virtualbox Ubuntu(我用的centos),安装3台,一台Master,另外2台Slave 安装JDK:主要配置环境...

2016-09-29 16:38:41

阅读数 765

评论数 0

学习spark之路-----------系统概述

这些概念性的东西,我看着真的脑萎缩了,不过还是记录下来吧,万一用到呢。 spark是一个快速和通用的大数据处理引擎 在性能上有快速、易用、通用等特点 比Hadoop快100倍 Spark的生态系统包括如下: Spark Core:是整个BDAS生态系统的核心组件,是一个分布式大数据处理框架...

2016-09-29 16:22:03

阅读数 1110

评论数 0

在spark命令行中执行hql内存溢出解决方法

比如以下错误 这样改咋办呢??? 内存溢出一般是改spark的运行内存,方法如此下

2016-09-29 09:55:13

阅读数 584

评论数 0

提示
确定要删除当前文章?
取消 删除