写博客只为学习

原创 Redis Linux安装总结（3.2.8）

[b]第一步下载文件到该目录[/b] cd /usr/local/srcwget http://download.redis.io/releases/redis-3.2.8.tar.gz解压tar xvzf redis-3.2.8.tar.gz -C /usr/[b]第二步编译安装[/b]makemake all[color=red][b]--install时...

原创 Redis Linux安装总结（3.2.8）

makemake all[color=red][b]--install时需要进入到src目录下[/b][/color]make install[b]第三步[/b]建立文件夹mkdir /usr/redis-3.2.8/bin将/usr/local/bin 文件下的文件拷贝到 建立的文件夹(/usr/redis-3.2.8/bin)同时把redis.conf配置文件拷贝到建立的文件夹下开启服务：redis-server redis.conf //[color=red

原创 Scala 在Intellij中搭建Scala环境（jdk8,scala2.11.4）

1.打开Intellij然后点击File->Plugins找到scala安装scala插件2.安装scala环境（配置环境变量版本用2.11.4）3.安装jdk84.创建scala项目点击File->New->Project中的scala 然后点击SBT项目 选择你的jdk和scala版本[img]http://dl2.iteye.com/upload/atta...

原创 Scala 在Intellij中搭建Scala环境（jdk8,scala2.11.4）

原创 Spark 会把数据都载入到内存吗

[size=large][b]前言[/b][/size]很多初学者其实对Spark的编程模式还是RDD这个概念理解不到位，就会产生一些误解。比如，很多时候我们常常以为一个文件是会被完整读入到内存，然后做各种变换，这很可能是受两个概念的误导：1.RDD的定义，RDD是一个分布式的不可变数据集合2.Spark 是一个内存处理引擎如果你没有主动对RDDCache/Persis...

原创 Spark 会把数据都载入到内存吗