- 博客(9)
- 资源 (16)
- 收藏
- 关注
原创 简洁的kafka单节点和分布式安装文档
单节点安装:Ip:single:192.168.1.1861.下载:http://kafka.apache.org/downloads.html 下载源码或者对应scala版本的bin包 2.解压[root@single cloud]# tar -zxvf kafka_2.10-0.8.2-beta.tgz -C /cloud/ 3.进入解压目录[root@sing
2015-01-25 14:48:43 9940
原创 redis入门到精通
下载安装下载地址:$ wget http://redis.googlecode.com/files/redis-2.6.13.tar.gzlinux下:解压到指定目录make 32bit / makemake install prefix=/usr/local/redis安装成功 windows免安装: 参数介绍: make install命令执
2015-01-23 20:55:45 7261
原创 redis配置文件详解
#是否以后台进程运行,默认为nodaemonize yes#如以后台进程运行,则需指定一个pid,默认为/var/run/redis.pidpidfile d:/redis/var/redis.pid#监听端口,默认为6379port 6379#绑定主机IP,默认值为127.0.0.1(注释)# bind 127.0.0.1#超时时间,默认为300(秒)(0 to
2015-01-23 10:20:28 6843
转载 乐观锁与悲观锁
悲观锁(Pessimistic Lock), 顾名思义,就是很悲观,每次去拿数据的时候都认为别人会修改,所以每次在拿数据的时候都会上锁,这样别人想拿这个数据就会block直到它拿到锁。传统的关系型数据库里边就用到了很多这种锁机制,比如行锁,表锁等,读锁,写锁等,都是在做操作之前先上锁。乐观锁(Optimistic Lock), 顾名思义,就是很乐观,每次去拿数据的时候都认为别人
2015-01-23 10:19:28 6420
原创 ubuntu 14修改启动模式 关闭启动图形界面
Ubuntu的默认开机的runlevel是2,可以用runlevel来查看当前的默认运行级别。runlevel级别定义如下:0 – Halt,关机模式1 – Single,单用户模式2 - Full multi-user with display manager (GUI)3 - Full multi-user with display manager (GUI)4 -
2015-01-22 13:37:20 9145
转载 hive数据倾斜原因和解决方法
在做Shuffle阶段的优化过程中,遇到了数据倾斜的问题,造成了对一些情况下优化效果不明显。主要是因为在Job完成后的所得到的Counters是整个Job的总和,优化是基于这些Counters得出的平均值,而由于数据倾斜的原因造成map处理数据量的差异过大,使得这些平均值能代表的价值降低。Hive的执行是分阶段的,map处理数据量的差异取决于上一个stage的reduce输出,所以如何将数据均匀的
2015-01-20 17:26:13 31286 3
原创 测试hadoop安装成功与失败
1.首先是jps,看看java进程是否都在2.查看hdfs和yarn的web地址,看看能否出现3.hdfs dfs -ls / ,看看目录是否列的出来4../hadoop jar ../share/hadoop/mapreduce/hadoop-mapreduce-examples-2.2.0.jar pi 5 10 跑一个mr例子试试这样就差不多了
2015-01-04 11:11:27 8156
原创 hadoop单机版安装
单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS,也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapReduce程序的应用逻辑。1.配置hadoop_home/et
2015-01-04 11:05:04 6890
转载 移动广告平台盈利模式
随着iPhone手机和Android手机的流行,移动互联网也发展起来了,开发者也开始尝试各种盈利模式。在应用中嵌入广告,是现阶段一个重要的盈利模式。移动广告模式和传统的PC互联网广告基本相同,所以很多概念都是通用的,目前常见的盈利模式有:CPM、CPC、CPA、CPS、CPL 、CTR、eCPM。 1)CPM(Cost Per Mille) CPM的字面意思是“
2015-01-02 17:42:13 8312 1
SonarLint-3.5-for-intellj-idea-亲测好使.zip
2019-08-09
C#语言c/结构酒店管理系统_幽灵工作室提供
2013-05-12
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人