- 博客(20)
- 资源 (16)
- 收藏
- 关注
转载 hive2.1.1安装部署
转:http://blog.csdn.net/zhongguozhichuang/article/details/52702476一、Hive 运行模式与 Hadoop 类似,Hive 也有 3 种运行模式:1. 内嵌模式将元数据保存在本地内嵌的 Derby 数据库中,这是使用 Hive 最简单的方式。但是这种方式缺点也比较明显,因为一个内嵌的 Derby
2017-01-22 15:30:16 11355 1
转载 基于zookeeper的hadoop HA实现
转:http://blog.csdn.net/everl_1/article/details/52303011非HA弊端HDFS集群的分布式存储是靠namenode节点(namenode负责响应客户端请求)来实现。在非HA集群中一旦namenode宕机,虽然元数据不会丢失,但整个集群将无法对外提供服务,导致HDFS服务的可靠性不高,这在实际应用场景中显然是不可行的。HA机制已知
2017-01-20 18:01:28 1166
转载 Linux服务器时间同步
转:http://blog.csdn.net/bbirdsky/article/details/20445385/Linux服务器运行久时,系统时间就会存在一定的误差,一般情况下可以使用date命令进行时间设置,但在做数据库集群分片等操作时对多台机器的时间差是有要求的,此时就需要使用ntpdate进行时间同步。date命令:date :查看当前时间,结果如下:Tue Mar
2017-01-19 17:45:49 337
转载 hadoop-MapReduce
YARN只是负责资源调度管理。而MapReduce才是负责运算的家伙,所以YARN != MapReduceMapReduce概述MapReduce是一种分布式计算模型,由Google提出,主要用于搜索领域,解决海量数据的计算问题.MR由两个阶段组成:Map和Reduce,用户只需要实现map()和reduce()两个函数,即可实现分布式计算,非常简单。这两个函数的形参是
2017-01-19 14:55:34 337
转载 Hadoop-YARN(资源管理系统)
转:http://www.cnblogs.com/sy270321/p/4398703.html YARN总体上仍然是Master/Slave结构,在整个资源管理框架中,ResourceManager为Master,NodeManager为Slave,ResourceManager负责对各个NodeManager上的资源进行统一管理和调度。当用户提交一个应用程序时,需要提供一个用以跟踪和管理
2017-01-19 14:45:01 2084
转载 HDFS架构
HDFS架构NameNodeDataNodeSecondary NameNodeNameNode是整个文件系统的管理节点。它维护着整个文件系统的文件目录树,文件/目录的元信息和每个文件对应的数据块列表。接收用户的操作请求。HDFS文件系统的元信息保存目录:hdfs-site.xml的dfs.name.dir属性如果这个参数设置为多个目录,那么这些
2017-01-19 13:58:20 284
转载 hadoop 用MR实现join操作
a.txtid name 001 iphone6002 xiaominote003 mate7004 nubia005 meilanb.txtid orderid 001 00101001 00110002 01001...001 iphone6-->a 00101-->b 00110-->b
2017-01-18 15:57:02 596
转载 MapReduce编程之倒排索引的实现
转:http://www.cnblogs.com/aijianiula/p/3870664.html倒排索引简单地就是:根据单词,返回它在哪个文件中出现过,而且频率是多少的结果。这就像百度里的搜索,你输入一个关键字,那么百度引擎就迅速的在它的服务器里找到有该关键字的文件,并根据频率和其他一些策略(如页面点击投票率)等来给你返回结果。这个过程中,倒排索引就起到很关键的作用。---
2017-01-18 15:39:57 863
转载 hadoop 序列化和排序,自定义分区
pom.xml UTF-8 2.7.3 org.apache.hadoop hadoop-client ${hadoop.version} org.apache.hadoop hadoop-common ${hadoop.version} org.apache.hadoop hadoop-hdfs
2017-01-18 15:26:25 767
转载 Main 简单群聊
转:http://blog.csdn.net/ibm_hoojo/article/details/7817303pom.xml<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://
2017-01-16 11:34:43 380
转载 mina框架详解
转:http://blog.csdn.net/w13770269691/article/details/8614584Apache Mina Server 是一个网络通信应用框架,也就是说,它主要是对基于TCP/IP、UDP/IP协议栈的通信框架(当然,也可以提供JAVA 对象的序列化服务、虚拟机管道通信服务等),Mina 可以帮助我们快速开发高性能、高扩展性的网络通信应用,Mina 提供了事
2017-01-12 17:58:24 875
转载 java nio
http://www.iteye.com/magazines/132-Java-NIO#579http://www.cnblogs.com/maydayit/p/4250326.html
2017-01-12 10:51:47 299
转载 Google Protobuf 3版本介绍
转:http://www.cppblog.com/sunicdavy/archive/2016/01/25/212739.htmlProto3的语法变化语法标记这个版本的protoc的protobuf编译器已经可以支持proto2语法和proto3的语法如果你的proto文件没有添加syntax说明的话, 用这个版本的编译器会报错, 提示你默认proto2支持, 请添加
2017-01-11 11:39:44 6275
转载 java(Android):windows系统 ProtoBuf(3.1.0)编译及使用
转:http://blog.csdn.net/a526001650a/article/details/53172220一、ProtoBuf编译出jar文件1. 从http://maven.apache.org/download.cgi下载apache-maven-3.3.9-bin.zip,解压至D:\AndroidDevelop目录。配置环境变量:MAVEN_HOME:D:\
2017-01-11 11:35:45 1319
转载 利用MediaRecorder类实现自己的音频录制程序
转:http://longyi-java.iteye.com/blog/1678594 case R.id.btn2: //通过MediaRecorder类来实现自己的音频录制程序 Intent intent2 = new Intent(); intent2.setClass(this, MyA
2017-01-09 19:43:59 420
转载 android 仿微信聊天界面,以及语音录制功能
转:http://blog.csdn.net/he90227/article/details/43530525 <RelativeLayout xmlns:android="http://schemas.android.com/apk/res/android" android:layout_width="fill_parent" android:layout_hei
2017-01-09 19:40:24 897 1
转载 Android 处理音频焦点 AudioFocus
在给定的时间尽管只有一个活动可以运行,但Android是一个多任务环境。这对应用程序使用音频造成了一个特别大的难度,由于只有一个音频输出,可能会有好几个媒体服务争夺使用它。Android2.2之前,没有内置机制来解决这个问题,这可能在某些情况下导致糟糕的用户体验。例如,一个用户正在听音乐,同时另一个应用程序有很重要的事需要通知用户,由于吵闹的音乐用户可能不会听到提示音。从Android2.2开
2017-01-09 19:30:29 958
转载 关于 android 中 postDelayed方法的讲解
转:http://blog.csdn.net/xiabo851205/article/details/7991529这是一种可以创建多线程消息的函数使用方法:1,首先创建一个Handler对象Handler handler=new Handler();2,然后创建一个Runnable对象Runnable runnable=new Runnable(){ @Override
2017-01-09 19:20:38 464
转载 Android跳转到通讯录获取用户名称和手机号码
转:http://blog.csdn.net/u013749540/article/details/52832506思路: 1.点击跳转到通讯录界面 2.获取通讯录姓名和手机号码 3.回调显示姓名和手机号码 1首先是跳转到通讯录界面Intent intent = new Intent(Intent.ACTION_PICK, ContactsContract.Contac
2017-01-04 10:35:11 3163
转载 EventBus使用详解-2-用RxJava实现事件总线(Event Bus)
EventBus:http://blog.csdn.net/harvic880925/article/details/40660137rxbus :http://www.jianshu.com/p/ca090f6e2fe2
2017-01-04 10:10:58 948
dubbo.xsd ) dubbo.xsd )
2016-05-26
dubbo-admin-2.5.4-SNAPSHOT.war
2016-05-26
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人