hadop-2.6.0总结 1. 下载(略) 2. 编译(略) 3. 配置(伪分布、集群略) 4. Hdfs 1. Web interface:http://namenode-name:50070/(显示datanode列表和集群统计信息) 2. shell com...
待整理内容记录 1、tomcat调优、并发优化 2、es博文完善 3、resteasy使用记录 4、netty支持并发异步内容整理 5、easypoi内容整理 转载于:https://my.osc...
es 1、install 下载、解压 2、常见概念 index、type 3、es简单实用 创建索引: curl -XPUT 'localhost:9200/customer?pretty' curl -XPUT 'localhost:9200/test/ext...
深入浅出Zookeeper之二Session建立 zookeeperjavasession 摘自:http://iwinit.iteye.com/blog/1754611 上一篇,小编给大家介绍了zookeeper server端的启动。这一篇将来说一下client和server端是如何建立session的。通过官网的DataMon...
[ZooKeeper]Client Session失效 摘自: http://iwinit.iteye.com/blog/1843742 zookeepersessionexpiredconnectionloss 前面一篇文章提到zookeeper server端主动发现session超时并清理session信息,关闭连接,接下来看看clien...
Hadoop2.2_FairshareScheduler 如果是第一次接触hadoop2.0版本的 Fairshare scheduler , 最好先看一下他的官方文档: http://hadoop.apache.org/docs/r2.2.0/hadoop-yarn/hadoop-yarn-site/FairScheduler.html [ht...
mongodb分片配置 配置mongo分片 第一步:三实例 #Server1: mkdir -p /data/mongodb/shard11 mkdir -p /data/mongodb/shard21 /mongodb/bin/mongod --shardsvr --replSet shard1 --po...
Hive_分隔符问题参考 PIG中输入输出分隔符默认是制表符\t,而到了hive中,默认变成了八进制的\001,也就是ASCII: ctrl - AOct Dec Hex ASCII_Char 001 1 01 SOH (start of heading)官方的解释说是尽量不和文中的...
hadoop集群优化 1 hadoop中mapreduce优化: 1、计算机性能:硬件性能 2、I/O操作优化 2.1、输入的文件尽量采用大文件 众多的小文件会导致map数量众多,每个新的map任务都会造成一些性能的损失。所以可以将一些小文件在进行mapreduce操作前进行一些预处理,整...
hadoop常见异常、错误 exception 1 2014-12-21 12:27:17,084 WARN org.apache.hadoop.hdfs.server.datanode.DataNode: IOException in offerService java.net.ConnectException:...
工作相关问题记录帖 1、hadoop2.2.0多集群间更新数据出现Operation category READ is not supported in state standby错误,考虑采用如下方式处理: http://slaytanic.blog.51cto.com/2057708/1423227 2、...
Hive优化常见问题 一、总体思想 http://blog.csdn.net/u011750989/article/details/12024301 1、让服务器尽可能的多做事情,榨干服务器资源,以最高系统吞吐量为目标 再好的硬件没有充分利用起来,都是白扯淡。 比如: (1) 启动一次job尽可能的多...
hive0.14 config <?xmlversion="1.0"encoding="UTF-8"standalone="no"?><?xml-stylesheettype="text/xsl"href="configuration.xsl"?><!--Licensed...
Redis常识 版本:V3.1 2014-3-36 (@江南白衣 版权所有,转载请保留出处),针对Redis 2.8版。 1. Overview 1.1 资料 <The Little Redis Book>,最好的入门小册子,可以先于一切文档之前看,免费。 ...
Redis常用命令、api Redis 是完全开源免费的,遵守BSD协议,先进的key - value持久化产品。它通常被称为数据结构服务器,因为值(value)可以是字符串(String),哈希(Map),列表(list),集合(sets)和有序集合(sorted sets)等类型。 常用命令 ...
linux系统通过nginx实现tomcat集群 集群系统一般通过两台或多台节点服务器系统通过相应的硬件及软件互连,每个群集节点都是运行其自己进程的独立服务器。 这些进程可以彼此通信,对网络客户机来说就像是形成了一个单一系统,协同起来向用户提供应用程序、系统资源和数据。除了作为单一系统提供服务,集群系统还具有恢复服务器级故...