- 博客(14)
- 资源 (15)
- 收藏
- 关注
转载 如何在hbase中快速插入10万条数据
我们知道每一条put操作实际上都是一个rpc操作,它将客户端数据传送到服务器然后返回。这只是折小数据量的操作,如果有一个应用需要插入十万行数据到Hbase表中,这样处理就太不合适了。 hbase的api配备了一个客户端的些缓冲区,缓冲区负责手机put操作,然后调用rpc一次性将put送往服务器。 下面是一个插入十万行到一个表的代码:[html] view plai
2017-07-21 15:46:45 2701
转载 Hbase之插入数据
Hbase之插入数据 /** * Created by similarface on 16/8/17. */import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.Table
2017-07-21 15:39:22 1391
转载 hbase中创建表、插入数据,更新数据,删除数据
所需要的包有:commons-codec-1.4.jarcommons-logging-1.1.1.jarHadoop-0.20.2-core.jarHbase-0.90.2.jarlog4j-1.2.16.jarzookeeper-3.3.2.jar 背景:假设有一个不知道是干什么表:)表里需要存入人员和其相对应的部门信息 代码:i
2017-07-21 15:38:09 1769
转载 Storm-HBase集成--配置和开发
1 Storm0.9.3中的对HBase的集成Storm新版本0.9.3中重新整理和加入了对Hbase的集成模块,除了基本的Bolt和Spout之外,加入了用于访问hbase的Trident。利用这个Trident,我们可以更加快速的编写Storm访问HBase的代码逻辑。关于Storm-HBase模块中,几个主要的功能类如下:类名介绍
2017-07-21 15:37:23 894
转载 kafka+storm+hbase架构设计
kafka+storm+hbase架构设计kafka+storm+hbase架构设计:kafka作为分布式消息系统,实时消息系统,有生产者和消费者;storm作为大数据的实时处理系统;hbase是apache hadoop 的数据库,其具有高效的读写性能!这里把kafka生产的数据作为storm的源头spout来消费,经过bolt处理把结果保存到hbase。基础环境:这里就不介
2017-07-21 15:36:39 407
转载 最简单的XML格式Excel表格文件
最简单的XML格式Excel表格文件最简单的XML格式Excel表格文件当然,还有几个地方是可以删除掉的内容,但是这样就有些破坏完整性了。这个文档的作用就是从XML数据源中导出数据之后,使用XSLT转换也可以把数据导出。简单!xml version="1.0"?>mso-application progid="Excel.Sheet"?>Workbook xml
2017-07-19 14:39:15 3565
转载 如何监控Android模拟器的HTTP访问情况
前几个月,在调试某个应用时,需要监控应用与服务器之间的HTTP通讯。从搜索引擎找到的方案几乎全错。要么是人云亦云,要么是只能满足旧的平台版本,要么根本就是臆测。不得其解之际,用比较复杂的方法解决了。昨天想起来,觉得太过窝囊,于是重整旗鼓,终于在官方文档上找到一点启发。把真正能解决问题的方案写下来,一方面给同样遇到问题的朋友一点帮助,另一方面也是提醒自己,官方文档是解决问题的第一方案,但读文档也有讲
2017-07-17 14:32:18 922
转载 微信分享调用JS -- c#篇
1.前端 1.1 导入微信端的JS 如果你的网址是http,则地址为 http://res.wx.qq.com/open/js/jweixin-1.0.0.js 如果你的网址是https,则地址为 https://res.wx.qq.com/open/js/jweixin-1.0.0.js 1.2 调用后台,获取需要的配置 调用后台,需要的配置为:app
2017-07-17 14:05:27 979
转载 Reflector
.Net的编程利器Reflector可以反编译基于.net开发的应用程序和DLL,其功能强大不用多说。今天想试验一把利用VS.NET的插件断点调试外部无源码的DLL(只要是程序集都可以,所以exe也行)功能。 一.加载VS.net的Reflector插件从官网下载的Reflector程序(最新版本为6.1.0)包中自带了VS.Net的插件,名称为“RedGate.Reflector.A
2017-07-13 21:32:26 1009
转载 textarea中限制输入字符长度(实用版)
textarea称文本域,又称文本区,即有滚动条的多行文本输入控件,在网页的提交表单中经常用到。与单行文本框text控件不同,它不能通过maxlength属性来限制字数,为此必须寻求其他方法来加以限制以达到预设的需求。通常的做法就是使用#脚本语言来实现对textarea文本域的字数输入限制,简单而实用。假设我们有一个id为 txta1 的textarea文本区,我们可以通过以下代码
2017-07-13 16:47:40 3562
转载 IIS Could not load type ‘System.ServiceModel.Activation.HttpModule’ from assembly ‘System.ServiceMo
Could not load type ‘System.ServiceModel.Activation.HttpModule’ from assembly ‘System.ServiceModel, Version=3.0.0.0, Culture=neutral, PublicKeyToken=b77a5c561934e089′. Description: An unhandled ex
2017-07-13 15:11:47 852
转载 Oracle 百万行数据查询优化
1.对查询进行优化,应尽量避免全表扫描,首先应考虑在where及 orderby 涉及的列上建立索引。 2.应尽量避免在where子句中对字段进行 null值判断,否则将导致引擎放弃使用索引而进行全表扫描,如: selectid fromt wherenum isnull 可
2017-07-04 11:36:01 2545
转载 ORACLE多表查询优化
ORACLE多表查询优化ORACLE有个高速缓冲的概念,这个高速缓冲就是存放执行过的SQL语句,那oracle在执行sql语句的时候要做很多工作,例如解析sql语句,估算索引利用率,绑定变量,读取数据块等等这些操作。假设高速缓冲里已经存储了执行过的sql语句,那就直接匹配执行了,少了步骤,自然就快了,但是经过测试会发现高速缓冲只对简单的表起作用,多表的情况完全没有效果,例如在查询单表的时候
2017-07-04 11:35:27 361
转载 vs2010和reflector不兼容
最近调试VS2010的程序时,vs2010老是崩溃。我在google上找了很久,没有找到解决方案。在此记录一下。崩溃原因:vs2010和reflector不兼容。前段时间,想看一下C# dll的源代码。所以安装了reflrctor.reflector是什么找原因的时候,查到了下面的网址:要感谢这位仁兄。下面是他的解决方案。http://www.cnblogs.com/sha
2017-07-04 09:57:51 658
neatupload
2015-09-18
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人