- 博客(13)
- 资源 (1)
- 收藏
- 关注
原创 sqoop的安装与使用
Sqoop即 SQL to Hadoop ,是一款方便的在传统型数据库与Hadoop之间进行数据迁移的工具,充分利用MapReduce并行特点以批处理的方式加快数据传输,发展至今主要演化了二大版本,Sqoop1和Sqoop2。 Sqoop工具是hadoop下连接关系型数据库和Hadoop的桥梁,支持关系型数据库和hive、hdfs,hbase之间数据的相互导入,可以使用全表导入和增量导入。那么为什么选择Sqoop呢? 高效可控的利用资源,任务并行度,超时时间。 数据类型映射与转化,可自动进行,用户
2014-10-21 18:44:54 7652
原创 mysql load 从文件读入数据提示ERROR 1148
创建数据表CREATE TABLE weblogs( md5 varchar(32), url varchar(64), request_date date, request_time time, ip varchar(15))我的版本是:Server vers
2014-10-21 17:01:28 3782
原创 Ubuntu安装摄像头驱动
a) 请根据内核版本和摄像头类型从http://mxhaard.free.fr/download.html选择下载最新驱动,该驱动支持市面上大多数摄像头。b) 编译、安装连同装载摄像头驱动c) # tar xvzf gspcav1-20061216.tar.gz# cd gspcav1-20061216# make# make install# modprobe g
2014-10-18 18:11:57 7574
原创 《深入浅出pig系列之一》pig-0.12.0-cdh5.1.2的安装与运行
这里使用的版本是cdh发行的pig-0.12.0-cdh5.1.2 下载地址点这里1.Pig简介: Pig是yahoo捐献给apache的一个项目,它是SQL-like语言,是在MapReduce上构建的一种高级查询语言,把一些运算编译进MapReduce模型的Map和Reduce中,并且用户可以定义自己的功能。这是Yahoo开发的又一个克隆Google的项目:S
2014-10-13 19:22:54 2869
翻译 explore your hadoop data and get real-time results
explore your hadoop data and get real-time results 深度api集成使你大数据访问更加容易
2014-10-13 11:01:37 1708
翻译 Choosing Between ElasticSearch, MongoDB & Hadoop
Choosing Between ElasticSearch, MongoDB & Hadoop
2014-10-13 09:39:12 2107
原创 flume 日志导入elasticsearch
Flume配置。flume生成的数据结构"_index" : "logstash-2013.01.07","_type" : "tms_jboss_syslog","_id" : "a_M9X_0YSpmE7A_bEzIFiw","_score" : 1.0, "_source" : {"@source":"file://localhost.localdomain/tmp
2014-10-09 14:13:50 8754 5
原创 Ubuntu好用的词典 星际译王 stardict安装 词典添加
Ubuntu系统默认没有安装Ubuntu星际译王,但Ubuntu系统的软件源中包含了该软件,我们可以使用apt-get命令或新立得软件包管理器来安装该软件。如果当前系统连接到互联网,我们用apt-get命令来安装该软件。在菜单“应用程序”→“附件”下找到“终端”项,用鼠标单击该项,则打开一个 GNOME终端窗口,在窗口中输入如下命令:sudo apt-get install stardict
2014-10-09 11:22:37 4557
原创 elasticsearch 与 hive集成
ElasticSearch是一个基于Lucene构建的开源,分布式,RESTful搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。hive
2014-10-08 18:38:47 18928 5
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人