自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(20)
  • 收藏
  • 关注

转载 使用HighCharts实现实时数据展示

使用HighCharts实现实时数据展示  在众多的工业控制系统领域常常会实时采集现场的温度、压力、扭矩等数据,这些数据对于监控人员进行现场态势感知、进行未来趋势预测具有重大指导价值。工程控制人员如果只是阅读海量的数据报表,对于现场整个态势的掌控会十分困难,因此往往希望借助一些图表进行展示,其中趋势图是常用的实时数据展示方式之一。目前实现趋势图、曲线图的工具很多也很成熟,一些是通过CS模式开发

2017-11-28 10:26:09 3538

转载 大数据时代的图表可视化利器——highcharts,D3和百度的echarts

大数据时代的图表可视化利器——highcharts,D3和百度的echarts还记得阿里巴巴那个令人澎湃激情的双十一吗?还记得淘宝生动形象地把你的的消费历程一一地展示给你看吗?还记得那些酷炫拽的it报告图表吗?在这个大数据越来越盛行的年代,怎样去表达一些用户的关系,人物的关联,甚至是事情的发展,都让我们有更多的表达方式。其中最简单直接,形象明了的就是用图表说明问题了。

2017-11-28 10:21:33 1558

转载 数据可视化 工具

作者:清华大学数据科学研究院链接:https://www.zhihu.com/question/23416938/answer/261296810来源:知乎著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。数据可视化,是指将相对晦涩的的数据通过可视的、交互的方式进行展示,从而形象、直观地表达数据蕴含的信息和规律。早期的数据可视化作为咨询机构、金

2017-11-27 10:11:36 1199

转载 http://kylin.apache.org/development/new_metadata.html

http://kylin.apache.org/development/new_metadata.html

2017-11-24 15:05:06 202

转载 Apache Kylin在美团数十亿数据OLAP场景下的实践

本文根据2016年4月北京Apache Kylin Meetup上的分享讲稿整理,略有删节。美团各业务线存在大量的OLAP分析场景,需要基于Hadoop数十亿级别的数据进行分析,直接响应分析师和城市BD等数千人的交互式访问请求,对OLAP服务的扩展性、稳定性、数据精确性和性能均有很高要求。本文主要介绍美团的具体OLAP需求,如何将Kylin应用到实际场景中,以及目前的使用方式和现状。同时也

2017-11-24 10:41:22 1230

转载 Hive2.0中HiveServer2的WEB UI界面

Hive2.0中HiveServer2的WEB UI界面Hive从2.0版本开始,为HiveServer2提供了一个简单的WEB UI界面,界面中可以直观的看到当前链接的会话、历史日志、配置参数以及度量信息。https://cwiki.apache.org/confluence/display/Hive/Setting+Up+HiveServer2#Settin

2017-11-24 10:36:16 2693

转载 hive常用命令

#创建新表hive> CREATE TABLE t_hive (a int, b int, c int) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t';#导入数据t_hive.txt到t_hive表hive> LOAD DATA LOCAL INPATH '/home/cos/demo/t_hive.txt' OVERWRIT

2017-11-24 10:18:14 212

转载 kylin问题总结

一、点击加载hive表出现如下异常:java.lang.NoClassDefFoundError: org/apache/hadoop/hive/cli/CliSessionStatejava.lang.NoClassDefFoundError: org/apache/hadoop/hive/ql/session/SessionState解决:将hive lib

2017-11-24 09:58:49 1897

转载 hive 不同用户 权限设置 出错处理

今天安装了hive在a账号安装的,一切正常但是到其他账户下,报错>show tables;Error in metadata: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.metastore.HiveMetaStoreClientFAILED: Executio

2017-11-24 09:49:37 528

转载 Apache kylin安装配置

Apache kylin是基于 hadoop hive hbase的。一、安装hadoop注:需要启动 history  与 WebAppProxyServer[html] view plain copy./mr-jobhistory-daemon.sh start historyserver  ./yarn-daemon

2017-11-24 09:44:03 646

转载 OLAP了解 学习

OLAP介绍一、发展背景     60年代,关系数据库之父E.F.Codd提出了关系模型,促进了联机事务处理(OLTP)的发展(数据以表格的形式而非文件方式存储)。1993年,E.F.Codd提出了OLAP概念,认为OLTP已不能满足终端用户对数据库查询分析的需要,SQL对大型数据库进行的简单查询也不能满足终端用户分析的要求。用户的决策分析需要对关系数据库进行大量计算才能得到结果,

2017-11-24 09:33:10 14572

转载 Hive metastore三种配置方式

Hive metastore三种配置方式Hive的meta数据支持以下三种存储方式,其中两种属于本地存储,一种为远端存储。远端存储比较适合生产环境。Hive官方wiki详细介绍了这三种方式,链接为:Hive Metastore。 一、本地derby这种方式是最简单的存储方式,只需要在hive-site.xml做如下配置便可

2017-11-24 09:06:56 1480

转载 执行查看linux端口命令 9083 端口发现被占用 Hive安装过程遇到的问题

执行查看linux端口命令9083 端口发现被占用[root@h1 bin]# netstat -apn|grep 9083tcp        0      0 0.0.0.0:9083                0.0.0.0:*                   LISTEN      26235/java         tcp       48      0

2017-11-24 09:01:07 5087

转载 Hive metastore三种配置方式

Hive metastore三种配置方式Hive的meta数据支持以下三种存储方式,其中两种属于本地存储,一种为远端存储。远端存储比较适合生产环境。Hive官方wiki详细介绍了这三种方式,链接为:Hive Metastore。 一、本地derby这种方式是最简单的存储方式,只需要在hive-site.xml做如下配置便可

2017-11-23 15:04:35 3538

转载 Hive学习之Metastore及其配置管理

Hive学习之Metastore及其配置管理在学习Hive的配置管理参数时,曾将参数分为四类:Hive管理参数、Hive元存储(Metastore)管理参数、与Hadoop交互的管理参数、用于传递运行时信息的参数,当时并没有对Metastore参数进行深入的学习,现在就开始学习这部分的内容。       Hive中表和分区的所有元数据都存储在Hive的元存储(M

2017-11-23 15:02:25 602

转载 Hadoop启动jobhistoryserver

Hadoop启动jobhistoryserver[日期:2015-05-14]来源:Linux社区  作者:ljy2013[字体:大 中 小]Hadoop启动jobhistoryserver来实现web查看作业的历史运行情况,由于在启动hdfs和Yarn进程之后,jobhistoryserver进程并没有启动,需要手动启动,启

2017-11-23 09:20:59 3246

转载 hive启动报错 java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7B

hive启动报错 java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7B启动hive报错:[root@master conf]# hiveLogging initialized using configurati

2017-11-22 16:06:22 3472

转载 教你怎么在vi和vim上查找字符串

很多时候,我们想要在一个文件内查找某个字符串,无奈用的是linux vi/vim。下面小编就教你怎么在vi和vim上查找字符串。工具/原料一台linux方法/步骤我们以samba的配置文件为例,搜索一个user的字符串。vim /etc/samba/smb.conf

2017-11-22 16:03:46 1939

转载 当我说要做大数据工程师时他们都笑我,直到三个月后……

申明:本文旨在为普通程序员(Java程序员最佳)提供一个入门级别的大数据技术学习路径,不适用于大数据工程师的进阶学习,也不适用于零编程基础的同学。前言:一、背景介绍二、大数据介绍正文:一、大数据相关的工作介绍二、大数据工程师的技能要求三、大数据学习规划四、持续学习资源推荐(书籍,博客,网站)五、项目案例分析(批处理+实时处理)

2017-11-21 16:22:27 50196 11

转载 局域网内Linux服务器时间同步

局域网内Linux服务器时间同步1.将一台能够上网的服务器作为时间服务器: # /usr/bin/rdate -s time-b.timefreq.bldrdoc.gov //将时间服务器与互联网时间服务器同步 # /etc/init.d/ntpd start //启动时间服务器 # vi /etc/cron.weekly/rdateweekly.sh //设置计划

2017-11-20 14:25:06 7451

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除