港城少年

真理掌握在少数人手里,但是:少数服从多数。

排序:
默认
按更新时间
按访问量

数据手动导入星环inceptor

1.访问星环客户端,下载TDH_Client压缩包 2.到该目录,解压压缩包,./init.sh 3.source init.sh 4.输入export HADOOP_USER_NAME=hdfs 5.导入oracle的驱动包到/opt/TDH_Client/sqoop/lib下 6.s...

2018-06-03 02:08:35

阅读数:137

评论数:0

mysql中blob数据处理

package epoint.mppdb_01.h3c; import java.io.File; import java.io.FileInputStream; import java.io.FileOutputStream; import java.io.InputStream; impor...

2018-06-03 02:01:49

阅读数:105

评论数:0

hive外表和事务表

1.抽取到hdfs成功后,就可以连接hive,创建外表了 建立外表 beeline -u jdbc:hive2://192.168.186.14:10010/default -n hdfs CREATE external TABLE nj12345.case_info_ex(CASE_SER...

2018-06-03 01:58:43

阅读数:100

评论数:0

增加、删除、更新触发器

第一步:新建触发器表 SET FOREIGN_KEY_CHECKS=0; DROP TABLE IF EXISTS `dataex_trigger_record`; CREATE TABLE `dataex_trigger_record` ( `ROWGUID` varchar(50)...

2018-06-03 01:48:35

阅读数:153

评论数:0

何为大数据平台

数据分为结构化数据(如人员信息、项目信息)和非结构化数据(如图片,文档),传统上讲,我们采用数据库来存结构化数据,如MySQL Oracle SQLServer,用NFS来存非结构化数据。 大数据,意味着数据多,如果记录数达到了上亿,一般数据库可能也就拖不动了。如果存储文件数达到几个T,...

2018-05-04 21:42:38

阅读数:1113

评论数:0

深度学习

深度学习的概念源于人工神经网络的研究。含多隐层的多层感知器就是一种深度学习结构。深度学习通过组合低层特征形成更加抽象的高层表示属性类别或特征,以发现数据的分布式特征表示。 深度学习是机器学习中一种基于对数据进行表征学习的方法。观测值(例如一幅图像)可以使用多种方式来表示,如每个像素强度值...

2018-05-04 21:29:01

阅读数:1171

评论数:0

机器学习

机器学习: 简单的说就是机器拥有了学习能力。这又是怎么一回事呢? 再回到人工智能的例子,只不过有所变动,我们知道,现在房价的波动有一定的规律,并感觉与年份、房间数有关,并认定规则为:房价=年份*a+房间数*b。 可以问题是a和b两个参数不得而知。但是可喜的是我们有很多历史数据。于是聪明的人们就...

2018-05-04 20:37:48

阅读数:1097

评论数:0

人工智能

很多人对人工智能的理解可能还仅仅停留在一个基本概念的层度,没有能深入理解,近年来这个概念也多由于一些事件,如围棋下过人类之类的事件所引爆。这里简要的普及下。 这个图表明了三者间的关系。人工智能是一个大课题。细分下看: 人工智能 简单的说就是让计算机有智能。比如我发现了一个规律,房价=年份*240....

2018-05-04 20:25:12

阅读数:1092

评论数:2

何为区块链

区块链最近几年成为了一个很热门的课题,很多人知道区块链源自比特币。 何为区块链呢?我们来演义一下: 小张在银行里存了笔钱100块,小明在银行里也开了个户。某天小张转给小明80块,于是小张只有20块,小明有了80块。 为了记录这些数据,银行开了2张表,1张是账户信息表(姓名,余额),另一张是转账表...

2018-05-04 20:21:51

阅读数:1111

评论数:0

Hadoop学习路径

一、平台基础 1.1、大数据了解什么是大数据,大数据入门,以及大数据介绍。 以及大数据中存在的问题,包括存储,计算的问题,有哪些解决策略。 1.2、Hadoop平台生态圈熟悉了解开源Hadoop平台生态圈,以及第三方大数据平台,查找一些Hadoop入门介绍博客或者官网,了解: What’s H...

2018-05-04 20:10:37

阅读数:1077

评论数:0

PostgreSQL示例demo

驱动下载地址:https://pan.baidu.com/s/1eBRESdntbnZQoN-yxJgFDA 功能:建立连接,数据读取 package com.epoint.HadoopAPIDemo; import java.sql.Connection; import java.sq...

2018-05-01 13:58:29

阅读数:1103

评论数:0

MPPDB的demo示例

下载驱动:https://pan.baidu.com/s/1sV4XZbbmYtC0pAO6tewMTg 功能:将mysql中的数据表结构,自动在MPPDB中按照MPPDB语法批量创建表。 package com.epoint.HadoopAPIDemo; import java.sql...

2018-05-01 13:57:02

阅读数:1163

评论数:0

MPPDB分布式结构化数据库

1.MPPDB简介 MPP,它是一款 Shared Nothing 架构的分布式并行数据库集群,具备高性能、高可用、高扩展特性,可以为超大规模数据管理提供高性价比的通用计算平台,并广泛地用于支撑各类数据仓库系统、BI 系统和决策支持系统。 2.MPPDB技术特点 MPP 具备以下技...

2018-05-01 13:55:12

阅读数:1439

评论数:2

关系型数据抽取到hive中

操作步骤 1.建立外表 CREATE external TABLE t_rk_baseinfo_5kwexternal ( ROW_ID STRING, SYNC_SIGN STRING, SYNC_ERROR_DESC STRING, OperateType STRING, SY...

2018-05-01 13:53:50

阅读数:1050

评论数:0

阿里快速展现工具QuickBI

阿里的展现工具包括:快速展现工具QuickBI和大屏制作工具DataV。 当然QuickBI工具的使用和之前介绍的smartbi,FineBI,等产品类似,进行借鉴。

2018-04-14 19:42:51

阅读数:2726

评论数:0

创建型模式二:工厂方法模式

1. 工厂模式介绍 工厂模式(Factory Pattern)的意义就跟它的名字一样,在面向对象程序设计中,工厂通常是一个用来创建其他对象的对象。工厂模式根据不同的参数来实现不同的分配方案和创建对象。 在工厂模式中,我们在创建对象时不会对客户端暴露创建逻辑,并且是通过使用一个共同的接...

2018-04-14 19:17:25

阅读数:2643

评论数:0

创建型模式一:单例模式

1. 单例模式介绍 单例模式,是一种常用的软件设计模式。在它的核心结构中只包含一个被称为单例的特殊类。通过单例模式可以保证系统中,应用该模式的类一个类只有一个实例。即一个类只有一个对象实例。 对于系统中的某些类来说,只有一个实例很重要,例如,一个系统中可以存在多个打印任务,但是只能有...

2018-04-14 18:59:27

阅读数:2652

评论数:1

设计模式原则

1.什么是设计模式 在软件工程中,设计模式是对软件设计中普遍存在的各种问题,所提出的 解决方案。 换句话说,设计模式是一套被反复使用、多数人知晓的、经过分类的、代码设计的 经验的总结。使用设计模式是为了可重用代码,让代码更容易被他人理解,保证代码可靠性。 2.设计模式原则2.1...

2018-04-14 11:49:32

阅读数:2632

评论数:0

mysql刷MPP建表语句

代码实例SELECT table_schema ,table_name ,( CASE WHEN ORDINAL_POSITION = mincol AND ORDINAL_POSITION < max...

2018-03-14 08:49:11

阅读数:4293

评论数:0

mysql刷Hive建表语句

代码实例SELECT table_schema ,table_name ,( CASE WHEN ORDINAL_POSITION = mincol AND ORDINAL_POSITION < max...

2018-03-14 08:48:03

阅读数:4259

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭