科多大数据的博客

专注于大数据人才培养,为大家提供大数据项目及经验分享

自定义博客皮肤

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

大数据经典案例,你知道几个

近两年,“大数据”这个词越来越为大众所熟悉,“大数据”一直是以高冷的形象出现在大众面前,面对大数据,相信许多人都一头雾水。下面我们通过十个经典案例,让大家实打实触摸一把“大数据”。你会发现它其实就在身边而且也是很有趣的。我也是因为有朋友在科多大数据专门去学习大数据的技术,我才对大数据有一定的了解。...

2018-05-31 16:01:08

阅读数 12693

评论数 2

数据分析师的完整知识结构

作为数据分析师,之前在项目上努力研发,现在在科多大数据兢兢业业教学。在数据分析师这一行无论最初的职业定位方向是技术还是业务,最终发到一定阶段后都会承担数据管理的角色。因此,一个具有较高层次的数据分析师需要具备完整的知识结构。1. 数据采集了解数据采集的意义在于真正了解数据的原始面貌,包括数据产生的...

2018-05-31 15:59:14

阅读数 128

评论数 0

sqoop的安装手册完整版

约定: 本次安装测内容1,  SQOOP 从 数据库中导入数据到HDFS2,  SQOOP 从 数据库中导入数据到HIVE3,  SQOOP 从HIVE中将数据导出到数据库 版本:sqoop-1.4.6 SQOOP2的版本,性能不太稳定。 下载安装文件链接:https://pan.baidu.co...

2018-05-31 15:36:39

阅读数 144

评论数 0

SQOOP的安装手册

约定: 本次安装测内容1,  SQOOP 从 数据库中导入数据到HDFS2,  SQOOP 从 数据库中导入数据到HIVE3,  SQOOP 从HIVE中将数据导出到数据库 版本:sqoop-1.4.6 SQOOP2的版本,性能不太稳定。 下载安装文件下载网盘:链接:https://pan.bai...

2018-05-31 15:29:49

阅读数 68

评论数 0

HIVE的分区和分桶

分区与分桶分区一个分区就是一个目录,但是分区是有上下级关系的。并不是同级的。sex=1/age=18sex=1/age=19sex=0/age=18sex=0/age=19select *from t_user where sex=1 and age=18 select *from t_user ...

2018-05-31 14:54:45

阅读数 226

评论数 0

程序媛眼中的区块链,从技术角度了解区块链

区块链是当下最热门的一个技术,可区块链究竟是什么,有什么作用。未来的发展趋势会怎么样呢?下面,简单介绍一下区块链。以下的分享内容是请科多大数据的一个程序媛朋友的心得,希望对大家有帮助 如果说比特币是对传统货币的一种颠覆,那么比特币的基础技术——区块链则是对传统编程范式的一种颠覆。 区块链技术被看作...

2018-05-30 14:47:59

阅读数 206

评论数 0

数据分析前景如何,如何规划学习路线

不少朋友因为数据分析师的前景、政策等都非常好,想要转行大数据,进入大数据行业。在开始学习大数据之前,你需要了解下数据分析都学了哪些内容。首先看下这张图:从前几年到现在的大数据时代,移动互联网、物联网、云计算、人工智能、机器人、大数据等前沿信息技术领域,逐个火了一遍,什么是大数据,大数据的技术范畴包...

2018-05-30 14:31:04

阅读数 3413

评论数 0

小白认识区块链,通俗易懂的讲给你听

最近一段时间比特币、以太坊等虚拟货币价格都在不断上涨,可谓是屡创新高,很多局外人看着眼红,也都开始跑步进场,如果是投资分析师估计就会开始提示泡沫的风险了,当然我不是投资分析师,所以关于币价未来的走势我不敢妄加评论。但是很多想要进行虚拟货币投资的人经常跑来问我,钱包选哪个,私钥和地址是什么,如何转账...

2018-05-30 14:14:53

阅读数 1312

评论数 0

SPARK的安装与部署

Spark 1.6.0 单机安装配置一、       约束条件如下Spark runs on Java7+, Python 2.6+ and R 3.1+. For the Scala API, Spark 1.6.0 uses Scala 2.10. Youwill need to use a ...

2018-05-29 16:36:28

阅读数 267

评论数 0

HIVE当中的关联查询

在hive中没有外键和主键之分。但是可以进行多表关联查询(值关联)。只要这两个值相等就可以作为关联条件,其实在mysql中也是支持。mysql中的关联查询left join 左连接right join 右连接innerjoin  全连接、内连接============t_userid name1 ...

2018-05-29 15:34:52

阅读数 2002

评论数 1

一文学会伪分布式的搭建

hbase的安装模式:1、本地模式:存储路径在本地(只有一台服务器来提供服务)   hbase.rootdir:hbase的相关的内容(数据)存储在什么位置   hbase.zookeeper.property.dataDir:zookeeper有一个节点(数据)应该存储在什么位置。因为默认是存储...

2018-05-29 15:03:46

阅读数 66

评论数 0

HIVE的数据类型与创建数据库

hive的数据类型:基本数据类型一般情况下,只存储一个值(理解为同其它数据库的数据类型,或者在一般使用时,就按照普通的数据库的类型使用,string-varchar)集合类型是可以存储多个值常用的只有三类:Array:数组(和java一样)name  likes      agezs [乒乓球,篮...

2018-05-29 14:30:13

阅读数 288

评论数 0

入门数据分析,从python开始

Python是目前学习数据分析课程中,非常重要的一块,也是目前非常受行业欢迎的。因此,学习非常重要,下面是Python学习的一些重要步骤和知识!    步骤1:熟悉Python    对数据科学,Python和R都是不错的编程语言选择。R在学术界往往更受欢迎,而Python更受行业欢迎,两种语言都...

2018-05-28 17:20:54

阅读数 807

评论数 0

简单学会安装zookeeper

zookeeper的安装,之前不太会,请教了科多大数据的马老师之后,现在完全OK ,分享给你们zk的安装需要在三台服务器上安装向在某一台上安装好之后通过scp的方式发送到其它主机进入到conf目录:/keduox/zookeeper-3.4.9/conf修改配置文件名称:mvzoo_sample....

2018-05-28 16:58:52

阅读数 68

评论数 0

java编写MapReduce

很多朋友不清楚如何用java来编写MapReduce,今天小编整理了科多大数据马老师提供的相关资料,希望大家有帮助首先,创建一个类为WordMap需要继承org.apache.hadoop.mapreduce.Mapper类,该类有四个泛型(in key类型,in value类型,outkey类型...

2018-05-28 15:19:14

阅读数 1465

评论数 0

HBASE命令的简单操作

大数据技术中,hbase是必不可少的一门技术,首先感谢科多大数据武老师详细的讲解和总结,希望对大家有帮助1、创建一张表create 表名,列族名create't0','cf01'  --把单引号去掉?           undefined local variable or method`t02...

2018-05-26 16:18:10

阅读数 56

评论数 0

大数据集群搭建服务器配置

刚接触大数据的时候,首先是想办法搭集群,而是在服务器配置上,总会出现很多问题,今天我将我将我在科多大数据配置服务器的经验分享给大家,希望对你们有帮助1、准备四台主机ip地址  主机名192.168.200.151    kd01 2G192.168.200.152    kd02 2G192.16...

2018-05-26 16:05:41

阅读数 4453

评论数 0

python运算符,python编程入门须知

运算符的知识主要是分为以下几点:1、算术运算符2、比较(即关系)运算符3、赋值运算符4、逻辑运算符5、位运算符6、成员操作符7、标识操作符一、算术运算符算数运算符,顾名思义就是进行加减乘除等算术运算符以下假设变量: a=10,b=20:举个例子二、比较(即关系)运算符比较(即关系)运算符,就是对输...

2018-05-26 16:00:22

阅读数 42

评论数 0

零基础学习python,python编码规范(二)

前面和大家分享了python的环境安装,今天简单介绍下python的编码Python标识符:和其他语言基本一致,标识符是包括变量名在内的,由我们自己定义,或者程序内置的具有一定意义的逻辑符号。标识符是由字母,下划线,数字构成。其中数字不能放首位,举个栗子:有效标识符 __alala  a1b2_2...

2018-05-26 11:56:07

阅读数 49

评论数 0

零基础入门python,第一步python环境安装

很多朋友想要系统的学习python,那么从今天我将我学习python的过程分享给大家,希望对你们有帮助。我也是零基础非科班转行学习的,可能很多朋友和我的经历有异曲同工之处,我们一起共同进步吧当然,介绍之前,还是要感谢科多大数据公司,在我学习的过程中提供的支持和帮助!学习python的第一步就是要把...

2018-05-26 11:17:56

阅读数 727

评论数 0

提示
确定要删除当前文章?
取消 删除