- 博客(14)
- 收藏
- 关注
RSS订阅原创 功能丰富的hbase，应用时需要分清不同的场景
大数据的概念在2018年火爆的非常彻底，各个行业、各个领域都在不断的加快对大数据的应用。当然，就大数据的技术本身而言，为了更快、更高效的处理BIG DATA，hbase的应用就场景就非常值得关注。如今，上至世界500强企业，下至中小型实体店都开始借力大数据来实现自身更加快速的发展，那么对于大数据中的重点内容——hbase，在其实际应用中又该如何分清场景呢？对于如何分清hbase的应用场...
2018-09-05 17:24:53
321
原创 简单分析Oozie，了解大数据丰富而系统的内涵
大数据的概念丰富而系统，正如很多人认识的那样，大数据并不是一个单纯的概念，并不像java、python那么单一，其内涵非常的丰富。Oozie作为大数据开发中的一个重点，无论是对于企业还是个人都无法忽视，所以，我们不妨来简单分析一下oozie。第一、oozie的基础概念Oozie在英语中的释义指的是：驯象人，驭象者（多指缅甸那边的俗称），这个比喻相对与它的功能来说，还是很恰当的。是服务于...
2018-09-04 16:28:34
442
原创 大数据中的flume你了解多少？其概念和特点你知道吗？
对于大数据所包含的概念，相信很多人都无法忽略flume，但对于这个大数据中的必不可少的项目，你了解多少呢？关于flume中的概念和特点你知道多少呢？首先：我们先来了解flume的概念flume是分布式的日志收集系统，把收集来的数据传送到目的地去。flume里面有个核心概念，叫做agent。agent是一个java进程，运行在日志收集节点。而agent里面包含3个核心组件：source、...
2018-08-29 16:42:55
1822
原创 老生常谈，hdfs大数据开发中的重点内容
但大数据的价值在各个领域展现之后，时代的聚光灯就不曾在大数据身上挪移，而且，伴随着大数据影响力的逐渐增强，越来越多的人开始涌入到这个领域，当然，越来越多的人也开始逐渐的认识到HDFS在大数据中扮演的角色，而这也就引发了一个老生常谈的话题，HDFS的究竟是什么？为什么受到众人的追捧？首先，我们还是先来了解一下究竟什么是HDFSHDFS是单词的缩写，将其还原的话就是Hadoop Distr...
2018-08-28 16:22:18
412
原创 Scala是一种别出心裁的IT语言，在大数据领域更显优势
大数据的快速发展正在各个行业发酵，当然也在影响着各个行业的快速发展。在大数据的概念当中，scala作为一种新式的IT语言，其可以说在通过一种别出心裁的方式展现着更加强大的优势。Scala这个“大猪蹄子”似乎与其他开发语言并不相似，如果你粗略浏览Scala的网站，你会觉得Scala是一种纯粹的面向对象编程语言，而又无缝地结合了命令式编程和函数式编程风格。这种低调且尽显内涵的方式，让scala...
2018-08-27 16:46:14
3194
原创 kafka处理流式数据的利器，打破传统数据处理模式
对于大数据概念中的kafka相信很多人都不会很陌生，而一提到大数据kafka的概念，我们就不难会想到kafka是处理流式数据的利器。Apache Kafka（简称 Kafka）是由 Apache 软件基金会开发的一个开源流处理平台，也是一种以高性能、高吞吐量等特性而著称的分布式发布订阅消息系统，主要用来解决应用解耦、异步消息、流量削峰等问题。它可以处理消费者规模的网站中的所有动作流数据，并...
2018-08-25 16:31:43
2741
转载 划重点：大数据MapReduce，你应该系统化的学习和了解
IT科技的内涵在不断的丰富，如今，如今伴随着大数据技能出现和不断升级，各个行业、领域对于大数据的关注度也开始不断的增强。在大数据技术当中MapReduce的重要性不言而喻，那么对于MapReduce的概念，执行流程等概念你了解多少呢？首先，我们来简单的了解下什么是MapReduceMapReduce 是由谷歌推出的一个编程模型，是一个能处理和生成超大数据集的算法模型，该架构能够在大量普...
2018-08-24 17:01:13
606
原创 划重点，大数据中的spark-core究竟有哪些含义？
大数据作为当下做火热的新科技，其内容受到了来自各个领域的关注。在大数据的内涵中sapr是无法避免的重点，那么对于spark core你了解多少呢？其实，spark core包括各种spark的各种核心组件，它们能够对内存和硬盘进行操作，或者调用CPU进行计算。毕竟，SparkCore是Apache Spark的核心，是其他扩展模块的基础运行时环境，定义了RDD、DataFrame和DataSet。...
2018-08-22 15:53:18
1176
原创 敲黑板，大数据重点之scala你了解多少？
大数据如今可以说是各个行业争相追捧的香饽饽，其强大的功能和特点，引发了整个市场的变动，促使各个企业都在如火如荼的进行大数据方面的建设。而谈到大数据，就不得不提其概念中说包含的scala，那么对于scala而言你了解多少呢？其实，互联网上关于scala的解释并不少，这里只是简单的分一下其概念，希望对大家有所帮助。首先，scala是一门多范式的编程语言设计初衷是实现可伸缩的语言、并集成...
2018-08-21 17:30:32
372
原创 大数据开发之hbase的特点及应用场景详解
大数据的概念还在不断的发酵，进入这个领域的人也越来越多，大数据开发可以说是方兴未艾。而在大数据的领域内hbase的概念就成为了企业和求学者都需要关注的一个重点，那么关于hbase的特点及应用场景你们了解多少呢？首先、我来了解hbase的概念HBase是Apache Hadoop中的一个子项目，Hbase依托于Hadoop的HDFS作为最基本存储基础单元，通过使用hadoop的DFS工具...
2018-08-15 15:40:56
4841
3
原创 大数据中的hbase是什么？有哪些特点？
与2018年夏季天气同样火爆的就属大数据了，作为一个可以敢和太阳肩并肩的新事物，大数据火爆、受人关注，在各个领域都有实际的应用。如今，无论是企业、商家还是个人对于大数据的关注都丝毫没有降低，那么对于大数据这个新兴高科技产物，你对hbase的了解有多少呢？首先，我们从概念上了解什么是hbaseHBase其实一个缩写，是Hadoop Database的简称，从问世之初，就为了解决用大量廉价...
2018-08-09 15:17:42
9521
原创 浅析大数据mvc架构，不要忽略大数据中的任何一个知识点
对于大数据开发需要用到架构，这一点相信大家都了解，但是，对于框架的概念你了解多少呢？在大数据中有一个叫做mvc架构的，你知道其具体的含义和应用场景吗？对于架构其实业界并没有准确的解释，最初架构的含义来源于建筑行业，是建筑行业施工的图纸，旨在确定方向和加快建设的进程提高效率。而软件领域的架构主要体现在模块之间的「高内聚，低耦合」，这六个字听起来有点难以理解，其实通俗来讲就是单一职责的功能封装成模...
2018-08-08 15:08:27
291
转载 Kafka是大数据开发的支撑点，是不可忽视的重点内容!
随着大数据逐步的“接地气”，各种企业开始纷纷借力大数据来助力自己商业的发展，而与此同时，一大批的求职者也纷纷的开始进入到大数据开发领域，以期找到自己存在的价值，而在学习的过程中以及实际应用中，我们不难发现kafka的作用和价值越来越大。Kafka在企业的发展乃至各个行业的应用，都决定了其在未来必将受到更多的关注，那么对于企业和个人而言，该如何更加详细的了解kafka的概念及其影响力呢？...
2018-08-07 15:29:41
266
原创 Spark是大数据的重点，而rdd则是spark的重点
对于学习大数据开发的人而言，关于spark的认知、理解、应用就显得尤为重要，而在spark之中一个相当重要的点就是rdd，那么rdd究竟有哪些优点和特性，决定了其在spark中的地位呢？首先，我们来了解什么rdd它是Spark处理流程中的主要对象。RDD（resilient distributed dataset, RDD），即弹性分布式数据集，是一个容错的、并行的数据结构，可以让用户显...
2018-08-06 15:57:02
201
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人