2018年08月_IT自学妹

转载大数据Hadoop2.x与Hadoop3.x相比较有哪些变化

在这篇文章中，我们将讨论Hadoop 2.x与Hadoop 3.x之间的比较。 Hadoop3版本中添加了哪些新功能，Hadoop3中兼容的Hadoop 2程序，Hadoop 2和Hadoop 3有什么区别？我们希望Hadoop 2和Hadoop 3之间的这个功能的区别将帮助回答上述问题。 Hadoop 2.x与Hadoop 3.x之间的功能比较本节将讲述Hadoop 2.x与H...

2018-08-29 16:00:22 19453

原创 java程序员不同阶段提升技能应该看哪些书籍

　　一、java入门类　　对于零基础的小白，想要成为程序员，从事开发相关的工作，java都是一个不错的选择。在这个阶段，你需要快速的掌握java的基本语法和用法，切记不可浑沦吞枣，一定要对java有深刻的认识，在看java语法和代码用法的时候要“知其然”。　　《java编程思想》　　　　当你对java有了初步的认识之后，要做的就是“为什么”，当你敲过一段代码之后要问自己，...

2018-08-26 09:33:23 2702

原创 java程序员，当你在迷茫的时候可以从这两方面提升自己

我们在标题里所说的java程序员一定是有java基础或者有开发经验的，像这类程序员一般从事的是java开发工作，每天面对的是成千上万的代码和永远改不完的需求和bug。相对于来说工作是比较枯燥、乏味的。这类程序员在工作一两年后会选择继续的提升自己，学习更加符合公司需求、社会发展的技术来充实自己，以达到职位或者薪资上的提升。那么他们应该学习哪些技术呢？其实提升的方向有很多，但是就目前的需求...

2018-08-19 10:14:52 326

原创大数据入门之zookeeper的功能及工作原理，完结版

本文接“上文”继续讲解zookeeper相关的技术点，所以序号接上文。想了解大数据其他知识点可以点击文章末尾“了解更多”查看11.分布式与数据复制Zookeeper作为一个集群提供一致的数据服务，自然，它要在所有机器间做数据复制。数据复制的好处：（1）、容错：一个节点出错，不致于让整个系统停止工作，别的节点可以接管它的工作；（2）、提高系统的扩展能力：把负载分布到多个...

2018-08-16 13:10:22 805

原创大数据入门之zookeeper的功能及工作原理，未完待续……

如果大家对大数据开发感兴趣，可以点击文章“了解更多”，了解和报名大数据免费学习交流课程！！！1.Zookeeper是什么？ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，它是集群的管理者，监视着集群中各个节点的状态根据节点提交的反馈进行下一步合理操作。最终，将简单易用的接口和性能高效、功能稳定的系统提供给用户。2.Zo...

2018-08-15 10:13:58 272

原创大数据开发中Spark架构运行详解及其优势详解？

一、Spark基本概念spark是一种分布式的计算框架。类似于大数据开发中Hadoop生态圈的MapReduce，计算思想和MR非常相似，两者都是分而治之的思想，但使用率要比MR高很多。在学习Spark运行架构之前，我们有必须要先了解Spark中几个基本概念。1、Application(应用程序)：是指我们编写的Spark应用程序，包含驱动程序(Driver)和分布在及群众多个节点上运...

2018-08-14 09:32:56 788

原创大数据开发中关于机器学习，需要掌握哪些知识点呢？

在我们平时的大数据开发工作中，机器学习也是经常用到的技能。相对于其他知识点，这部分的内容相对占的比重也是很高的。那么想要从事大数据开发应该掌握哪些机器学习的技术呢？大数据开发及架构师相关课程免费推广报名中，点击“了解更多”报名学习机器学习相关的知识点如下：1、机器学习介绍什么是机器学习、机器学习与人类思考的对比、简单的线性回归2、线性回归详解简单的线性回归多元现行回归...

2018-08-12 13:40:55 804

原创作为大数据开发中最重要技术，spark需要掌握哪些技能呢

图一Spark一个高速、通用大数据计算处理引擎。拥有Hadoop MapReduce所具有的优点，但不同的是Job的中间输出结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。它可以与Hadoop和Apache Mesos一起使用，也可以独立使用。欢迎小伙伴们评论、转发和收藏，了解更多大数据知识可以点击“了...

2018-08-09 10:33:21 928 1

原创一篇文章让你了解Hive和HBase的区别

相信做大数据开发的朋友对hive和HBase一定不会陌生。HBASE想了解更多大数据相关知识可以点击“了解更多”Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。HBase是Hadoop的数据库，一个分布式、可扩展、大数据的存储。单个的从字面意思上或许很难看出二者...

2018-08-07 09:41:38 116576 4

原创关于大数据hadoop的45个科普小知识

时至今日，Hadoop已成为最流行的离线数据处理平台，然而它的集群配置起来并不简单。如果你学习Hadoop不久，相信下面这45个问题会对你有所帮助。大数据和架构师相关课程可以点击“免费了解”在工作生活中，有些问题非常简单，但往往搜索半天也找不到所需的答案，在Hadoop的学习与使用过程中同样如此。这里为大家分享Hadoop集群设置中经常出现的一些问题，以下为译文：1.Hadoop集...

2018-08-06 14:22:03 348

原创关于大数据的你不能不知道的14个概念

感谢大家的阅读与评论【大数据架构师免费报名课程】获取相关资料可以加我微信免费领取：mipi946随着大数据技术的不断提高，大数据应用的不断普及，大数据与各行各业的关系越来越紧密。大数据行业充斥着大量的专业词汇，准确掌握和了解这些词汇的含义，有助于更好的理解大数据，更好地利用大数据技术。以下整理了以数据处理为中心的14个大数据专业词汇，一起来看看吧~~~本地数据库(LDB/Loca...

2018-08-01 11:14:00 301

wshyb0314的博客