- 博客(15)
- 收藏
- 关注
RSS订阅原创 大数据和人工智能AI的联系和区别
大数据和人工智能两个词是我们现在频繁听到的两个词汇，那么这两者之间到底有什么联系首先我们要了解到什么是大数据？什么是人工智能？大数据就是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。人工智能：人工智能（Artificial Intelligence），英文缩写为AI。它是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学。就定义来看我们并没有发现两者之间实
2020-10-30 16:29:48
4186
原创 大数据常用处理框架有哪些呢？
大数据要实现处理，需要专业的技术手段去实现，以Hadoop、Spark为首的一些计算框架，也已经在大数据处理当中，稳稳地占据一席之地。当然，在大数据当中，可用的计算处理框架不止于此。今天加米谷学院就来为大家介绍一些大数据常用处理框架。发展到今天，大数据处理主要分为两类大的需求，一是批处理，一是流处理。在企业的实际业务场景当中，可能会只需要批处理或者流处理，也可能同时需要批处理和流处理，这就使得搭建大数据系统平台的时候，需要根据具体场景来进行技术选型。大数据处理框架，通常可以分为三类——①批处理框架：
2020-10-19 17:58:46
3087
1
原创 大数据工程师做什么？需要掌握什么技能
大数据行业的火热，吸引着越来越多的人想要加入。作为IT互联网行业的新兴技术领域，又因为人才紧缺，所以薪资水平也在不断提高。以大数据工程师为例来说，薪资水平诱人。到底大数据工程师做什么，需要掌握什么技能，今天我们来具体了解一下。企业对大数据工程师的需求，往往是基于大数据业务的开展，在互联网高度发达的时代，每个企业都拥有自身的数据资源，这些数据资源要实现变废为宝，那就需要搭建起自身的数据系统平台。大数据工程师做什么？简单来说，大数据工程师需要负责创建和维护数据分析基础架构，包括大数据架构的开发、构建、维
2020-10-19 17:56:26
1226
1
原创 大数据学习——之制造业怎么应用大数据
我们知道，大数据的应用已经开始融入到我们生活的方方面面了，改变了我们的生活质量，提高了我们的生活水平。而现在随着大数据的逐步的应用与成熟，它现在改变的不仅是我们的生活方面，已将开始延伸到制造业开设慢慢的改变制造业了。按照这个形式互联网和大数据对我们的影响只会更深化，如果我们不懂、不看、不愿意接受这些的话只会逐渐淘汰。数据其实在制造业不算是一个新鲜的东西，换种方式说制造业算是我国最早运用数据作业的行业了。公差、工艺的状态、各类的标准，用数据来判断质量等全部都要用上数据。但是他们和我们现在的“大数据”相差甚远
2020-10-16 15:15:57
611
原创 大数据的价值体现——之衣食住行
大数据，又称巨量资料，其特点在于数据量大、速度快、类型多、和具有真实性。随着大数据时代的来临，大数据分析也因此而生。有句话不就是大数据分析比你自己更了解你嘛，这就足够体现出了大数据分析的价值，也是大数据的价值，因此大数据的价值也就在逐步呈现。那么大数据到底有什么价值呢？我们就从我们最接近的衣食住行开始讲讲叭~一、关于“衣”相信大家现在都特别喜欢网购，特别是像“双十一”、“双十二”这些相当于购物狂欢节要到来之前，大家肯定都在早早的把自己要买的东西，开始搜索加入购物车。就好像节日提前到来了一样，我竟然觉
2020-10-16 11:47:48
1047
原创 程序员如何更好的提升自己
首先你得明白，一个人的能力就像一个池塘，不断的输入又不断地输出，水池的容量以及水的质量决定了输出的高效与否，输入大于输出，你的池塘就会不断扩大，换句话说你会的技能就越来越多，只输入不输出，你的池塘就是一滩浑浊不堪的死水，一实操就bug满屏。所以想要提升自己，就得同时做好输入和输出这两块。而输入又在输出之前，要想提升自己，首先就得做好输入，学习更多的深度知识。总之，程序员要想学习效率高，学习效果好，只需要做好下面两点最基础的事情：·学习基础知识·巩固基础知识其中学习基础知识，又有两点要注意的：找对方
2020-10-15 14:59:51
1302
1
原创 Flink 资源管理机制
基本概念1.1 相关组件我们今天介绍的主要是与 Flink 资源管理相关的组件，我们知道一个 Flink Cluster 是由一个 Flink Master 和多个 Task Manager 组成的，Flink Master 和 Task Manager 是进程级组件，其他的组件都是进程内的组件。图 1. Flink 资源管理相关组件如图 1 所示，一个 Flink Master 中有一个 Resource Manager 和多个 Job Manager ，Flink Master 中每一个 .
2020-10-15 14:03:50
161
原创 搭建大数据平台具体的流程和步骤
面对海量的各种来源的数据，如何对这些零散的数据进行有效的分析，得到有价值的信息一直是大数据领域研究的热点问题。大数据分析处理平台就是整合当前主流的各种具有不同侧重点的大数据处理分析框架和工具，实现对数据的挖掘和分析，一个大数据分析平台涉及到的组件众多，如何将其有机地结合起来，完成海量数据的挖掘是一项复杂的工作。在搭建大数据分析平台之前，要先明确业务需求场景以及用户的需求，通过大数据分析平台，想要得到哪些有价值的信息，需要接入的数据有哪些，明确基于场景业务需求的大数据平台要具备的基本的功能，来决定平台搭建过
2020-10-14 14:09:07
7033
原创 大数据学习——之探索中国米其林餐厅
首版北京米其林指南在 2019 年 11 月 28 日 发布了，但却引起了不小的争议。不少北京网友认为在家门口都不会去的餐厅竟然被评为米其林？这是翻车指南吗？「米其林」的百度搜索指数在11月28日达到近半年内的最高点。毫无疑问是由于北京米其林指南的发布引发了一波关于「米其林」的搜索浪潮。比较有趣的是，虽然是关于北京米其林指南发布导致的热度，但从搜索地域上来看，该关键词搜索指数最高的地区是「广东」。这或许是广东地区对「美好食物」相关的渴望与向往。关于文章所使用的数据均来自米其林指南App，通过Ch.
2020-10-14 11:42:43
515
原创 Java学习：Java学习到什么程度可以进行面试
作为最受欢迎的编程语言，Java简直是IT领域的敲门砖，只要精通Java语言，找到好工作，进入大企业又多了一层保障。很多人都向往Java编程的广阔就业前景，却苦于不懂Java编程知识，学习Java到什么程度可以面试呢，掌握Java基础、计算机基础知识，并且是非常熟练地掌握，你需要深入理解每一个知识点，因为面试官会不断深入地向你提问，了解你的知识深度，同时，你需要对源码有所理解，在读懂源码的基础上去理解框架的实现、JDK的实现。另外，你需要对JVM有一个清晰的认识，不仅要了解其结构，垃圾回收原理，甚至还要
2020-10-14 09:47:23
423
原创 零基础学习Hadoop应该如何学习
Hadoop是一个由Apache基金会所开发的分布式系统基础构架。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。他的目的是从单一的服务器扩展到成千上万的机器，将集群部署在多台机器，每个机器提供本地计算和存储。Hadoop框架最核心的设计是HDFS和MspReduce。关于Hadoop，首先我们需要了解Hadoop 1.0、Hadoop 2.0、MapReduce、HDFS、NameNode、DataNode、JobTracker、TaskTracker、Ya
2020-10-13 14:01:23
394
原创 大数据培训学习效果好吗
1、目前公众对于大数据的了解和认知还停留在大数据的概念上什么是大数据？大数据时代，什么叫大数据分析，大数据是什么意思等等这些词是被大众最多搜索的。可以判断目前非大数据行业内人士对大数据的认知严重不足。2.大数据培训从大数据培训关注人群来看主要是分布在30-39岁，而这个年龄段的人已经不适合学习大数据技术了，最适合学习大数据技术的20-29岁之间的人群关注度却不是很高，只能排在第三名。从目前的数据来看，不论你是从大数据培训机构的角度还是学员的角度来看大数据培训，未来都是光明的。1.从培训机构角度来说
2020-10-13 11:09:22
701
原创 0基础大数据学习：数据挖掘的作用
在大数据准确营销和大数据洞察力等一系列热门词汇的背后，数据挖掘和分析技术在各行业发挥着重要作用，随着数据资源的爆炸性增长，数据挖掘技术不仅成为政府部门提高治理能力的重要手段，而且成为提升各行业核心竞争力的关键。一、数据挖掘的定义数据挖掘（Data Mining）是指通过大量数据集进行分类的自动化过程，以通过数据分析来识别趋势和模式，建立关系来解决业务问题。换句话说，数据挖掘是从大量的、不完全的、有噪声的、模糊的、随机的数据中提取隐含在其中的、人们事先不知道的，但又是潜在有用的信息和知识的过程。二、数据
2020-10-13 11:02:15
333
原创 程序员转行做大数据有什么优势？
我们现在经常听见的词汇就是“大数据时代”，大数据时代，显而易见就是大数据已经成为我国乃至全球的的一股热潮，面对大数据的崛起，中国IT环境也将面临重新洗牌，这不仅仅是企业，更是程序员们转型可遇而不可求的机遇。国内大多数大型互联网公司的程序员被称作研发工程师，但实际上国内几乎没有研发项目，只能叫做开发。开发程序员的工作大多是重复性劳动，容易产生疲惫感，薪资在工作2-5年内就达到了一个峰值，再要提升就比较困难，这样就导致了很多程序员最终转行做了其他行业。JAVA的精密，强大，拥有其它语言不可替代的性能和可维护
2020-10-12 14:03:55
289
原创 自学Java怎么入门
自学Java怎么入门Java是一种可以撰写跨平台应用程序的面向对象的程序设计语言。Java 技术具有卓越的通用性、高效性、平台移植性和安全性，广泛应用于PC、数据中心、游戏控制台、科学超级计算机、移动电话和互联网，同时拥有全球最大的开发者专业社群。所以想要做java开发，java基础最需要下功夫的一项，只有打好了基础后面的才会变得容易。那么想要有扎实的基础我们应该怎么做呢？1.想要基础扎实，看书沉淀是必须的，有一些编程基础的同学推荐阅读《JAVA核心技术 卷1》，可以跳过图形程序设计、事件处理、Swi
2020-10-12 11:36:55
144
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人