- 博客(83)
- 收藏
- 关注
RSS订阅原创 完整的大数据知识体系，大数据学习路线图
已经火了很久了，一直想了解它学习它结果没时间，了解了一些资料，结合我自己的情况，整理了一个学习路线。谈起零基础学习大数据，有几点建议，先给大家说一下：虽然大数据的前景让我们为之着迷，但一定不要被金钱蒙蔽了双眼。大数据说实话，真的是一门复杂枯燥的技术，没有很深的兴趣爱好，很少有坚持下来的。大数据，不高深，但也不简单；不难学，但也需要时间和耐心。在学习大数据之前，一定要坚定自己的信念，不要趋之...
2019-10-08 11:15:32
874
原创 从0到1详解推荐系统中的大数据开发学习方法都讲明白了
大数据具有五大特点，称为5V。1. 多样（Variety）大数据的多样性是指数据的种类和来源是多样化的，数据可以是结构化的、半结构化的以及非结构化的，数据的呈现形式包括但不仅限于文本，图像，视频，HTML页面等等。2. 大量（Volume）大数据的大量性是指数据量的大小，这个就是上面笔者介绍的内容，不再赘述。3. 高速（Velocity）大数据的高速性是指数...
2019-10-07 12:07:17
422
原创 大数据入门学习，你要掌握这些技能
将此文献给对数据有热情，想长期从事此行业的年轻人，希望对你们有所启发，并快速调整思路和方向，让自己的职业生涯有更好的发展。根据数据应用的不同阶段，本文将从数据底层到最后应用，来谈谈那些数据人的必备技能。1、大数据平台目前很火，数据源头，各种炫酷新技术，搭建Hadoop、Hive、Spark、Kylin、Druid、Beam~，前提是你要懂Java，很多平台都是用Java开发的。...
2019-10-02 12:51:05
317
原创 大数据全系技术概览
什么是大数据？大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用随机分析法（抽样调查）这样捷径，而采用所有数据进行分析处理。大数据的5V特点（IBM提出）：Volume（...
2019-09-29 17:19:52
679
原创 大数据路线我是这样学习的>>>大数据路线
大数据技术学习路线图大数据技术成为很多领域的必需工具，就像现在很火爆的人工智能、区块链、云计算等等都是与大数据技术息息相关。很多人都将学习大数据技术纳入自己的学习列表之中。但对于学习来说，重要的是有一个系统的学习规划，才能避免从入门到放弃的结局。要点导航第一章：初识Hadoop第二章：更高效的WordCount第三章：把别处的数据搞到Hadoop上第四章：把Hadoop...
2019-09-28 13:11:29
253
原创 计算机小白大数据学习线路图
人们常说毕业三五年后就可以看出一个人的未来。工作三五年后有人月收入过万，开始在老家买房;有人零存款，继续每天租房的生活。不是后者不拼搏，只是入错了行而已。现在有一个行业“薪”机炸裂，可以迅速帮你“脱贫”，你会抓住这个机会吗?没错，我们说的就是大数据行业。 首先，来看看大数据有多火吧。近几年，大数据不仅被纳入谷歌、阿里巴巴等互联网公司的战略规划中，同时也在我国和其他国家的政府报告中多...
2019-09-27 11:50:50
120
原创 怎么还在纠结学Java还是python，未来大数据才是王道
未来大数据产业发展的趋势之一：与云计算、人工智能等前沿创新技术深度融合。大数据、云计算、人工智能等前沿技术的产生和发展均来自社会生产方式的进步和信息技术产业的发展。而前沿技术的彼此融合将能实现超大规模计算、智能化自动化和海量数据的分析，在短时间内完成复杂度较高、精密度较高的信息处理。比如阿里巴巴的电子商务交易平台能在双 11 当天完成每秒钟 17.5 万笔订单交易和每秒钟 12 万笔的订...
2019-09-23 14:44:35
209
原创 给初学大数据的你，被誉为全网最系统的大数据学习
一份专业的大数据学习资料才是学习大数据的利刃。大数据学习资料之大数据学习大纲转行大数据需要学习的知识点想要在大数据这个领域汲取养分，让自己壮大成长。分享方向，行动以前先分享下一个大数据交流分享资源群870097548，欢迎想学习，想转行的，进阶中你加入学习。1、Java编程技术Java编程技术是大数据学习的基础，Java是一种强类型语言，拥有极高的跨平台能力，可以编...
2019-09-22 17:51:18
142
原创 2019最新丶最全系统学习路线零基础如何转行大数据 内附教程分享
都知道大数据薪资高，前景好。而大数据又需要Java基础。对于稍微懂些Java的童鞋来说，到底如何转行大数据呢？今天小编给你一个大数据工程师具体的学习路线图。【ps：无java基础也可以学习大数据】分享转行经验路线对于Java程序员，大数据的主流平台hadoop是基于Java开发的，所以Java程序员往大数据开发方向转行从语言环境上更为顺畅，另外很多基于大数据的应用框架也是Java的，所...
2019-09-21 16:06:43
270
原创 大数据知识体系大全---零基础如何学习大数据技术？
在我学习和从事大数据相关工作的4年里，在我有限的知识海洋里，大数据是一个以数据流向为主的链条或管道，数据从何而来，又去往哪里，不仅是哲学上的一个问题，也可以在做数据工作的时候考虑这个问题。如下图所示，大数据领域可以分为以下几个主要方向，而这几个方向又可以分别对应一些工作职位：想要在大数据这个领域汲取养分，让自己壮大成长。分享方向，行动以前先分享下一个大数据交流分享资源群8700975...
2019-09-20 14:01:48
295
原创 大数据技术Hadoop入门理论系列之一----hadoop生态圈介绍
1. hadoop 生态概况Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。具有可靠、高效、可伸缩的特点。Hadoop的核心是YARN,HDFS和Mapreduce下图是hadoop生态系统，集成spark生态圈。在未来一段时间内，hadoop将于spark共存，ha...
2019-09-17 14:36:03
182
原创 2019，码农转型大数据开发有必要吗？有前景吗？
没有什么是亘古不变的，就像手机软件的不断更新迭代一样，陈旧的事物终将会被取代。相比于十年前程序员“高需求、高薪资、高难度”的三高状态，到如今，也开始逐渐被打破。虽然在科技时代，码农几乎永远不会失业，但随着新技术的产生，如果不去提升自己，那么你将会被取代。 从去年开始，相信很多的码农，都看到了各类关于大数据的信息。新闻、自媒体、科技媒体等都在对它进行解读。各个大型的互联网公司，...
2019-09-16 12:58:55
696
原创 转岗！用自己的经历告诉你们，java开发转型大数据开发之路
众所周知，这两年IT行业最火的词是什么，毫无疑问是大数据。我从16年的时候从java开发岗位学习之后转学习大数据然后跳槽，算是比较早学习大数据的一批了。所以经常有同学问我关于大数据如何自学，有什么高效的学习线路，从java转大数据，初期如何找工作，这里我就说一下我自己的情况，算不上什么经验之谈，如果你有这样的困惑，那可以花几分钟看看。想要在大数据这个领域汲取养分...
2019-09-15 14:25:48
1597
1
原创 大数据开发工程师需要具备的技能有哪些
随着互联网的发展，越来越多的人投入到IT行业，而大数据开发工程师也因此成为一个比较热门职业，想要成为大数据开发工程师的你，是否又在考虑其该具备哪些技能呢?为了让你更好的了解大数据开发工程师需要具备的技能。 很多人好奇学习大数据需不需要学Java，正确答案是需要。一方面Java是目前使用最为广泛的编程语言，它具有的众多特性，特别适合作为大数据应用的开发语言;另一方面Hadoop以及其他大数据处...
2019-09-11 14:10:36
1644
1
原创 2019.程序员吸进榜来了，大数据学习之路（持续更新中...）
前言在学习大数据之前，先要了解他解决了什么问题，能给我们带来什么价值。一方面，以前IT行业发展没有那么快，系统的应用也不完善，数据库足够支撑业务系统。但是随着行业的发展，系统运行的时间越来越长，搜集到的数据也越来越多，传统的数据库已经不能支撑全量数据的存储工作；另一方面，数据越来越多，单机的计算已经成为瓶颈。因此，基于分布式的大数据系统崭露头角。那么大数据系统里面都有什么东西呢？...
2019-09-10 15:59:00
146
原创 新手学习大数据，怎么快速学好大数据开发？
首先，大数据技术是什么？简而言之，从大数据中提取大价值的挖掘技术。专业的说，就是根据特定目标，从数据收集与存储，数据筛选，算法分析与预测，数据分析结果展示，以辅助作出最正确的抉择，其数据级别通常在PB以上，复杂程度前所未有。关键作用是什么？挖掘出各个行业的关键路径，帮助决策，提升社会（或企业）运作效率。大数据技术包含的内容概述？非结构化数据收集架构，数据分布式存储集群，数据清洗...
2019-09-09 16:51:33
289
原创 大数据基础学习总结
我一直在向想转行做IT的朋友推荐去学习大数据，并不是说大数据学起来简单，而是从长远来看，大数据的发展前景十分乐观，各种机会以及相应回报也很多，掌握了大数据技术，就在IT行业站稳了脚跟。接下来我们就从几方面来说一说怎么学习大数据。大数据介绍大数据本质也是数据，但是又有了新的特征，包括数据来源广、数据格式多样化（结构化数据、非结构化数据、Excel文件、文本文件等）、数据量大（最少也是TB级...
2019-09-08 13:59:28
784
原创 零基础学习大数据开发技术需要哪些基础知识（1）Java、大数据基础
大数据给很多人的感觉是，专业性强，操作繁琐，属于“高大上”的技术。大数据人才供不应求，有一些人则看到了大数据带来的机遇，想通过专业的培训来学习大数据，那么大数据从0开始需要学习些什么内容呢？一、0基础学习大数据需要Java基础Java：开发需求最多的编程语言之一，可以从事网站开发、桌面程序设计、游戏开发、安卓后台开发、全栈开发等。它可以说是大数据最基础的编程语言，一是大数据的本质...
2019-09-07 14:00:20
613
原创 这份完整而又系统的大数据学习路线才适合未来的趋势
朋友不在于多，知心就好；资料不在于多，精致就好。一份专业的大数据学习资料才是学习大数据的利刃。大数据学习资料之大数据学习大纲转行大数据需要学习的知识点大数据是未来的发展方向，正在挑战我们的分析能力及对世界的认知方式，因此，我们与时俱进，迎接变化，并不断的成长!大数据学习群：8688///47735 一起讨论进步学习1、Java编程技术Java编程...
2019-09-06 12:00:10
162
原创 「大数据就业」大数据开发：成为大数据高级工程师都有哪些要求？
大数据平台研发高级工程师工作职责：1、负责建设公司大数据平台，为公司用户提供稳定、易用的大数据平台工具和便捷、酷炫的数据产品；2、参与并主导大数据平台工具链的设计、开发以及后续维护；3、参与数据产品的研发，助力数据商业价值的发掘；4、不断迭代优化已有大数据平台工具和数据产品，推动大数据平台的发展。岗位要求：1、全日制本科及以上学历，6年以上相关工作经验，扎实的Java基...
2019-09-05 18:26:00
947
原创 让你系统了解大数据，分享大数据学习路线、
一、大数据大数据又称巨量资料，就是数据量大、来源广、种类繁多(日志、视频、音频)，大到PB级别，现阶段的框架就是为了解决PB级别的数据。专业的来讲：大数据(big data,mega data)，或称巨量资料，指的是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。大数据的5V特点:Volume(大量)、Velocity(高速)、Va...
2019-09-03 14:17:29
191
原创 写给大数据开发初学者的话
经常有初学者在博客和QQ问我，自己想往大数据 方向发展，该学哪些技术，学习路线是什么样的，觉得大数据很火，就业很好，薪资很高。如果自己很迷茫，为了这些原因想往大数据方向发展，也可以，那么我就想问一下，你的专业是什么，对于计算机/软件，你的兴趣是什么？是计算机专业，对操作系统、硬件、网络、服务器感兴趣？是软件专业，对软件开发、编程、写代码感兴趣？还是数学、统计学专业，对数据和数字特别感兴趣。。...
2019-09-02 12:24:57
197
原创 深入浅出学习大数据：大数据发展战略趋势以及挑战！
今天向大家介绍大数据发展战略趋势以及挑战，全面了解大数据的来龙去脉。希望大家持续学习，每天关注，我会连续更新文章，让大家系统学习和认识大数据。一、大数据产业的战略地位及应用1.大数据产业的战略地位（1）国家级别的战略产业美国政府认为数据资源是继陆空海三大资源外的另一种重要的国家战略资源，已将大数据战略上升到国家层面，从2012年到现在为止提出了诸多促进大数据产业发展的宣言和计划...
2019-08-30 14:40:10
808
原创 大数据开发学习路径
目前，全球数据呈现爆发增长、海量集聚的特点。国家大力推动实施大数据发展战略，推进数据资源整合和开放共享，加快建设数字中国。大数据行业政策环境良好，发展机遇空前。但随着国家的重视，企业的转型，对大数据技术人才的要求也是越来越高，不是掌握一点皮毛就能就业了。毕竟现在的竞争压力还是很大的，企业的择优录取、学历、经验的缺乏等种种限制，对想要入行大数据的小伙伴都提出了超高的技术要求，想要弥补自身的不足，...
2019-08-29 13:49:35
247
原创 大数据基本概念
现如今，我们已经从互联网时代过渡到大数据时代。无论你对大数据知识了解多少，这个名词肯定不会陌生。今年年初开始接触大数据平台的相关测试，由于之前对大数据知识的积累并不多，所以测试期间也是恶补了许多大数据的知识。下面将总结的一些常见、易混淆的大数据相关概念分享给大家。什么是大数据大数据，官方定义是指那些数据量特别大、数据类别特别复杂的数据集，这种数据集无法用传统的数据库进行存储，管...
2019-08-28 14:22:11
638
原创 方向是大数据，零基础，从 python入手发展合适么？还是选择java更合适大数据？
今天为大家整理了部分大数据学习教程与大家共享，每个人可以根据自己的需要来选择，需要的小伙伴可以+下学习资料分享裙 199加上427最后是210数字连起来就是了。目前主流的大数据课程，都是从JAVA入手开始学习，学习课程中会加入python的课程，必竟现在主流使用的是以java为核心开发技术的hadoop框架。之后才会轮到pyton。这两年的趋势有向spark方向发展，所以现在也都...
2019-08-27 13:01:28
296
1
原创 目前大四，大数据方向研究生，这一年想为日后学习大数据打好基础，请问该自学什么？
大数据方向，这个方向...其实也算不上个方向...哎... 先说吧 ...如果你毕业了， 去个什么公司，应聘个“大数据开发工程师”什么的，我们来看看职位要求是什么：岗位职责：1、负责数据分析、监控、安全、风控等平台设计与开发2、责基于spark平台的用户行为分析、实时业务数据的开发3、采用统计分析、数据建模、数据挖掘等方法，提供有价值的数据、模型、算法支持岗位...
2019-08-26 13:26:13
2112
1
原创 大数据学习路线是什么 Hadoop学习有哪些阶段
大数据学习路线是什么?Hadoop学习有哪些阶段?Java基础让我对编程有了更好的认识，Hadoop学习让我走进大数据世界的大门，了解到大数据的用武之地。接下来我简单给大家分享一下Hadoop学习路线。在学习Hadoop时，主要分为两个阶段:第一阶段基础:Linux、第二阶段:Hadoop生态圈学习。在学习Linux时，第一步就是搭建整个机器的环境，安装centOS系统，安装完成时，有学习...
2019-08-23 17:30:27
470
原创 大数据入门没有头绪？这份总结的大数据学习路线希望你用得着
1、为什么要学习大数据？1.1，门槛它比 Java 高一点，因为除了对数据库的操作之外，要学习大数据生态的东西，需要会分布式、数仓、中间件等知识。它比机器学习低一些，不需要你会很多的机器学习算法和数学知识，而像机器学习算法和数学知识是需要长时间的磨练和沉淀，所以做这块的研究生和博士居多。无论是哪个学校的计算机专业，Java、数据、C、C++什么的都会接触到，但是大数据呢？第一...
2019-08-22 17:52:33
606
原创 大数据学习路线教程分享，共同学习，共同进步
一、大数据相关工作介绍大数据方向的工作目前主要分为三个主要方向:1. 大数据工程师2. 数据分析师3. 大数据科学家4. 其他（数据挖掘等）二、大数据工程师的技能要求附上大数据工程师技能图：必须掌握的技能11条1. Java高级(虚拟机、并发)2. Linux 基本操作3. Hadoop（HDFS+MapReduce+Yarn ）4. HBase...
2019-08-21 16:39:19
193
1
原创 没有基础学习大数据，先看下大数据的入门知识
首先，大数据的定义是什么？很多人都在说要进入大数据行业，要学习大数据技术，但往往对大数据都是一知半解，科多大数据先和大家来看看百度百科对大数据的定义：来抓重点，常规的软件工具处理不了的，就必须要用新的技术，那能解决以上问题的技术就是大数据技术。大数据的技术是一个技术群落，想全部学习短期内是不现实的，那么我们怎么样科学的有逻辑有规划的来学习，怎么进行大数据的入门学习呢？我们得...
2019-08-19 11:27:08
414
原创 想学习大数据却搞不懂Hadoop？腾讯工程师带你三步解读Hadoop！
一、什么是Hadoop？Google发表了两篇论文：描述如何以分布式方式存储海量数据的Google文件系统和描述如何处理大规模分布式数据的MapReduce：大型集群上的简化数据处理。受这两篇论文的启发，DougCutting实现了这两篇基于OSS（开源软件）的论文的原则，Hadoop诞生了。Hadoop是一个用于分布式存储和处理大型数据的开源平台。Hadoop作为一个大规模的分布式数据处...
2019-08-18 22:05:56
201
原创 这份被誉为全网最系统的大数据学习教程，最适合初学大数据的你
朋友不在于多，知心就好。资料不在于多，精致就好。一份专业的大数据学习资料才是学习大数据的利刃。小编分享的这套大数据学习资料将从学习大纲、书籍、视频教程分别分享。大数据学习资料之大数据学习大纲转行大数据需要学习的知识点1、Java编程技术Java编程技术是大数据学习的基础，Java是一种强类型语言，拥有极高的跨平台能力，可以编写桌面应用程序、Web应用程序、...
2019-08-17 17:53:52
298
原创 转行进入IT行业，0基础学习大数据开发需要具备什么基础？
IT行业发展速度快，市场需求大，而且，程序员薪酬高、福利待遇高，成为很多从业者向往的职业，当然，也刺激了很多非计算机专业的从业者进入该领域。转行进入IT行业在最近的几年一直是个热门，那么对于0基础的求学者，入行大数据开发需要什么基础呢？推荐下我自己建的大数据学习交流群:199427210，群里都是学大数据开发的，如果你正在学习大数据 ，小编欢迎你加入,大家都是软件开发党，不定期分享干货（只...
2019-08-16 12:12:55
192
原创 新人必须了解的大数据应用17个知识点汇总
一、大数据中的数据仓库和Mpp数据库如何选型?在Hadoop平台中，一般大家都把hive当做数据仓库的一种选择，而Mpp数据库的典型代表就是impala，presto。Mpp架构的数据库主要用于即席查询场景，暨对数据查询效率有较高要求的场景，而对数据仓库的查询效率要求无法做大MPP那样，所以更多地适用与离线分析场景。Hadoop已经是大数据平台的实时标准，其中Hadoop生...
2019-08-15 12:59:29
464
原创 学习大数据必须了解的大数据开发课程大纲
大数据开发最核心的课程就是Hadoop框架，几乎可以说Hadoop就是大数据开发。这个框架就类似于Java应用开发的SSH/SSM框架，都是Apache基金会或者其他Java开源社区团体的能人牛人开发的贡献给大家使用的一种开源Java框架。Java语言是王道就是这个道理，Java的核心代码是开源的，是经过全球能人牛人共同学习共同研发共同检验的，所以说Java是最经得住检验的语言，而且任何人都可...
2019-08-14 13:27:58
516
原创 大数据学习（一）完整的大数据知识体系，大数据学习路线图
将给各位大佬分享真正关于大数据的干货，小编目前也在学习中，希望和大家共勉吧！大数据的话题近几年是越来越火了，马云曾说：21世纪的竞争是数据的竞争，谁掌握数据，谁就掌握未来！多么痛的领悟。大数据是一个很庞大的只是体系，学习的过程很枯燥，需要大量的练习、记忆、思考，我也没想着在十天半个月给大家分享完它，因为我没这个能力，但是只要坚持，付出和回报总是成正比的。大数据是什么大数据 =...
2019-08-13 14:28:17
763
原创 大数据开发学习脑图+学习路线清晰的告诉你！月薪50K很轻松
近些年，大数据的火热可谓是技术人都知道啊，很多人呢，也想学习大数据相关，但是又不知道从何下手，所以今天柠檬这里分享几个大数据脑图，希望可以让你清楚明白从哪里入门大数据，知道该学习以及掌握哪些知识点；当然还有自学教程分享哦！大数据是未来的发展方向，正在挑战我们的分析能力及对世界的认知方式，因此，我们与时俱进，迎接变化，并不断的成长!大数据学习群：8688...
2019-08-12 14:12:37
368
原创 了解大数据，才能更好地学习大数据
大数据的话题近几年是越来越火了，马云曾说：21世纪的竞争是数据的竞争，谁掌握数据，谁就掌握未来！多么痛的领悟。大数据是一个很庞大的只是体系，学习的过程很枯燥，需要大量的练习、记忆、思考，我也没想着在十天半个月给大家分享完它，因为我没这个能力，但是只要坚持，付出和回报总是成正比的。大数据是什么大数据 = 编程技巧 + 数据结构和算法 + 分析能力 + 数据库技能 + 数学 + 机器学习 + ...
2019-08-11 14:49:06
460
1
原创 大数据之Spark 知识体系完整解读
Spark 简介Spark 是整个 BDAS 的核心组件，是一个大数据分布式编程框架，不仅实现了MapReduce的算子map 函数和reduce函数及计算模型，还提供更为丰富的算子，如filter、join、groupByKey等。是一个用来实现快速而同用的集群计算的平台。 Spark将分布式数据抽象为弹性分布式数据集（RDD），实现了应用任务调度、RPC、序列化和压缩，并为运行在其上的上层...
2019-08-10 14:45:34
210
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人