大数据行业
CDA·数据分析师
分享数据分析和人工智能领域的干货或外文翻译,囊括数据挖掘、数据分析、大数据分析、机器学习、深度学习、神经网络、算法工程、AI科技。还有职场经验交流、时代热门资讯,以及人生的点点滴滴。望大家一起努力,成为更好的自己!
展开
-
转行大数据分析领域都有什么岗位?
很多人看到了大数据行业的火热,以及大数据分析工作者的可观薪资,都想转行去从事大数据分析领域的岗位,但是他们对于大数据行业的职位并不是很了解,我们在这篇文章中给大家介绍一下大数据分析领域的岗位的实际情况,希望这篇文章能够给想转行大数据的朋友带来帮助。其实大数据行业就业领域很广,不管什么性质的公司,只要你想长期发展,都会有一个大数据岗位。大数据岗位有很多,我们在这篇文章中重点给大家讲一讲Hadoo...原创 2019-01-18 16:13:36 · 831 阅读 · 1 评论 -
给想进入大数据行业的朋友的建议(一)
现在很多人都想进入大数据行业,不过想进入这个行业并不是容易的,不但需要学会很多知识,还要培养很多的思维方式。今天我们在这篇文章中给那些初入大数据行业的朋友一些建议,在这里小编就不再给大家说大数据相关的知识了,而是对于相关问题的解答,这样我们就能够让大家知道自己精确的定位,以便于找到合适的方向深入学习。在大数据的学习中,我们需要了解两个问题,第一个问题就是大数据领域到底包含了哪些东西?解决了哪些...原创 2019-01-14 13:55:42 · 553 阅读 · 0 评论 -
给想进入大数据行业的朋友的建议(二)
我们在上一篇文章中给大家介绍了大数据中的各个环节的普及内容,大数据的环节有数据的收集、数据的传输、数据的转换、数据的清洗、数据的储存、数据的二次加工、数据的挖掘、数据的统计、数据的上层应用输出。今天我们在这篇文章中给大家介绍一下大数据的第一个环节,那就是数据的收集。在数据的收集阶段,数据主要有4种存在方式,它们分别是第三方开放数据集、业务数据、服务日志、行为上报数据,下面我们就给大家详细大家的...原创 2019-01-14 14:05:55 · 228 阅读 · 0 评论 -
给想进入大数据行业的朋友的建议(三)
我们在上一篇文章中给大家介绍了数据的收集需要学到的知识,想进入大数据行业需要学的知识还有很多。今天在这篇文章中我们给大家介绍数据的传输以及数据的储存方面需要学的知识。在数据的传输方面,我们需要知道数据的传输到底在什么时候开始呢?在上一篇文章中我们给大家介绍了数据上报,在大数据模式下,通常上报过来的数据因为涉及到不同部分其效率不一样,都不会马上执行的,所以,数据的传输在大数据领域中有着不可替代的...原创 2019-01-14 14:29:43 · 231 阅读 · 0 评论 -
给想进入大数据行业的朋友的建议(四)
我们在上一篇文章中给大家介绍了有关大数据行业的数据传输方面以及数据储存方面的相关知识,当我们了解了数据的传输知识以及数据的储存方面的知识,我们就需要知道数据的二次加工知识,下面我们就给大家解答一下这些内容。大数据中的数据二次加工就是基于Hadoop的MR框架以及Spark,当然,也有其他的一些分布式数据处理框架。而大规模的数据清洗转换、再加工,都离不开分布式处理框架的支持。这就需要我们对杂乱的...原创 2019-01-14 14:38:29 · 430 阅读 · 0 评论 -
给想进入大数据行业的朋友的建议(五)
我们在前面的文章中给大家介绍了走进大数据行业需要解决的第一个问题,就是大数据的领域范围。今天我们在这篇文章中给大家介绍第二个问题,就是如何做出选择,只有做出正确的选择,我们才能够做好大数据中的工作。在我们面对第一个问题的时候,如果我们对于整个流程有足够熟悉的情况下,这个选择就会容易很多。这就需要我们清楚每个节点需要哪些技术储备,这个节点到底负责哪些事务,在整个数据生态中起到什么样的地位。同时结...原创 2019-01-14 14:46:15 · 343 阅读 · 0 评论 -
给想进入大数据行业的朋友的建议(六)
我们在前面的文章中给大家介绍了进入了大数据领域建议学习的两种基础,它们分别是有良好的算法理论基础,以及在大数据处理领域有足够的数据处理经验,下面我们针对这两个基础给大家解答一下以下这些问题。算法基础一般就是需要相对较高的学历以及对口的在校研究方向,而在大数据处理领域有足够的数据处理经验,对业务场景足够清楚,对分布式框架和工具能够熟练使用。算法基础个工程化能力可能相对较弱,但可以专注于算法研究;...原创 2019-01-14 14:56:55 · 394 阅读 · 0 评论 -
大数据行业常用的软件工具有哪些?
我们都知道,要想让工作效率提高,有一个好的工具是很有必要的,这就是老祖宗所说的“工欲善其事,必先利其器”。这句话适用于任何工作,当然大数据也不例外,就目前而言,大数据越来越受到大家的重视,也逐渐成为各个行业研究的重点,如果想搞好大数据,那么就必须好好选择工具。当然,大数据行业因为数据量巨大的特点,传统的工具已经难以应付,所以我们要选择一个合适的工具,那么大数据常用的软件工具有哪些呢?下面我们就给...原创 2019-03-04 17:21:36 · 510 阅读 · 0 评论