大数据入门
文章平均质量分 78
数据工程师陈晨
从事大数据开发3年,现在经常使用的编程语言:Pyt hon,Java。
展开
-
基于大数据技术的电信客户流失预测模型 研究及应用 大数据
【摘 要】 为减少用户流失,提高用户保有率,文章介绍一种基于智慧运营平台,将大数据技术和数据挖掘技术相结合,对电信客户流失进行预测的模型。该模型利用大数据技术处理用户离网前的海量数据信息,分析流失用户特征,建立用户流失预测,提前锁定流失风险较高的用户,有针对性地制定维挽策略,精准开展维系挽留活动,能够有效降低用户离网率。【关键词】 大数据;流失预测;数据挖掘;客户流失;维系挽留引言随着移...原创 2018-10-19 14:15:24 · 9962 阅读 · 3 评论 -
读完这篇,你一定能真正理解什么是哈希表
本文全是干货,读完希望对你有所帮助~ 哈希表也称为散列表,是根据关键字值(key value)而直接进行访问的数据结构。也就是说,它通过把关键字值映射到一个位置来访问记录,以加快查找的速度。这个映射函数称为哈希函数(也称为散列函数),映射过程称为哈希化,存放记录的数组叫做散列表。比如我们可以用下面的方法将关键字映射成数组的下标:arrayIndex=hugeNumber%arraySize...原创 2018-11-14 11:16:16 · 134 阅读 · 0 评论 -
业界 | Nature:人工智能协助科学家解密基因序列
快速测序基因组的能力为科学家提供了大量的数据,但了解进化是如何塑造了人类仍然是一项艰巨的任务。 精确确定人类基因序列在哪里及如何进化就像大海捞针。每个人的基因组包含30亿个称为核苷酸的构建模块,研究人员必须汇编来自数千人的数据,以期发现进化压力塑造基因的模式。 为了找到这些模式,越来越多的遗传学家转向一种称为深度学习的机器学习方法。该方法的支持者表示,与传统的统计方法相比...原创 2018-11-13 15:15:54 · 297 阅读 · 0 评论 -
数据挖掘方面的研究必须用的那些知识!!!
关于数据挖掘方面的研究,我原来也走过一些弯路。其实从数据挖掘的起源可以发现,它并不是一门崭新的科学,而是综合了统计分析、机器学习、人工智能、数据库等诸多方面的研究成果而成,同时与专家系统、知识管理等研究方向不同的是,数据挖掘更侧重于应用的层面。 因此来说,数据挖掘融合了相当多的内容,试图全面了解所有的细节会花费很长的时间。因此我建议你的第一步是用大概三个月的时间了解数据挖掘的几个常用技...原创 2018-11-07 10:12:14 · 1381 阅读 · 0 评论 -
月薪30-50K的大数据开发工程师们,原来都是这样想想的!!!
这两天小编去了解了下大数据开发相关职位的薪资,主要有hadoop工程师,数据挖掘工程师、大数据算法工程师等,从平均薪资来看,目前大数据相关岗位的月薪均在2万以上,随着项目经验的增长工资会越来越高。那么对于新手来说,应该如何开始学习,才能够早日的实现月薪2万多的目标。就小编了解的来说,新手一般需要一年以上的时间才能够达到2万以上的薪资,目前很多人选择参加培训然后快速进入工作岗位,积累经...原创 2018-11-02 11:24:51 · 249 阅读 · 0 评论 -
可视化大数据分析软件要掌握这6个核心技术!
大数据技术与商业智能BI是相辅相成的,大数据技术可以帮助BI产品突破业务和技术的双挑战。可视化大数据分析软件在快速发展的市场环境中,迎来了越来越多的技术要求。这些核心技术成为大数据获取、存储、处理分析或可视化的有效手段,可以说是我们这些专注研究可视化大数据分析软件的工作人员需要去学习和了解的!1.大数据生命周期 底层是基础设施,涵盖计算资源、内存与存储和网络互联,具体表现为计算节点、集...原创 2018-11-03 17:24:05 · 1621 阅读 · 0 评论 -
一篇文章带你读懂真正的大数据公司
马云卸任演讲时说了这么一句话:很多人还没有搞清楚什么是PC互联网,移动互联网来了,我们还没有搞清楚移动互联网的时候,大数据时代又来了。现在的数据,可谓是时下最炙手可热的东西了。想当年,有“洛阳纸贵”的景象;看今朝,数据成为江湖大佬必争之物,火爆程度堪比“洛阳纸”。而随着大数据浪潮来袭,大数据企业也如雨后春笋般不断涌出。几乎身边的每个人都在夸夸其谈大数据,就好像“万金油”一般,似乎套在什么项...原创 2018-10-30 14:04:46 · 605 阅读 · 1 评论 -
搞懂大数据,这篇文章一定要细细品读! 大数据
导读:文章用一个个生动的例子深入浅出的讲述了大数据,并大胆的描绘了大数据未来的应用场景。很多初学者,对大数据的概念都是模糊不清的,大数据是什么,能做什么,学的时候,该按照什么线路去学习,学完往哪方面发展,想深入了解,想学习的同学欢迎加入大数据学习扣群:805127855,有大量干货(零基础以及进阶的经典实战)分享给大家,并且有清华大学毕业的资深大数据讲师给大家免费授课,给大家分享目前国内最完整的...原创 2018-10-24 10:03:29 · 596 阅读 · 0 评论 -
2019年机器学习:追踪人工智能的12大发展趋势
摘要:“智能助理”的时代已经到来了。机器学习已经成为全球数字化转型的关键要素之一 ,在企业领域,机器学习用例的增长在过去几年中也是显著的。预计机器学习工具和解决方案的企业级采用率将在本十年结束前达到65% - 并且支出将达到460亿美元(根据IDC报告)。平均而言,55%的企业CIO已将机器学习视为业务加速的核心优先事项之一。在这里,我们将重点介绍2019年机器学习将如何继续发展。很多初学者,...原创 2018-10-26 09:37:18 · 1798 阅读 · 0 评论 -
你知道吗?未来我国大数据应用技术的发展将涉及这些热点领域 大数据
在贵州省贵阳市举行的2018中国国际大数据产业博览会上,参观者在参观城市网络安全运营中心。新华社记者 陶亮 摄近日发布的《中国大数据应用发展报告》显示——目前,我国互联网、移动互联网用户规模均居全球第一,有着丰富的数据资源和显著的应用市场优势。随着打造“数字中国”战略的推进,大数据产业正成为经济社会发展的新引擎,受到广泛关注。当前,大数据产业正快速发展成为新一代信息技术和服务业态,即对数量...原创 2018-10-21 18:31:09 · 1114 阅读 · 0 评论 -
大数据与信息安全(六)天网系统与大数据 大数据
大数据与信息安全(六)大数据是什么?大数据是一个极为强大的信息数据的采集和收录系统,可以将我们日常工作生活中的所有数据,近乎可以全盘收录。大数据系统的设立,就是为了方便统计,不需要过去繁琐的操作,通过什么个体采样、分批采样等统计模式来获取信息数据,而是将所能采集到的数据,都通过大数据系统近乎完全彻底的收录进来,然后通过云计算来进行数据的分析处理,最后得出相应结论。大数据和云计算得出的结论...原创 2018-10-21 14:29:03 · 1544 阅读 · 0 评论 -
什么是“大数据新闻”? 大数据
数据就是资产。大数据(Big Data)是近些年非常火的一个词汇。新闻业也常常借助大数据技术来革新报道形式。那么,究竟什么是大数据呢,大数据新闻又是一个什么概念?很多初学者,对大数据的概念都是模糊不清的,大数据是什么,能做什么,学的时候,该按照什么线路去学习,学完往哪方面发展,想深入了解,想学习的同学欢迎加入大数据学习扣群:805127855,有大量干货(零基础以及进阶的经典实战)分享给大...原创 2018-10-23 11:16:28 · 10299 阅读 · 0 评论 -
业界 | 如何成为一名数据科学家?听听来自Netfix的老司机怎么说 大数据
数据科学是什么?数据分析?机器学习?还是数据工程?答案可能有很多,但也许只有直接与某个公司的数据科学家交流,才能了解该公司是如何看待数据科学的。由Netflix举办的第三届聚焦数据科学的WiBD研讨会,为我们所有人了解Netflix的数据科学故事提供了绝佳机会,一起来看看吧!很多初学者,对大数据的概念都是模糊不清的,大数据是什么,能做什么,学的时候,该按照什么线路去学习,学完往哪方面发展,想深...原创 2018-10-25 08:58:31 · 167 阅读 · 0 评论 -
2018如何避开大数据的四大误区 大数据
人们正在进入一个由数据驱动的“数据时代”,但是数据真的是万能的吗?人在互联网时代,大数据已充斥了我们生活和工作的方方面面。有了大数据,人们对于经济社会的认识与把握进入到一个全新的时代,即进入到一个较信息经济更高位阶的新阶段,也就是“数字经济”。日前发布的《中国数字经济发展白皮书(2017)》中指出,2016年中国数字经济总量达到22.6万亿元,同比名义增长接近19%,占GDP的比重超过30%,同...原创 2018-10-20 10:05:24 · 1612 阅读 · 0 评论 -
一篇文章详解大数据技术和应用场景 大数据
什么是大数据说起大数据,估计大家都觉得只听过概念,但是具体是什么东西,怎么定义,没有一个标准的东西,因为在我们的印象中好像很多公司都叫大数据公司,业务形态则有几百种,感觉不是很好理解,所以我建议还是从字面上来理解大数据,在维克托迈尔-舍恩伯格及肯尼斯库克耶编写的《大数据时代》提到了大数据的4个特征:很多初学者,对大数据的概念都是模糊不清的,大数据是什么,能做什么,学的时候,该按照什么线路去学...原创 2018-10-22 10:33:37 · 1603 阅读 · 0 评论 -
一篇让你深度思考的文章|大数据与数据挖掘的相对绝对关系 大数据
数据不是信息,而是有待理解的原材料。但有一件事是确定无疑的:当NSA为了从其海量数据中“挖掘”出信息,耗资数十亿改善新手段时,它正受益于陡然降落的计算机存储和处理价格。麻省理工学院的研究者约翰·古塔格(John Guttag)和柯林·斯塔尔兹(Collin Stultz)创建了一个计算机模型来分析之心脏病病患丢弃的心电图数据。他们利用数据挖掘和机器学习在海量的数据中筛选,发现心电图中出现三类异...原创 2018-10-19 17:45:23 · 312 阅读 · 0 评论 -
大数据开发学习路线图,你都学会了吗?
知识推荐书籍1、舍恩伯格的《大数据时代》;2、巴拉巴西的《爆发》;3、涂子沛的《大数据》;4、吴军《智能时代》;5、《大数据架构商业之路:从业务需求到技术方案》很多初学者,对大数据的概念都是模糊不清的,大数据是什么,能做什么,学的时候,该按照什么线路去学习,学完往哪方面发展,想深入了解加QQ群740041381,有大量干货(零基础以及进阶的经典实战)分享给大家,并...原创 2019-04-23 20:47:10 · 373 阅读 · 0 评论