大数据
文章平均质量分 60
码中求乐
努力做一名IT搬运工
展开
-
贪心科技分布式高性能深度实战学习笔记
什么是大数据技术?对于一个从事大数据行业人来说,一切数据都是有意义的。因为通过数据采集、数据存储、数据管理、数据分析与挖掘、数据展现等,我们可以发现很多有用的或有意思的规律和结论。比如,北京公交一卡通每天产生4千万条刷卡记录,分析这些刷卡记录,可以清晰了解北京市民的出行规律,来有效改善城市交通。但这4千万条刷卡数据 ,不是想用就能用的,需要通过“存储”“计算”“智能”来对数据进行加工和支撑,从而实现数据的增值。而在这其中,最关键的问题不在于数据技术本身,而在于是否实现两个标准:第一,这4千万条记录,转载 2021-06-25 10:48:49 · 138 阅读 · 0 评论 -
网易云大数据开发工程师学习笔记
1.数学及统计学相关的背景百度首席数据科学家沈志勇认为,缺乏理论背景的数据工作者,更容易进入一个技能上的危险区域(Danger Zone)—一堆数字,按照不同的数据模型和算法总能捯饬出一些结果来,但如果你不知道那代表什么,就并不是真正有意义的结果,并且那样的结果还容易误导你。“只有具备一定的理论知识,才能理解模型、复用模型甚至创新模型,来解决实际问题。”2.计算机编码能力实际开发能力和大规模的数据处理能力也被认为是作为大数据工程师的必备技能。“因为许多数据的价值来自于挖掘的过程,你必须亲自动手才能发现转载 2021-06-24 13:43:44 · 240 阅读 · 0 评论 -
大讲台大数据特训学习笔记
什么是大数据技术?对于一个从事大数据行业人来说,一切数据都是有意义的。因为通过数据采集、数据存储、数据管理、数据分析与挖掘、数据展现等,我们可以发现很多有用的或有意思的规律和结论。比如,北京公交一卡通每天产生4千万条刷卡记录,分析这些刷卡记录,可以清晰了解北京市民的出行规律,来有效改善城市交通。但这4千万条刷卡数据 ,不是想用就能用的,需要通过“存储”“计算”“智能”来对数据进行加工和支撑,从而实现数据的增值。而在这其中,最关键的问题不在于数据技术本身,而在于是否实现两个标准:第一,这4千万条记录,转载 2021-06-24 13:41:43 · 212 阅读 · 0 评论 -
基于flink+clickhouse构建亿级电商全端用户画像平台训练营
每个人都应该有一套自己的学习方法,但是在实际的生活中很多人都没有找到,但是无关紧要,一开始我们可以先参照别人的,在以后可以慢慢的养成一套属于自己的学下方法,下面就来分享一篇培训班学员的学习方法,给大家参考参考。一、为什么要学习我的学习方法?也许有童鞋会问:学习方法有很多,你的学习方法有什么过人之处吗?1、我用自己的学习方法把大数据学好了;2、我为科多大数据的学弟学妹们做过现场分享,老师和同学们都对我的分享表示认可;3、我的学习方法可以提高大家的学习效率。二、兴趣是最好的老师!君不见,热爱游戏的原创 2021-06-22 11:40:29 · 674 阅读 · 3 评论 -
百万大数据架构师学习笔记
什么是大数据技术?对于一个从事大数据行业人来说,一切数据都是有意义的。因为通过数据采集、数据存储、数据管理、数据分析与挖掘、数据展现等,我们可以发现很多有用的或有意思的规律和结论。比如,北京公交一卡通每天产生4千万条刷卡记录,分析这些刷卡记录,可以清晰了解北京市民的出行规律,来有效改善城市交通。但这4千万条刷卡数据 ,不是想用就能用的,需要通过“存储”“计算”“智能”来对数据进行加工和支撑,从而实现数据的增值。而在这其中,最关键的问题不在于数据技术本身,而在于是否实现两个标准:第一,这4千万条记录,原创 2021-06-21 11:05:21 · 325 阅读 · 0 评论 -
大数据架构师训练营学习笔记
1.数学及统计学相关的背景百度首席数据科学家沈志勇认为,缺乏理论背景的数据工作者,更容易进入一个技能上的危险区域(Danger Zone)—一堆数字,按照不同的数据模型和算法总能捯饬出一些结果来,但如果你不知道那代表什么,就并不是真正有意义的结果,并且那样的结果还容易误导你。“只有具备一定的理论知识,才能理解模型、复用模型甚至创新模型,来解决实际问题。”2.计算机编码能力实际开发能力和大规模的数据处理能力也被认为是作为大数据工程师的必备技能。“因为许多数据的价值来自于挖掘的过程,你必须亲自动手才能发现原创 2021-05-29 16:30:10 · 242 阅读 · 0 评论