对本次实训中我对大数据介绍
一.自我介绍
你好,我是来自兰州文理学院数字媒体学院数据科学与大数据技术班的一名大学生,你可以叫我小黑。
二. 对大数据的认识
- 经过这段时间的学习我对大数据有了更好的了解,大数据时代到来最初是麦肯锡:“数据已经渗透到当今每一个行业和业务职能领域,成为重要的产生因素。人们对海量数据的挖掘和运用,预示着新一波生产率增长和消费者盈余浪潮的到来。”
- 通过我的学习了解到大数据的特征可以总结为4个V (数据规模大,价值密度低,种类多,处理速度快)第一,数据体量巨大。大数据的起始计量单位至少是P;第二,数据类型繁多。比如,网络日志、视频、图片、地理位置信息等等。第三,价值密度低,商业价值高。第四,处理速度快。最后这一点也是和传统的数据挖掘技术有着本质的不同。
- 大数据来源非常广泛它主要来源于互联网大数据,传统行业大数据,音频,视频和数据,移动设备产生的数据。
- 大数据采集的数据类型,主要有以下三类:(1)互联网数据(2)系统日志数据(3)数据库数据
- 大数据的整个流程有数据的采集,数据的预处理,数据的储存,数据的分析,数据的可视化
- 云计算与大数据之间是相辅相成,相得益彰的关系。大数据挖掘处理需要云计算作为平台,而大数据涵盖的价值和规律则能够使云计算更好的与行业应用结合并发挥更大的作用。云计算将计算资源作为服务支撑大数据的挖掘,而大数据的发展趋势是对实时交互的海量数据查询、分析提供了各自需要的价值信息。
- 大数据的表现形 态大数据在当今社会非常时笔,但真正要面对的是企业如何授作,如何落地。传统数据的获得通过问卷调查收集数据,或者是已存储的历史经营数据,比如财务数据、销售数据等,一 台服务器基本就能完成其存储容量。传统数据的表现形态为对数据的统计分析,以表或图的形式呈现给大家。而大数据的信息量是海量的,这个海量并不是某个时间端点的量级总结,而是持续更新,持续增量。由于大数据产生的过程中诸多的不确定性,使得大数据的表现形态多种多样。
三:创意场景
比如你早上有重要会议,结果却被堵在路上不知道什么时候才能到公司,这时你可能除了干若急也没什么能做的。你不能,大数据分析可以。借助大数据分析,你可以找出拥堵不严重的路甚至通过实时疏导来解决整个城市的拥堵问题。在这方面做得比较突出的是谷歌地图。谷歌通过收集安卓用户的位置和运动等信息来预测交通状况并给予用户建议。不过现在这项服务效果还不是特别好因为谷歌再怎么收集信息也很难知道用户此时使用的是什么交通工具,而开车和骑电动车对于交通的影响是很不一样的。
四:实习感想
通过本次实习让我更好的了解了大数据这门专业,在这次实习中我学会了如何去了解数据的获取与对大数据的处理。本次实训中学到了大数据的发展趋势与行业要求,大数据工作的环境,Linux操作系统的初步使用与体验,数据可视化的介绍,通过这次实习让我在以后的工作和学习中有了更好的方向。