大数据的产生和意义

        大数据是信息通信技术发展积累至今,按照自身技术发展逻辑,从提高生产效率向更高级智能阶段的自然生长。无处不在的信息感知和采集终端为我们采集了海量的数据,而以云计算为代表的计算技术的不断进步,为我们提供了强大的计算能力。

一、大数据的产生

        从采用数据库作为数据管理的主要方式开始,人类社会的数据产生方式大致经历了 3 个阶段,而正是数据产生方式的巨大变化才最终导致大数据的产生。

1)运营式系统阶段

        数据库的出现使得数据管理的复杂度大大降低,在实际使用中,数据库大多为运营系统所采用,作为运营系统的数据管理子系统,如超市的销售记录系统、银行的交易记录系统、医院病人的医疗记录等。

        人类社会数据量的第一次大的飞跃正是在运营式系统开始广泛使用数据库时开始的。这个阶段的最主要特点是,数据的产生往往伴随着一定的运营活动;而且数据是记录在数据库中的,例如,商店每售出一件产品就会在数据库中产生一条相应的销售记录。这种数据的产生方式是被动的。

2)用户原创内容阶段

        互联网的诞生促使人类社会数据量出现第二次大的飞跃,但是真正的数据爆发产生于 Web 2.0 时代,而 Web 2.0 的最重要标志就是用户原创内容。这类数据近几年一直呈现爆炸性的增长。

主要有以下两个方面的原因。

  • 是以博客、微博和微信为代表的新型社交网络的岀现和快速发展,使得用户产生数据的意愿更加强烈。
  • 是以智能手机、平板电脑为代表的新型移动设备的出现,这些易携带、全天候接入网络的移动设备使得人们在网上发表自己意见的途径更为便捷。这个阶段的数据产生方式是主动的。

3)感知式系统阶段

        人类社会数据量第三次大的飞跃最终导致了大数据的产生,今天我们正处于这个阶段。这次飞跃的根本原因在于感知式系统的广泛使用。

        随着技术的发展,人们已经有能力制造极其微小的带有处理功能的传感器,并开始将这些设备广泛地布置于社会的各个角落,通过这些设备来对整个社会的运转进行监控。这些设备会源源不断地产生新数据,这种数据的产生方式是自动的。

        简单来说,数据产生经历了被动、主动和自动三个阶段。这些被动、主动和自动的数据共同构成了大数据的数据来源,但其中自动式的数据才是大数据产生的最根本原因。

二、大数据的作用

        大数据虽然孕育于信息通信技术,但它对社会、经济、生活产生的影响绝不限于技术层面。更本质上,它是为我们看待世界提供了一种全新的方法,即决策行为将日益基于数据分析,而不是像过去更多凭借经验和直觉。具体来讲,大数据将有以下作用。

1)对大数据的处理分析正成为新一代信息技术融合应用的结点

        移动互联网、物联网、社交网络、数字家庭、电子商务等是新一代信息技术的应用形态,这些应用不断产生大数据。       

        云计算为这些海量、多样化的大数据提供存储和运算平台。通过对不同来源数据的管理、处理、分析与优化,将结果反馈到上述应用中,将创造出巨大的经济和社会价值,大数据具有催生社会变革的能量。

2)大数据是信息产业持续高速增长的新引擎

        面向大数据市场的新技术、新产品、新服务、新业态会不断涌现。

        在硬件与集成设备领域,大数据将对芯片、存储产业产生重要影响,还将催生出一体化数据存储处理服务器、内存计算等市场。

        在软件与服务领域,大数据将引发数据快速处理分析技术、数据挖掘技术和软件产品的发展。

3)大数据利用将成为提高核心竞争力的关键因素

        各行各业的决策正在从“业务驱动”向“数据驱动”转变。

        在商业领域,对大数据的分析可以使零售商实时掌握市场动态并迅速做出应对,可以为商家制定更加精准有效的营销策略提供决策支持,可以帮助企业为消费者提供更加及时和个性化的服务。 

        在医疗领域,可提高诊断准确性和药物有效性。       

        在公共事业领域,大数据也开始发挥促进经济发展、维护社会稳定等方面的重要作用

4)大数据时代,科学研究的方法手段将发生重大改变。

        例如,抽样调查是社会科学的基本研究方法,在大数据时代,研究人员可通过实时监测、跟踪研究对象在互联网上产生的海量行为数据,进行挖掘分析,揭示出规律性的东西,提出研究结论和对策。

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
大数据及环境保护大数据的应用意义浅述 发表时间:2019-06-13T16:08:41.370Z 来源:《防护工程》2019年第5期 作者: 张海荣 梁红宝 [导读] 政府和相关部门可以依靠准确、强大的数据来更好地保护和管理环境,也可以通过数据让人们了解当前的环境状况,从而增强环境 保护意识。 乌海市环境监控中心 内蒙古乌海市 016000;乌海市环境监测中心站 内蒙古乌海市 016000 摘要:随着信息技术的出现,我们逐渐进入大数据和互联网时代大数据环境可以使人们获得他们想要的信息更加简单、快速和准 确。大数据与互联网技术、云计算等有着非常密切的关系。目前,由于各种原因,自然环境遭到严重破坏。我们可以通过大量的数据分析 做出更准确的判断,并采取及时有效的措施保护环境。本文论述了大数据在环境保护领域的应用,并对更有效的环境治理提出了建设性建 议。 关键词:大数据;环境保护;大数据应用 一、大数据的概念 大数据是通过互联网技术、云计算技术、人工监测技术以及卫星技术等,对数据进行统计、整合以及分析,大数据的价值主要体现在 各种技术协同作用中。为了加强数据管理,数据库系统通常建立在文件系统上,借助于索引,为外界提供高效的数据查找和其他相关功 能。最后,利用数据分析技术从数据库中的大数据中提取各种有用的知识。随着信息技术的飞速发展,环保部门已经开展了多处环境质量 监测、环境调查和污染源管理等工作,收集了大量的专业数据,通过对这些精准有效的数据的分析,政府及相关部门可以对症下药。比 如,通过对污染源大数据的分析调查,可以预判出主要的污染源,政府及相关部门也可及时采取措施,解决污染源,保护环境。 二、利用大数据服务于环境保护工作 (一)要解决的是数据来源问题。近年来,污染源和环境质量的自动监控建设逐步趋于成熟,在很大程度上弥补了人工监测频次低, 人为因素大的缺点。同时,随着社会第三方监测的发展,解决了各地监测站人力不足的问题。因此,在大数据建设时,除了沿用监测站人 工监测和环境统计等传统的环境数据外,我们更应该将重点放在污染源自动监控、污染源中控、环境质量自动监控、第三方监测和网络舆 情等各种新型环境数据上。但即使这样,仍然存在数据覆盖面不足,代表性不强,偶然性较大,人为因素较多等诸多问题。 (二)要解决数据冲突问题。随着物联网的发展,自动监控有逐步取代人工监测的趋势,但自动监控投入较大、监测范围较窄、准确 度较差等问题突出,人工监测在以后很长一段时间仍然无法被取代,自动监控数据与人工监测数据冲突的问题也会在很长一段时间内存 在。比如,当某企业人工监测超标被处罚时,企业往往以自动监控数据正常为由规避处罚。虽然后来环保部门明确规定了,在人工数据与 自动监控数据冲突时,以人工监测数据为准,解决了上述例子中存在的问题,但数据深度挖掘时由此产生的冲突仍然无法有效解决。 (三)要解决数据造假问题。众所周知,不论人工监测数据还是自动监控数据,都会受到外部环境等因素的影响,因此,数据存在人 工修正是必要的。但是,实际工作中,为了各种绩效考核的需要,数据造假现象普遍存在。可以想象,在此种数据基础上进行数据挖掘和 行政决策会带来何种严重的后果。因此,任何数据入库前,都必须对其来源的真实性进行判别,进行严格的数据清洗;任何数据在人工修 正时,都必须经过最严格的必要性审查;当发生数据冲突时,要对数据进行真实性判断,并对抛弃数据进行标记。 (四)要解决数据安全问题。大数据解决了数据共享问题,但相对的数据安全问题就更显突出。环保大数据要面向环保各部门、政府 各单位、各种被管理对象、各种社会团体,以及广大网民开放相关服务。面对如此众多的数据分享用户,如何解决数据安全问题亟待解 决。目前,通过数据等级保护,用户等级管理等手段,可以有效进行数据访问安全控制,但随着科技的不断进步,安全漏洞的不断发现, 解决数据安全问题的工作一直在路上。 三、大数据的实际应用 (一)首先利用互联网技术、云计算技术、人工监测技术以及卫星技术等,对数据进行统计、整合以及分析是非常重要的。其次,只 有进一步提高环境保护体系相关部门的数据披露水平,才有利于实现大数据应用的创新。将据分析结果完整地显示在公众中,这样,不仅 可以增强公众对环境的保护意识,让更多的人了解都当下生态环境面临的问题,都积极参与到对环境的自觉保护中。其次,环境管理单位 和环境志愿者可以很容易地将采集到的数据传送到数据中心,间接地使公众成为工作的有力监督者,更好地帮助环保部门加强治理一些非 法排污企业。另外,公开了这些数据的做法也为大数据环境做出了贡献,进一步丰富了环境数据,更有利于相关部门对数据的分析应用。 (二)我们还可以大量采用气象资料的数据,进行空气质量的自动监测,并通过对污染源的自动监测获得的数据进行相关性分析,达

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值