1. 工业大数据的内涵


1.1 工业大数据的定义


工业大数据即工业数据的总和
分成三类:企业信息化数据、工业物联网数据、外部跨界数据
重点要记
企业信息化和工业物联网中机器产生的海量时序数据是工业数据规模变大的主要来源

工业大数据是智能制造和工业物联网的核心。
从本质上来讲,是通过促进数据的自动流动去解决控制和业务的问题;减少决策过程所带来的不确定;并尽力的去克服人工决策的确定;

1)企业信息化数据

企业信息系统存储了高价值密度的核心业务数据;
信息技术加速了工业领域的应用;
代表应用系统:制造执行系统Mesh、企业资源计划 erp 、产品生命周期plm、供应链管理scm、客户关系管理crm

2) 工业物联网数据

能够实时自动采集设备的运行数据,并且进行远程的实时监控设备

3) 外部跨界数据

物联网促进了工业、社会、经济等领域的深度融合 ;
开始关注气候的变化、生态的约束、政治事件、自然灾害、市场变化等因素,给企业经营产生的影响

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
理论·政策·产业 大数据专题 大数据专题讲座体会 陕西日报2014年2月11日 赵正永:大力推进信息化发展,对于调整经济结构、转变发展方式、保障和改善民生意 义重大。尽管目前我省的信息化还存在一些问题,但我们要发挥科教大省的资源和人才 优势,逐年增加信息化发展专项资金,出台更加有力的政策措施,努力推进我省信息化 建设走在西部的前列,走进全国的前列。 娄勤俭:我省是中国的集散中心,在扩大信息流、资金流和物流结合发展方面有区域优 势,为大数据基础设施建设提供很好地保证。同时我省是一个欠发达省份,要充分认识 到大数据在人事保障、医疗保障等社会管理中既花钱少又能满足服务的作用,整合资源 、节省投资、快速响应服务,依靠大星通信运营企业提供的服务来推动我省信息服务建 设。 编者按随着技术创新和行业需求的推动,大数据产业和市场已步入快车道。我国"十二五 "规划以将大数据作为建设重点,各级政府也着手建立大数据库,进入了大数据管理时代 。目前,我国已成为全球IT巨头布局大数据战略的重要集聚地。我省网络基础优势,科 教实力雄厚,拥有发展大数据产业的多重优势。但是,我们也是清楚看到,眼下大数据 应用还处于初期发展阶段,面临不少观念和技术等优势。本期周末讲座邀请到西北工业 大学计算机学院周兴社教授,想大家讲解大数据及其应用发展,并针对我省发展大数据 产业提出相应建议。 专家讲义摘要 早在19801年,著名未来学家阿尔文·托夫勒便在《第三次浪潮》一书中,将大数据热 情地赞颂为"第三次浪潮的华彩乐章"。不过从2009年开始,"大数据"才真正的走入了大 众的视野。大数据是建立在数据分析、处理、服务技术快速提升和海量数据快速积累基 础上的。随着IT技术快速发展和网络应用日益深化,正在积累起前所未有的海量数据, 例如淘宝网站、交通图像、微信服务、电子病历以及物联网等新兴服务应用正每日产生 PB级数据;我们每天打电话、发短信、刷卡也在不断产生海量的大数据。著名的咨询机 构IDC(国际数据公司)预测,在未来几年中,大数据和分析市场将获得快速发展,人类 正在快速步入大数据(BigData)时代。 一、大数据具有自身特点 1、大数据概念 依据全球著名管理咨询公司麦肯锡给出的定义,所谓大数据是指无法在一定时间内 用传统软件工具对其内容进行采集、存储、管理和分析的数据集合。而大数据技术是从 海量复杂数据中获得信息所需要的软件、硬件及其读物技术。 大数据特点 目前,学界和业界关于大数据特点,归纳总结为"4V",即Volume(大体量)、Vari ety(多样性)、Velocity(快变化)和Valve(含价值)。 、Volume:PB级数据成为常态;当然,"大"具有相对性,并非必须是PB级数据量,其与领 域相关,不同领域数据规模会有较大差异。 Variety:大数据类型具有多样性,例如,文本、表格、图像、视频等数据形式均可能 同时存在。 Velocity:数据快速动态变化,例如交通数据、装备运行状态数据等时刻处在变化之中, 对此需要高效快速处理方法。 Valve:价值隐藏在海量数据之中,往往价值密度很低,如平安城市PB级视频记录数据, 面对特定事件,需经历大量分析处理才能体现出其价值。 3、创新大数据技术 大数据处理的理念、"4V"特点以及处理方式均确定了传统的数据处理方式及其软件 硬件实现,也要创新大数据应用模式。从技术研究角度来讲,在不损失价值前提下,以 提高数据质量、减少数据规模为目标的大数据整理技术,以提炼价值为目标的大数据关 联分析与深度挖掘技术以及以快速高效为目标的大数据新型计算方式,如大规模数据流 实时分析、可扩展统计分级、数据并行处理与增量处理以及异质数数据混合计算等。 大数据带来思维和管理模式变革 大数据发展,不断产生思维方式的变革和创新。大数据直接分析PB级数据,不再依 赖于随机采样;大数据处理不再过分追求个体数据的精确性,预测成为重点;大数据处 理不再过分关注因果,更加重视数据集合的相关性。 同时,多个领域的初步应用案例说明,大数据时代在技术进步的同时,也会引起商 业变革和管理创新。在社会服务领域,大数据正在快速推动政府社会管理模式的创新, 提升公众服务能力;在生产、制造、服务等领域,大数据推动运行效率的提升,实现经 济内涵式增长;在科学研究领域,大数据促进多学科进步以及新型数据科学发展,产生 以数据集计算为核心的新兴科学研究模式创新。 国际国内高度关注大数据发展 大数据研究与应用及其产业形态已引起国际上政府、学术界以及企业界的高度关注 。美国2012年启动国家大数据研究计划,数据科学逐步演变为新兴的独立学科,数据工 程师正在成为新型的IT职业。在企业界,IBM通过汇聚专家、并购公司、申报专利、发布 平台,力求成为大数据和分析领域的全球领导者;GE公
工业大数据产业应用联盟 1 前言............................................................................................................................1 1.1 研究背景........................................................................................................1 1.2 研究目标及意义............................................................................................1 2 工业大数据内涵........................................................................................................3 2.1 工业大数据的定义与边界............................................................................3 2.1.1 工业大数据的定义............................................................................3 2.1.2 工业大数据的边界............................................................................3 2.2 与智能制造的关系........................................................................................4 2.2.1 在智能制造中的应用........................................................................4 2.2.2 在智能制造标准体系中的定位........................................................5 2.3 与工业互联网的关系....................................................................................7 2.3.1 在工业互联网中的应用....................................................................8 2.3.2 在工业互联网标准体系中的定位....................................................9 3 工业大数据产业发展现状......................................................................................10 3.1 政策支撑......................................................................................................10 3.1.1 国际工业大数据战略......................................................................10 3.1.2 国内工业大数据政策......................................................................11 3.2 工业大数据应用参考架构..........................................................................14 3.3 典型应用场景..............................................................................................17 3.3.1 智能化设计......................................................................................18 II 3.3.2 智能化生产......................................................................................19 3.3.3 网络化协同制造..............................................................................21 3.3.4 智能化服务......................................................................................22 3.3.5 个性化定制......................................................................................23 3.4 产业发展分析..............................................................................................24 4 工业大数据关键技术..............................................................................................25 4.1 工业大数据技术架构..................................................................................25 4.2 工业大数据平台..........................................................................................27 4.3 工业大数据采集技术..................................................................................28 4.4 工业大数据存储与管理技术......................................................................29 4.4.1 多源异构数据管理技术..................................................................29 4.4.2 多模态数据集成技术......................................................................31 4.5 工业大数据分析技术..................................................................................32 4.5.1 时序模式分析技术..........................................................................33 4.5.2 工业知识图谱技术..........................................................................34 4.5.3 多源数据融合分析技术..................................................................34 4.6 工业大数据的前沿技术趋势......................................................................35 5 工业大数据管理......................................................................................................36 5.1 数据管理体系..............................................................................................36 5.2 数据资源编目..............................................................................................37 5.2.1 数据资源目录应用架构..................................................................37 5.2.2 数据资源编目..................................................................................38 III 5.3 数据质量管理..............................................................................................39 5.3.1 工业大数据质量问题......................................................................39 5.3.2 工业大数据质量检测方法..............................................................41 5.3.3 工业大数据质量管理......................................................................41 5.4 主数据管理..................................................................................................42 5.4.1 主数据管控体系..............................................................................43 5.4.2 主数据应用管理..............................................................................45 5.5 数据安全管理..............................................................................................46 5.5.1 工业大数据安全问题......................................................................46 5.5.2 工业大数据安全防护技术..............................................................46 5.5.3 工业大数据安全管理机制..............................................................48 6 工业大数据的标准体系..........................................................................................50 6.1 工业大数据标准化工作基础......................................................................50 6.1.1 国际标准化......................................................................................50 6.1.2 国内标准化......................................................................................50 6.2 工业大数据标准体系框架..........................................................................52 6.3 工业大数据标准明细表..............................................................................54 6.4 工业大数据重点标准描述..........................................................................55 7 下一步工作建议......................................................................................................56
中国电力大数据发展白皮书 (2013 年) 中国电机工程学会信息化专委会 二零一三年三月 "中国电力大数据发展白皮书 I 目 录 1. 引言 .................................................................... 1 2. 迎接电力大数据时代 ................................................. 5 2.1. 电力大数据源起 ............................................................. 5 2.2. 电力大数据内涵 ............................................................. 7 2.3. 电力大数据特征 ............................................................. 9 3. 展望电力大数据时代 ................................................ 13 3.1. 电力大数据价值分析 ..................................................... 13 3.2. 电力大数据应用前景 ..................................................... 15 3.3. 电力大数据发展挑战 ..................................................... 17 4. 迈向电力大数据时代 ................................................ 20 4.1. 电力大数据关键技术 ..................................................... 20 4.2. 电力大数据发展策略 ..................................................... 22 5. 结束语 ................................................................ 27 II 图表目录 图表 1 全球数据量预测 ............................................................ 1 图表 2 中国电力装机容量预测 .................................................... 2 图表 3 大数据的发展历程 ......................................................... 3 图表 4 传统数据大数据的区别及联系 ......................................... 6 图表 5 传统电力价值链与新兴电力价值链 ...................................... 8 图表 6 电力大数据的"3V3E" .................................................. 10 图表 7 表计数量与采集频率决定的数据量变化 ............................... 10 图表 8 大数据的行业价值 ....................................................... 13 图表 9 数据使用率提升 10%对行业人均产出的平均提升幅度 ............... 14 图表 10 数据质量提升 10%对行业 ROE 的中位数提升幅度 ................... 15 图表 11 大数据技术成熟周期 ................................................... 22 图表 12 电力工业在国民经济中的发展变化趋势 .............................. 24 图表 13 电力大数据助力智慧城市 .............................................. 26 "中国电力大数据发展白皮书 1 1. 引言 随着数字信息化时代的迅猛发展,信息量也呈爆炸性增长态势。 在人类充分享受信息化带来的资讯、方便和快捷时,也使得全球的数 字信息资源正进入到一个前所未有的快速增长期。据 IDC 统计,2011 年全球数据量已达到 1.8ZB,相当
2 0 1 8年 河北大学学报(自然科学版) 2 0 1 8 第3 8卷 第3期 J o u r n a l o fH e b e iU n i v e r s i t y ( N a t u r a lS c i e n c eE d i t i o n ) V o l . 3 8N o . 3 D O I : 1 0 3 9 6 9 / j i s s n 1 0 0 0 1 5 6 5 2 0 1 8 0 3 0 1 1 大数据大数据机器学习 张素芳1,翟俊海2,王聪2,沈矗2,赵春玲2 ( 1. 中国气象局气象干部培训学院河北分院, 河北 保定 0 7 1 0 0 0; 2. 河北省机器学习与计算智能重点实验室, 河北大学 数学与信息科学学院, 河北 保定 0 7 1 0 0 2 ) 摘 要 大数据时代已经到来, 大数据是指具有海量( V o l u m e ) 、 多样( V a r i e t y ) 、 时效( V e l o c i t y ) 、 不精确 ( V e r a c i t y ) 和价值( V a l u e ) 这5种特征的数据, 大数据研究是近几年信息处理领域最热门的研究方向, 已经 引起了工业界、 学术界乃至政府部门的高度关注. 大数据之所以备受关注, 是因为大数据里面蕴藏着巨大的 价值. 如何把蕴藏在大数据中的价值挖掘出来, 为企业或政府部门提供决策支持具有重要的意义. 大数据给 传统的机器学习带来了许多挑战, 这些挑战可以从大数据的5个特征或从5个不同的角度进行分析. 本文首 先介绍大数据的概念, 并详细剖析大数据5种特征的内涵; 然后在此基础上, 重点分析大数据给机器学习带 来的挑战及可能的解决方法. 本文对从事大数据研究的人员, 特别是从事大数据机器学习研究的人员具有较 高的参考价值. 关键词:大数据; 机器学习; 云计算; 决策支持 中图分类号: T P 1 8 1   文献标志码: A   文章编号: 1 0 0 0 1 5 6 5 ( 2 0 1 8 ) 0 3 0 2 9 9 1 0 B i gd a t aa n db i gd a t am a c h i n e l e a r n i n g Z H A N GS u f a n g 1, Z H A I J u n h a i 2,WA N GC o n g 2, S H E NC h u 2, Z H A OC h u n l i n g 2 ( 1.H e b e iB r a n c ho fC h i n aM e t e o r o l o g i c a lA d m i n i s t r a t i o nT r a i n i n gC e n t r e , C h i n aM e t e o r o l o g i c a lA d m i n i s t r a t i o n , B a o d i n g0 7 1 0 0 0, C h i n a ; 2. K e yL a b o r a t o r yo fM a c h i n eL e a r n i n ga n dC o m p u t a t i o n a l I n t e l l i g e n c eo fH e b e iP r o v i n c e , C o l l e g eo f M a t h e m a t i c sa n dI n f o r m a t i o nS c i e n c e ,H e b e iU n i v e r s i t y , B a o d i n g0 7 1 0 0 2, C h i n a ) A b s t r a c t : B i gd a t a e r ah a s a r r i v e d . T h eb i gd a t a r e f e r s t o t h ed a t aw h i c h i su s u a l l yc h a r a c t e r i z e db y t h e 5f e a t u r e s : v o l u m e , v a r i e t y , v e l o c i t y , v e r a c i t y , a n dv a l u e . I nr e c e n t y e a r s , b i gd a t a r e s e a r c h i s t h eh o t t e s t r e s e a r c ht o p i c i n t h e f i e l do f i n f o r m a t i o np r o c e s s i n g , a
工业大数据与智能化 作者: 来源:《中国信息化周报》2019年第09期 要理解工业大数据,笔者认为,可以从下面几个数字入手。 一个目标 一个目标就是提升智能化的水平。很多专业人士谈到大数据,往往局限于各种数据的分析及其算法。如果视野仅仅局限于这个层次,那么,就难以看到大的机会。在笔者看来,大数据时代的机会就在于促进智能化水平的提高、带领工业界进入智能时代。换句话说,如果不与各种智能化工作联系起来,就可能失去大数据时代的机会。 要认识这种机会,就需要正确把握智能化的含义。什么是智能化?智能化就是通过数字化和网络技术提升信息获取或决策的能力。而决策的主体可以是机器,也可以是人。我们知道,大数据促进了机器学习技术的发展,推动了新一代人工智能(AI)的发展。但智能化的内涵应该远大于人工智能(AI)。只有认识到这一点,才能看到更多的机会和可能。 从某种意义上讲,智能化就是人机工作界面的改变,是借助ICT技术(信息通信技术)实现业务活动方式的创新。在信息获取、知识获取、决策、执行等环节,我们都可以采取新的工作方式。比如,在信息获取方面,当数据太多太散时,可以让机器去查找信息;数据组织得好时,就可以让人去查找信息。还比如,在知识获取方面,可以用人机协同的方式获取知识,也可以让机器自行去获取知识。 可以说,在智能化方面,我们要有想象力,不要局限于从数据中发现知识。比如,实现机器"用"知识推动设备智能化,或直接为人类提供可用的知识。现在,知识的人类用户可以是工程师,也可以是消费者。因此,工业大数据技术落地的前提常常是具体业务牵引,即所谓"先有需求,再找方法"。 一个基础 工业大数据与智能化全文共3页,当前为第1页。 一个基础就是数据的完整性。无论是工业产品还是车间、工厂,工业对象往往被看成一个复杂的系统。当我们用数据来表征系统时,数据的完整性和相关性都特别重要。毕竟不完整的数据和不相关的数据可能会得出错误的分析结论,而工业对象都追求高度的可靠性,对错误的容忍度很低。宝钢老专家王洪水认为,用数据记录生产过程时,"要向录像机录像一样"把数据收集起来,不要有断点。这是实践中行之有效、正确的指导思想。笔者还见过有人在研究钢铁材料成分与力学性能之间的关系时,把包括微合金钢在内的多种钢种混在一起,却只考虑了C、Si、Mn、S、P等所谓的"5大元素"。这时得到的结论自然就是错的。过去记录数据时,由于存储成本高,往往"挑重要的记录",导致记录的信息碎片化。现在数据存储成本低,可以记录的数据多了,但是,若数据之间的关联性没有被记录下来,则数据照样是没有价值的。 工业大数据与智能化全文共3页,当前为第1页。 二次应用 在多数业务系统中,数据在业务活动中产生,业务活动结束后,数据也就基本没用了。而大数据的重要用途往往发生在业务场景结束之后,故而称之为二次应用。二次应用的价值在于:用过去产生的数据让现在的业务活动做得更好。 大数据的一个重要用途是促进企业的转型升级、业务活动的创新。然而,创新的成功逻辑往往是"先做成、后做好"。强调二次应用,指的是把大数据应用于"做好"的优化阶段。在笔者看来,大数据对如何"做成"业务是没有责任的。因为没有"先做成"的业务逻辑,大数据也就没有办法落地。强调这一点的原因是:把两个困难混在一起,可能就做不成事了。"做成"的业务逻辑必须单独考虑、提前考虑,大数据只是让业务"做得更好"而已。而"做好"则包括多个方面,如质量更好、速度更快、成本更优,而不仅仅是决策质量更好。比如,重用知识和信息可以使人们做事的速度更快、成本更低。对于"做好",不要一味地强调"决策质量更优",如果仅仅局限于决策质量,则可能会失去很多创新机会。 两种承载 大数据数据(Data),也必须是信息(Information)。两者的差别在于:数据之间有了联系才能构成信息。强调这个观点的目的在于:不要碎片化地收集数据,而是去收集有联系的数据、收集数据之间的联系,且最好是完整的信息,而不是破碎的信息。大数据不仅可以用来承载信息,而且可以用来承载知识,也就是把知识提炼出来,用大数据来承载。从工业上看,工业产品的设计数据工业设备的状态、标准等知识都可以用数据来表示。在某些个性化需求比较多的场景下,这些数据的量是相当大的。上海有一家企业,每天处理这类数据所花的电费就有10万元。 总之,不论承载什么,都要以便于应用为目的,不要总想着"从数据提取知识"这一件事、一个环节,而是要以具体的应用为牵引,根据具体需求,以终为始地建立大数据基础。 三个优势 大数据的不同之处是什么?笔者将其归结为三个优势。正是这三个优势让我们便于从大数据中获得知识。 工业大数据与智能化全文共3页,当前为第2页。 笔者把第一个优势称为"不必纠结于因果"。这种说法区别于"是相关,不是因果",以及"工业大数据必须具备因果

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值