开发物体识别桌、_【专利解密】华为如何实现物体检测在大规模场景中的应用;苹果卷入其中?三星显示被要求赔偿前副总裁专利侵权费...

79e1a01781e9000b6355fbf8a6411a4c.png

1.【专利解密】华为如何实现物体检测在大规模场景中的应用 助力智慧安防;2.苹果卷入其中?三星显示被要求赔偿前副总裁专利侵权费;3.苹果重申AR具有巨大潜力并且暗示未来可能出现的设备

647de9cf07eb619e2261f5e795779819.png

1.【专利解密】华为如何实现物体检测在大规模场景中的应用 助力智慧安防;

【嘉德点评】华为发明的物体检测方法,通过构建跨域知识图谱,可以捕捉到不同待检测物体间的内在关系,从而更加精确的进行物体识别,在智能安防等复杂场景中有着极其重要的应用。

集微网消息,2020年10月,由华为技术有限公司主办、成都优普诚科技有限公司协办的“普惠AI,破浪前行”2020华为好望秋季品鉴会在成都首座万豪酒店成功举办,该会就机器视觉、智慧安防等领域展开了交流讨论。

其中华为的机器视觉技术尤其适合应用在智慧安防等领域,尤其是在AI技术的加持下,可以让安防变得更加的省心且智能。例如,物体检测就是一项基本的计算机视觉任务,它可以识别图像中物体的位置和类别。在实际应用中,研究员和工程师们会根据应用场景与实际任务需求的不同创建针对不同具体问题的数据集,用于训练高度定制化和独特的自动物体检测器。

而在智慧安防领域,物体检测也是非常重要的一个环节,在进行很多任务之前,首要的就是将待检测物体定位并进行类别识别。为此,华为在20年1月21日申请了一项名为“一种物体检测方法、装置以及存储介质”的发明专利(申请号:202010072238.0),申请人为华为技术有限公司。

该专利中发明的系统可以应用在大规模物体检测场景中,例如手机人脸识别、手机识别万物、无人车的感知系统、安防摄像头、社交网站照片物体识别、智能机器人等等。同时,由于这种物体检测方法在对物体进行检测时结合了跨域知识图谱,因此其物体检测效果会更好。

根据该专利目前公开的资料,让我们一起来看看这项物体检测方法吧。

bb28a0c5276ca60f482f3cd307041e5f.png

如上图,为该专利中发明的系统架构的结构示意图,该架构中包括执行设备110、训练设备12、数据库130、客户设备140、数据存储系统150以及数据采集设备160。数据采集设备可以采集训练数据,并将数据存入数据库中,但是这种用于人工智能训练的数据需要进行人工标注。

训练设备可以根据训练数据训练出目标检测模型,当其他未知的图片由用户传递到计算模块时,就可以由目标模型来进行识别,从而得到物体的类别信息,并将物体的检测结果通过I/O接口呈现给客户设备。

5a9c7c64514504be0047b3b8d131f90d.png

如上图,为这种芯片的硬件结构图解,该芯片主要包括神经网络处理器,主CPU和外部存储器分别用于提供控制指令以及数据。配合系统架构图可知,这种芯片就是训练设备120中所使用的,可以完成训练设备的训练任务并输出物体的类型信息。

神经网络处理器NPU作为协处理器挂载到主中央处理器上,由主CPU分配任务,NPU的核心部分为运算电路303,控制器304控制运算电路提取存储器中的数据并进行运算。

我们知道在神经网络的计算中是需要大量的矩阵乘加运算的。举例来说,假设有输入矩阵A,权重矩阵B,输出矩阵C,运算电路从权重存储器中取矩阵B相应的数据,并缓存在运算电路中每一个PE上。运算电路从输入存储器中取矩阵A数据与矩阵B进行矩阵运算,得到的矩阵的部分结果或最终结果,保存在累加器中。

向量计算单元可以对运算电路的输出做进一步处理,如:向量乘、加、指数运算、对数运算以及大小比较等等,例如向量计算单元可以用于神经网络中非卷积的网络计算(池化、批归一化),这些结构则正是进行AI运算的基础。

a8e91428b4dc054a1ed3c3a389c185a5.png

如上图,为该专利中申请的物体检测方法的识别步骤的流程图,首先系统会获取待检测的图像,图像可以通过摄像头拍摄从街景等场合提取。接着确定待检测图像中的待检测物体的初始图像特征,这个步骤中,可以对整个图像进行卷积运算以得到整个图像的图像特征,然后再从整个图像的特征图中获取物体的初始图像特征。

接着根据跨域知识图谱信息来确定待检测物体的增强图像特征,这个跨域知识图谱信息包括不同域中待检测物体对应的物体类别之间的关联关系,增强图像特征指示不同域中与待检测物体相关联的其他物体对应的物体类别的语义信息,这种对应关系如下图所示。

3325cc8ba8246d02281dbf913e4c79f6.png

从上图可以看到,这种对应关系即:两个类别在同一个图像中同时出现的概率越大,则认为两个类别之间有关联关系。上图的第一个域中的物体类别包括男人、女人、男孩、女孩和马路;街道第二个域中的物体类别包括人、手提包、书包、汽车和卡车。

我们认为第一个域中的男人、女人、男孩以及女孩与第二个域中的人之间具有关联关系,第一个域中的女人和女孩与第二个域中的手提包具有关联关系。这些关联信息是通过常识来推理出来的,这样的语义信息可以辅助进行图像检测的高级别信息。例如,待检测物体为女人,待检测图像中与女人相关联的其他物体包括手提包,那么,待检测物体的增强图像特征指示的可以是手提包的语义信息。

055abbe23185d34fb7d5c3310068c757.png

最后,我们再来看看这种物体检测方法的整体流程图,待检测图像可以先通过传统的物体检测器进行处理(例如Faster-RCNN网络结构),再提取初始候选区域的初始图像特征以及分类层的参数,并构建域内的区域图。

通过构建域内的区域图,利用域间图卷积网络传播节点上不同域下待检测物体的高级语义表示,得到经过推理推断后的融合了不同域下待检测物体高级语义表示的特征。最后将域内图卷积、域间图卷积经过推理推断后得到的特征投影到相应的待检测物体的高级语义表示中,并进行分类和回归,由此来得到待检测物体的位置信息以及类别信息。

以上就是华为发明的物体检测方法,通过构建跨域知识图谱,可以捕捉到不同待检测物体间的内在关系,由此来提高物体检测方法的效果。这种方法可以应用在复杂场景下,例如在商场以及商业街等区域,可以辅助安保人员对该区域的行人、物体进行检测,例如可以帮助寻找遗失物品以及进行可以物体检测等,有效提高城市安防能力!

关于嘉德

49c43ec4661033d1691da4ca5a46e677.png

深圳市嘉德知识产权服务有限公司由曾在华为等世界500强企业工作多年的知识产权专家、律师、专利代理人组成,熟悉中欧美知识产权法律理论和实务,在全球知识产权申请、布局、诉讼、许可谈判、交易、运营、标准专利协同创造、专利池建设、展会知识产权、跨境电商知识产权、知识产权海关保护等方面拥有丰富的经验。

(校对/holly)

79e1a01781e9000b6355fbf8a6411a4c.png

2.苹果卷入其中?三星显示被要求赔偿前副总裁专利侵权费;

集微网消息,据THE ELEC报道,首尔中央地方法院周五要求Samsung Display赔偿其前任副总裁Donggun Park的专利侵权费用。

2012年,三星电子分拆液晶显示器业务,并成立三星显示器 (Samsung Display)。时任三星液晶业务主管 Donggun Park出任了三星显示器的CEO。

据悉,三星应用于第六代液晶显示器面板的TFT制造技术就是由Donggun Park发明。三星此后也向苹果提供了采用该项技术的面板。

Donggun Park与“老东家”的专利纠纷报道未作详述。但Donggun Park三年前曾声称,三星未对他的发明进行适当的赔偿。他要求三星赔偿1500亿韩元(约合人民币8.8亿元)的专利侵权费。

e36eda4b49f094673c2ad07512ea7397.png

(图源:网络)

据Donggun Park说,三星显示器从这些专利中获利1.9万亿韩元。不过,经首尔中央地方法院判决,三星显示器需支付5717万韩元,并赔偿专利相关的利息费用。

韩媒指出,法院责令的金额只是Donggun Park要求的0.04%。或许这场已经持续多年的专利侵权纠纷还没有结束。(校对/隐德莱希)

79e1a01781e9000b6355fbf8a6411a4c.png

3.苹果重申AR具有巨大潜力并且暗示未来可能出现的设备

在最近接受CNET的斯科特-斯坦恩(Scott Stein)采访时,苹果的增强现实和虚拟现实计划负责人迈克-罗克韦尔(Mike Rockwell)表示,AR在今天存在的设备和明天可能存在的设备中都有巨大的潜力。

他表示:“AR具有巨大的潜力,可以在今天存在的设备和明天可能存在的设备上对人们的生活有所帮助,但我们必须确保它是成功的,对我们来说,最好的方法就是让我们的设备生态系统得以实现,让它成为人们投入时间和精力的一个健康而有利可图的地方。“

之前外界广泛传闻苹果同时开发AR/VR头显和眼镜,但这两款产品预计最早也要到2022年才会发布,苹果继续以较为模糊的词汇来宣传AR/VR技术。多年来,苹果及其CEO蒂姆-库克(Tim Cook)多次将AR称为具有远大深刻意义的技术。

苹果AR高级产品经理Allessandra McGinnis表示,苹果将与盲人和部分失明社区合作,特别是在人员检测方面进行改进。几年以后,AR就像互联网一样会融入我们的生活。今年5月,知名分析师郭明錤预测,苹果眼镜最早将于2022年推出,并提供创新的用户体验。cnbeta

9fc1c77032af894043aa0c16da2603f6.png

更多新闻请点击进入爱集微小程序 阅读

1.集微访谈第7期:华为出售荣耀后,真正的“生存”挑战刚刚开始? 

2.从“传统”到“赋能”,联通如何打造工业互联网的核心能力?;

3.谷歌正在测试一个人工智能系统,帮助视障人士参加跑步比赛 ;

4.GitHub终于修复了Google Project Zero 报告的高危安全漏洞 

5.微软Edge附加组件商店将很快获得安装主题的支持 ;

6.小鹏汽车CEO何小鹏疑似隔空回应偷窃技术传闻 ;

7. 微软开发人员已为Chromium项目贡献至少1835项变更 

8.苹果开售适用于iPhone 12系列机型的MagSafe皮革保护套 ;

9.Windows 10或于明年迎来新款录屏工具和更丰富的PowerToys功能 ;

10.特斯拉+SpaceX总价值超过5000亿美元 马斯克:狂野的时代!;

bac15db85a14d2648c9906ddc55517f9.png

f23d19a452967846f00b9708baf04873.png

97d589c8d766fbe16863a1298d6d69d9.png

d20ec9c2-6130-eb11-8da9-e4434bdf6706.svg

球分享

d30ec9c2-6130-eb11-8da9-e4434bdf6706.svg

球点赞

ad6ae4f9bd33db7cda0360de17cfeea7.gif

球在看

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值