云计算
wangshaner1
这个作者很懒,什么都没留下…
展开
-
JUST技术:如何通过轨迹相似性度量方法,发现新冠易感人群 | 技术前沿
2020年初,一场突如其来的新冠疫情,使得公共卫生安全问题受到了全社会的广泛关注。与此同时,如何及时掌握人与人之间的病毒传播路径,及时发现确诊人员的密切接触者,成为了各地政府疫情防控最迫切的需求。JUST基于大规模轨迹数据,针对易感人群难以发现的问题,开发并提供了关联人群查询功能,通过对轨迹进行匹配挖掘,能够快速找出与确诊人员行动轨迹在时空维度有过“接触”的人群。其中,实现该功能的很重要的一项工作就是:如何衡量两条轨迹的相似性。下文将简要介绍一些常见的轨迹相似性度量方法。轨迹作为一种时空数据[.原创 2020-09-21 19:28:04 · 1606 阅读 · 0 评论 -
Azure Storm入门(一)
近几日刚刚进入Hadoop及其相关产品的世界。发觉从0到有的过程的确非常煎熬。项目中,需要用到一个实时搜索,最开始想用hadoop来弄,发现hadoop适合离线批处理。而对于搜索来说,希望能够完成一个实时处理。经多方打听,storm适合处理实时工作。关于storm的入门文档转载文章:http://www.kangry.net/blog/?type=article&artic原创 2016-01-02 19:16:43 · 1384 阅读 · 0 评论 -
Azure Storm入门(二)—— 事务处理
这是Azure Storm系列文章。此前的文章包括:Azure Storm入门(一)——从一个例子开始此前我们通过一个例子了解了Storm的基本执行流程。这里我们再通过一个例子来探讨一下Storm的事务处理部分。1、文件-》新建-》项目,选择HDInsight-》Storm示例,名字改为StormSample1。注意源码位置应与.sln文件在同一原创 2016-01-08 12:46:06 · 923 阅读 · 0 评论 -
Azure Service、Azure Web、Azure Storm日志机制
兵马未动,粮草先行。程序未果,日志先成。 在学习Azure平台,并用之进行项目托管的过程中,深深感叹程序日志记录的重要性。通过日志,可以知道程序运行情况,发现隐含bug;通过日志,可以挖掘产品的访问情况,进一步提升产品质量。云平台不能很好断点调试,所幸Azure提供了一套完整的日志解决方案。Service日志机制和Azure Web日志机制是记录程序里System原创 2016-03-26 18:08:30 · 2303 阅读 · 0 评论 -
Azure Table深入理解
> 1、同一个Table中的相同Partition Key是否存在同一个文件中?Azure Table为如下所示的三层结构。Stream层是最终数据存放的位置,Partition层对Stream层的数据进行分区(Partition)管理。在Stream层,数据以Extent为单位进行复制。每个Extent由Block组成,单个Extent和Block的大小均有上限。一个St原创 2016-05-04 14:14:41 · 1719 阅读 · 0 评论 -
Comparing Hadoop, Spark, and Storm
Hadoop, Spark, and Storm have become quite popular in recent times as open-source to work with large sets of data. We will learn about the similarities and differences among these frameworks.Hadoo原创 2017-05-22 16:41:41 · 650 阅读 · 0 评论