- 博客(4)
- 资源 (1)
- 收藏
- 关注
RSS订阅转载 数据录入管理系统（大数据）
【来自阿里云词条】Lambda 架构是目前影响最深刻的大数据处理架构，它的核心思想是将不可变的数据以追加的方式并行写到批和流处理系统内，随后将相同的计算逻辑分别在流和批系统中实现，并且在查询阶段合并流和批的计算视图并展示给用户。Lambda的提出者 Nathan Marz 还假定了批处理相对简单不易出现错误，而流处理相对不太可靠，因此流处理器可以使用近似算法，快速产生对视图的近似更新，而批处理系...
2019-11-19 17:02:43
2181
转载 剖析大数据平台的数据采集
转：要在工作过程中加深对目标的理解，之前有个问题，我在一次社区活动中做过一次分享，演讲题目为《大数据平台架构技术选型与场景运用》。在演讲中，我主要分析了大数据平台架构的生态环境，并主要以数据源、数据采集、数据存储与数据处理四个方面展开分析与讲解，并结合具体的技术选型与需求场景，给出了我个人对大数据平台的理解。本文讲解数据采集部分。数据采集的设计，几乎完全取决于数据源的特性，毕竟数据源是整个...
2019-11-19 14:50:28
563
转载 一篇文章让你了解大数据采集技术
大数据开启了一个大规模生产、分享和应用数据的时代，它给技术和商业带来了巨大的变化。麦肯锡研究表明，在医疗、零售和制造业领域，大数据每年可以提高劳动生产率0.5-1个百分点。大数据在核心领域的渗透速度有目共睹，然而调查显示，未被使用的信息比例高达99.4%，很大程度都是由于高价值的信息无法获取采集。因此在大数据时代背景下，如何从大数据中采集出有用的信息已经是大数据发展的关键因素之一，那么什么是大数据...
2019-11-19 10:46:22
601
原创 新起点：难事为之
难事为之昨天，为了付出少量辛勤工作的一个大项目终于中标。在对手眼里的草台班子，结果逆袭成功。而我也要说声再见，把精力投入到自己的事情上来。有朋友问我：创业不难吗？我回了一个字：难但我想，事在人为，如果因为难，就不去尝试，那这一生永远也无法测试自己可以企及的高度。所以，我送自己四个字，作为新的开始：难事为之。...
2019-11-19 10:42:17
109
rdcm3.3-V2016
2020-11-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人