伯克利开源 Confluo 替代 Kafka;ofo:现场退押与线上无异

(给技术最前线加星标,每天看技术热点)

转自:开源中国、solidot、cnBeta、腾讯科技、快科技等

【技术资讯】

0、伯克利开源 Confluo,吞吐量是 Kafka 的 4 到 10 倍

近日伯克利 RISE Lab 开源了一个多数据流实时分布式分析系统 Confluo,它即是一个网络监控和诊断框架,也可以作为时序数据库和发布订阅消息系统。

640?wx_fmt=png

源码地址:

https://github.com/ucbrise/confluo

当下,类似基于终端主机的网络监控系统、IoT 设备传感器程序等应用,其后端的服务器每秒都可以捕获数千万个数据点。这些数据被用于在线查询,实现可视化与监控,或者用于离线查询,进行故障分析和系统优化。这样的使用场景下,就需要实时监控和分析工具支持,这些工具通常支持高吞吐量数据提取、低延迟在线查询和低开销的离线查询。

虽然目前已经存在一些用于高吞吐量数据提取的数据结构,它们可以支持丰富的在线和离线查询,但是高吞吐量与查询能力目前来看还是互斥的。在从多个数据流提取数据时,查询需要更新多个数据结构,包括原始数据、聚合统计信息和物化视图。但是用于支持这些查询的数据结构往往具有较高的更新开销,而且无法维持大多数应用程序所需的数据提取速率。而另一方面,可以维持高数据提取速率的数据结构往往只支持非常简单的查询。

640?wx_fmt=png

Confluo 正是为了应对这种情况而产生的,它是一个致力于同时实现高吞吐量数据提取和富有表现力的离线/在线查询的系统。

Confluo 性能强悍,支持:

  • 来自多个数据流的数百万个数据点的高吞吐量并发写入

  • 毫秒级的在线查询

  • 使用最少 CPU 资源的 ad-hoc 查询

不同场景下对 Confluo 进行性能测试,结果显示:

  • 作为一个网络监控和诊断框架,Confluo 能够在单核上以线路速率(10Gbps 链路)执行数千个触发器和数十个过滤器。

  • 作为一个时序数据库,与其它诸如 CorfuDB、TimescaleDB 和 BTrDB 等先进的时序数据库相比,Confluo 的吞吐量提高了 2 到 20 倍,写入延迟降低了 2 至 10 倍,时间区间查询延迟降低了 5 至 20 倍。

  • 作为一个发布订阅消息系统,Confluo 的吐量是 Kafka 的 4 到 10 倍。

640?wx_fmt=png

更详细的分析:

https://rise.cs.berkeley.edu/blog/confluo-millisecond-level-queries-on-large-scale-streaming-data

1、5G 标准推迟了,全部完成要到 2020 年 6 月

12月18日消息,就在全球都在加速部署5G,纷纷表示将要在2019年或2020年商用5G的时候。近日3GPP却宣布5G标准完结时间推迟了,预计全部完将推迟到2020年6月!据悉,5G标准分为R15、R16两个阶段,R15 NR NSA(新空口非独立组网)标准早已在2017年12月完成,R15 NR SA(新空口独立组网)标准在今年6月完成,只剩R15 Late Drop标准,原计划是要在今年12月份完结。

640?wx_fmt=jpeg

但现在3GPP宣布R15 Late Drop、R15 Late Drop ASN.1分别要推迟到到2019年3月份才能完成。

尽管3GPP表示不会以任何方式影响5G的部署, 但R16标准原定于2019年年第3季度开始,现在将在第4季度进行,R16标准完成时间也要从2019年12月延后到2020年3月,R16 ASN.1则要到2020年6月。

2、微软拥抱 Python

在微软内部,Python 从一个不受重视的语言变成了香饽饽。在微软工作的 Python 开发者 Steve Dower 发布博文讲述了 Python 如何在公司内部流行起来的。

2010 年,微软的 Python 开发者人数稀少而且任人摆布。但过去八年,众多的微软产品都包含了 Python 支持,一些最新产品甚至只支持 Python,部分关键工具也是用 Python 编写的,微软正积极投资于 Python 语言及其社区。

Steve Dower 学生时代参与了 Python Tools for Visual Studio (PTVS)这一微软开源工具的开发,项目经理后来邀请他来公司当暑期实习生,一年之后成为微软的全职开发者。他所在团队一开始人数非常少,他们也很低调。到了 2018 年,他们为 Python 骄傲,开发工具 Visual Studio 和 Visual Studio Code 都支持 Python,他们还雇佣了五名 Python 语言的核心开发者,积极参与世界各地的 Python 活动。

【业界资讯】

0、ofo 退押排队新政:现场退押与线上无异,推荐线上申请

36氪讯,ofo称,自2018年12月18日起,凡在app内提交线上申请退押金的用户,后台系统会根据申请提交的顺序进行相关信息审核与收集,核实完毕后用户将进入退押金序列,ofo将按顺序退款;如有用户到公司现场进行登记,ofo会将收集到的相关信息按时间先后顺序并入线上退押金序列中; 如有线下登记的用户此前已经发起退款申请,则按此前的队列时间信息为准。

640?wx_fmt=jpeg

据腾讯一线,位于ofo总部的中关村互联网中心,几百位前来退押金的ofo用户在这里排队等待退押金。已经办完手续的用户称,现场并不能直接退押金,用户需填写一张表,包括身份证与手机号码等信息,ofo承诺1-3个工作日退还押金。

1、京东数字科技控股股比变更,刘强东股权减少为第二大股东

36氪讯,天眼查资料显示,京东数字科技控股近日更新了股权结构,法人刘强东的股权从16.67%变更为14.02%。变更后,宿迁东泰锦荣投资管理中心(有限合伙)以16.13%的股权成为京东数字科技的第一大股东,刘强东位列第二。

640?wx_fmt=jpeg

2、为救锤子科技,罗永浩或曾接触百度、华为、阿里,寻求接盘

据第一财经报道,罗永浩已先后接触过百度、华为、阿里等方面,寻求接盘,但与前两者均未谈妥,与阿里方面也就价格方面陷入僵局。华为消费者BG高层证实,与罗永浩之前有所接触,但并无具体收购计划。而一位接近阿里方面的消息人士表示,阿里方面也曾经与锤子科技接触,但评估发现其负债情况并不乐观,具体收购方案仍在商榷之中。

对此,阿里方面回应36氪称:不予置评。华为方面相关人士回应称没听说,百度方面目前暂未对此事进行回应。

觉得这些资讯有帮助?请转发给更多人

关注 技术最前线 加星标看 IT 要闻

640?wx_fmt=png

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值