基础服务
文章平均质量分 93
网易数帆大数据
网易数智旗下全链路大数据生产力平台,聚焦全链路数据开发、治理及分析,为企业量身打造稳定、可控、创新的数据生产力平台,服务“看数”、“管数”、“用数”等业务场景,盘活数据资产,释放数据价值。
展开
-
网易传媒基于 Arctic 的低成本准实时计算实践
Hive表里可见的数据是经过 Optimize 过后的数据,Optimize 由 AMS 来调度,Flink 任务异常执行文件的读写合并,并且把 Metric 上报给 AMS, 由 AMS 来把这一次 Optimize 执行的结果 Commit,AMS 天然知道这一次 Optimize 推进到了哪次 Transaction, 并且 AMS 本身也存储了 Transaction 对应的 Watermark,也就知道 Hive 表水位推进到了哪里。但在实时入湖的场景下,下游任务缺乏一个感知数据是否就绪的途径。原创 2022-11-09 16:44:59 · 449 阅读 · 0 评论 -
技术商业年度盛会,网易数字+大会7月16日我们准时见!
7月16日,网易在数字化、数字新基建领域最具影响力的盛事,“网易数字+大会”即将开幕!不同领域的技术精英、商业领袖,及云计算、大数据、人工智能、IoT从业者将一同相聚,以“数字引擎·重构未来”为主题,探讨新型数字化技术,解析在新基建浪潮下企业转型之路,共同打造数字经济新优势。全新的“网易数字+大会”是“网易云创大会”的2.0升级版。2020年,在加速应用数字技术,推动企业的数字化转型、高质量发展成为广泛社会共识的特殊一年,数字+大会又将有什么看点?014周岁网易云即将首次重大升级调...转载 2020-06-22 13:52:02 · 322 阅读 · 0 评论 -
相较于 Dubbo,Spring Cloud 有何优缺点?
这是个老生常谈的问题,每个技术团队在业务转型微服务化架构的时候都纠结过这个选型问题;首先,dubbo 之前确实在 2012 年的时候发布了最后一个版本 2.5.3 并且停止维护更新,在2017年的时候又”起死回生“,官方宣布重启更新,并重点投入开源建设;终于在 2017 年 9 月,新发布了 2.5.4 版本,这中间"沉寂"的 5 年的时间究竟是出于什么原因,我们无需关注,幸运的是,Dubbo...原创 2020-03-24 18:00:28 · 853 阅读 · 0 评论 -
Dubbo曝反序列化漏洞,网易轻舟提供全方位解决方案
2020年2月13日,Apache Dubbo官方发布了一条反序列化漏洞(漏洞编号:CVE-2019-17564)的通告,漏洞等级中危。轻舟微服务虽然支持Apache Dubbo,但由于在架构设计上的优化,可保证用户不会受此次漏洞影响。漏洞原理及影响范围Apache Dubbo支持多种通信协议,官方默认为Dubbo协议,当用户选择HTTP协议进行通信时,攻击者可以利用该漏洞在目标网站上远程...原创 2020-02-18 11:11:39 · 2471 阅读 · 0 评论 -
从自动化到智能化,网易杭研的AIOps探索与实践
在大数据时代下,我们借助机器学习、数据仓库、大数据平台等大数据技术手段,将运维产生的数据进行分析、处理,得出最佳运维策略,以期实现对故障的事先干预,将风险降低到最低,从而降低运维成本,提升运维效率,最终实现运维智能化。本文分享网易杭州研究院在这个领域的实践经验。本文由作者授权发布,未经许可,请勿转载。作者:席晶晶,网易杭州研究院运维与账号中心工程师一、运维面临问题与挑战眼下,随着...原创 2019-12-10 14:56:22 · 1084 阅读 · 0 评论 -
特征选择之经典三刀
本文由作者授权发布,未经许可,请勿转载。作者:侯江畔,网易杭州研究院算法工程师数据决定了模型的上限,而算法只是去逼近这个上限。如何从海量特征中科学提取关键特征呢?特征选择(Feature Selection)和特征提取(Feature Extraction)是特征工程(Feature Engineering)的两个重要子内容。其中特征提取是指从数据中找到可以表征目的的属性,而特征选择是从候选...原创 2019-12-10 14:54:13 · 1295 阅读 · 0 评论 -
网易发起“疾风”智造IoT联盟,深化“互联网+先进制造业”发展
7月26日,2019网易云创峰会在杭州拉开序幕,本次峰会以“连接•洞察•进化”为主题,汇聚行业领袖、技术大咖及业界代表,探讨技术演进与行业应用趋势,研商生态合作升级、共赢未来的道路。上午的主论坛中,网易杭州研究院、网易严选IoT事业部、恩智浦半导体(NXP)公司、博世(BOSCH)公司、上海博泰PATEO公司、深圳高新兴物联科技有限公司、上海同麦自动化系统技术有限公司、杭州乐舜科技有限公司、杭州物...原创 2019-07-26 14:06:10 · 1372 阅读 · 2 评论 -
首提完整中台方法论,网易云全链路中台引爆产业“核聚变”升级
当前数字经济领域最受关注的技术趋势当属中台,到底中台对企业发展的意义何在,企业应当如何建设中台?7月26日,网易云在本届云创峰会上给出了完整的答案,从组织、技术、方法论的角度系统阐述了网易杭州研究院的中台实践与成果,并发布了全链路大数据产品和轻舟微服务产品,分别为企业构建数据中台和在线业务中台提供完整的技术和方法论支持。在主题演讲中,网易副总裁、网易杭州研究院执行院长汪源首次介绍了网易对中台的理...原创 2019-07-26 13:26:14 · 961 阅读 · 0 评论 -
轻舟助力企业数字化转型进入深水区,网易云荣获“杰出数字化创新企业奖”
近日,以“数字中国,智创未来”为主题的2019中国数字化创新展暨首席信息官峰会在上海举办,网易云解决方案总监李鲁受邀参加本次峰会并在大数据与云计算专场论坛分享了轻舟微服务平台如何为业务研发提效,从而助力企业数字化转型进入“深水区”。鉴于轻舟在多家客户的成功落地,网易云荣获主办方颁发的“2019年杰出数字化创新企业奖”。网易云对企业数字化转型的理解根据Gartner的定义,数字化转型是指企业利用...原创 2019-05-23 15:17:45 · 771 阅读 · 0 评论 -
网易公司与南京江北新区签约,将共建三大基地
4月22日,南京江北新区迎来互联网巨头,网易公司与江北新区签署合作协议,将共同推进“网易南京数字产业创新发展项目”。该项目围绕云计算、大数据、互联网+教育、科技创新、文化创意等领域展开对南京江北新区的数字产业赋能,共建“数字产业创新基地”、“青年独角兽实训基地”、“科技文创产业基地”三大基地。(网易公司与南京江北新区签约现场)“基于网易公司多年来积累的创新经验、技术能力和运营资源,结合江北...原创 2019-04-23 17:20:45 · 1719 阅读 · 0 评论 -
破解中小企业“生产、设计、销售”三大痛点,网易推出“时尚工业互联网”
复杂经济形势下,中小微企业往往比大型企业面临更多的生存挑战,如何通过降低成本、提升设计和销售来抵御风险,成为横梗在浙江29.2万家中小微三类工业企业的共同难题。近日,在平湖举行的浙江省工业互联网平台现场推广会上,网易杭州研究院首席解决方案专家郭立航针对会场众多服装行业中小企业,提出一条网易特色的“时尚工业互联网”路线。“基于严选模式在工业制造领域的实践,以及网易多年的互联网技术发展,网易沉淀了完...原创 2019-04-02 10:01:23 · 2057 阅读 · 0 评论