自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

网易数帆社区博客

网易数帆社区是网易数帆旗下,由网易实践者社区、网易资深产品技术和运营团队一起打造的开放式技术社区

  • 博客(123)
  • 收藏
  • 关注

原创 浅谈K8S cni和网络方案

此文已由作者黄扬授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验。在早先的k8s版本中,kubelet代码里提供了networkPlugin,networkPlugin是一组接口,实现了pod的网络配置、解除、获取,当时kubelet的代码中有个一个docker_manager,负责容器的创建和销毁,亦会负责容器网络的操作。而如今我们可以看到基本上kubelet的启动参数中,n...

2018-11-30 17:00:09 1627

原创 网易云易盾发布多国家多语种内容安全服务,助力中国互联网出海

中国互联网企业迎来“大航海时代”,越来越多的中国互联网产品走向海外,特别是东南亚的印尼、泰国等移动互联网新兴市场。据《中国移动互联网出海环境全揭秘报告》,2017年Q4中国互联网出海企业就达到720多家,出海应用2268个,2018年出海应用数量更是呈井喷态势。出海产品已从纯工具类,逐步深入为游戏、文娱类、金融支付、电商服务类等诸多品类,从单纯的工具输出,到现在运营和商业模式并重,整体产业升级,跨...

2018-11-30 15:10:41 231

原创 如何着手商业数据分析?

欢迎访问网易云社区,了解更多网易技术产品运营经验。数据分析,无外乎是收集数据,统计数据,分析数据,分享结果,前面大家把商业数据分析的原因、目的和方法说得都很清楚了,在这里可以增加一点,就是分享结果,商业数据分析的可视化。毕竟商业数据分析,本身就是在通过数据分析得到一些有用的信息,所以在分析和展示环节是很重要的,使用现有的工具就可以解决这个问题,并且能够提供完整的分析和展示的功能,可以尝试使用网易有...

2018-11-30 13:40:17 225

原创 开发富文本编辑器的一些经验教训

此文已由作者刘诗川授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验。最近我们的产品有一个需求是要在PC端做一个面向用户的书评编辑器,让用户和编辑在蜗牛读书上能方便快捷的编辑和产出一些优质的文章,它的主要难点就是富文本编辑器部分。这虽然是个业务需求,但是做业务的同时也要兼顾技术,所以在跟需求商量好不支持IE8之后,决定采用Vue来作为前端部分的技术架构。前端架构webpack配置...

2018-11-30 10:51:40 3707

原创 数据可视化的发展前景、商业/职业前景?

欢迎访问网易云社区,了解更多网易技术产品运营经验。可视化分析已经成为一项流行的业务,电商、金融、物流、政府等很多行业都在使用可视化技术来支撑业务优化、战略决策。然而,从应用与设计的角度来看,本人更愿意谈敏捷 BI 的概念。敏捷 BI 就是以业务人员为中心,让业务人员更理解业务,了解需求,可以自助分析。对 IT 人员来说,他可以在管控权限的基础上,从大量枯燥的提数需求中解放出来。对业务人员来说,他可...

2018-11-30 09:35:04 932

原创 市场调研中如何做数据分析?

欢迎访问网易云社区,了解更多网易技术产品运营经验。市场调研是一个系统的具有逻辑的行为,其中的数据分析更是占据了市场调研的工作量中的一大部分,对于市场调研的必要性和目的性,前面说得很清楚,不做搬运了,在这里需要补充强调说明一点:就是调研数据的可视化!调研结束了,数据也分析了,但是怎么样才能让老板看着明白,看着爽呢,那就需要数据可视化了。对于数据可视化,比较推荐使用成熟的商业可视化BI工具,如果有智能...

2018-11-29 17:40:13 1311

原创 当前火热的短视频,背后有着哪些黑科技技术?

欢迎访问网易云社区,了解更多网易技术产品运营经验。虽然以技术积累为底气,但也要实话实说:随着云服务让技术易于获得,技术的商业价值如何实现,对于企业的发展更加至关重要,短视频也是如此。再谈技术本身。“黑科技”通常是指人工智能之类的高大上的东西,但对于抖音、快手、秒拍这样的业务来说,我认为,美颜“锦上添花”的意味更甚,“雪中送炭”的技术,还是视频云体系和内容审核体系,前者决定能否上车,后者决定车能开多...

2018-11-29 17:20:15 2836

原创 一文解锁BILIBILI、ACFUN等弹幕网站是如何审核视频

欢迎访问网易云社区,了解更多网易技术产品运营经验。人工审核对于A站和B站都是很重要的。AcFun稿件审核通行标准(V1.1) 表明,要审核的东西非常多,除了内容本身的合规性、调性,还有画质音质、撞车问题、视频信息问题等,而A站也确实采用人工审核。B站审核情况参考:从B站、爱奇艺、映客的IPO上市,看国内视频公司的内容审核现状再说说视频网站审查内容的一般思路:视频网站的内容审核工作主要有两个目的,一...

2018-11-29 17:10:41 1691

原创 【译文】驱动系统方法:四步设计出好的数据产品

翻译:克迪欢迎访问网易云社区,了解更多网易技术产品运营经验。 在过去几年中, 我们看到了许多基于预测建模的数据产品。这些产品的范围从天气预报到推荐引擎, 再到比航空公司本身更准确地预测航空公司航班时间的服务。但这些产品仍然只是在做预测, 而不是问他们基于预测后下一步需要采取什么行动。人们对预测技术可以是有趣很感兴趣,从基础数学的角度这种技术很有深度。但我们最终还是需要采取下一步行动继续前行。这项技...

2018-11-29 16:21:02 365

原创 Android 开发怎样做代码加密或混淆?

欢迎访问网易云社区,了解更多网易技术产品运营经验。在大公司怎么做android代码混淆的?发现他们的软件用apktool反编译居然没看到classes.dex文件和当前安卓APP加固到底该如何做到防篡改?这两个问题中有过相应回答,现搬运要点过来。网易资深安全工程师钟亚平在今年的安卓巴士全球开发者论坛上做了《安卓APP逆向与保护》的演讲(完整演讲内容请见这里:一文了解安卓APP逆向分析与保护机制),...

2018-11-29 15:41:05 1243

原创 Android通知栏介绍与适配总结(上篇)

此文已由作者黎星授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验。由于历史原因,Android在发布之初对通知栏Notification的设计相当简单,而如今面对各式各样的通知栏玩法,谷歌也不得不对其进行更新迭代调整,增加新功能的同时,也在不断地改变样式,试图迎合更多人的口味。本文总结了Android通知栏的版本迭代过程,在通知栏开发过程中所遇到的各种各样的坑,以及一些解决技巧...

2018-11-29 09:52:53 1077

原创 如何开展手机的渗透测试?

欢迎访问网易云社区,了解更多网易技术产品运营经验。手机的渗透测试可以分为3点:1. 同Web安全渗透测试类似,需要对Server API和终端应用进行安全测试;2. OS本身的特性或安全问题;3. 应用被逆向破解,业务逻辑和信息被盗取;第一块的问题也不少,很多做移动开发的工程师并不一定有Web安全的经验。很多App都存在各种逻辑漏洞,比如App的流程依赖于响应内容且没有做校验。这一类的问题可以通过...

2018-11-28 15:40:51 517

原创 如何防止Unity3D代码被反编译?

欢迎访问网易云社区,了解更多网易技术产品运营经验。网易云易盾移动游戏安全技术专家陈士留在2018年Unity技术路演演讲内容中对这个问题有过比较详细的介绍,摘录如下:防止Unity3D代码被反编译其实就是常见的Unity手游风险中的破解风险。一、Unity面临的破解风险Unity的破解风险主要有Unity mono脚本解密、Unity il2cpp脚本解析、Assetbundle资源篡改这三项。1...

2018-11-28 15:22:34 3847

原创 加固apk的开发者最常面对的十种问题

欢迎访问网易云社区,了解更多网易技术产品运营经验。因为工信部对移动App应用安全过检要求日益增多,不加固大都达不到工信部的要求,同时开发者加固App大都是为了防止以下10个检测项出现问题,影响App上架。1.程序代码安全“很多人可能认为这一项技术含量并不大,其实这项在App上线时,检测方是有一些要求的”,网易资深安全开发工程师朱星星认为,在App上线时,开发者最好准备相关的《法律声明及隐私政策》、...

2018-11-28 15:01:01 569

原创 常见的三种撞库方法

欢迎访问网易云社区,了解更多网易技术产品运营经验。在安全领域向来是先知道如何攻,其次才是防。在介绍如何防范网站被黑客扫描撞库之前,先简单介绍一下什么是撞库:撞库是黑客通过收集互联网已泄露的用户和密码信息,生成对于的字典表,尝试批量登录其他网站后,得到一系列可以登录的用户。因为很多用户在不同网站使用的账号密码大多是相同的,因此黑客可以通过获取用户在A网站的账户从而尝试登录B网站。那么碰见撞库之后,我...

2018-11-28 14:50:57 38131 1

原创 数据分析融入至BI工具的新思路

欢迎访问网易云社区,了解更多网易技术产品运营经验。很认同一种说法:BI对企业的作用不是BI本身,而是数据本身。那么BI的作用和意义是干什么的呢-是让有意义的数据自己说出自己意义的工具。BI发展至今,已经不是最初的商业智能局限在数据分析和数据挖掘层面了,他还包含了对趋势,对未来的预测,从没有价值的数据中挖掘出价值,使用机器学习,强化学习,神经网络等等更加高层次的算法来进行分析计算,期望得出数据分析所...

2018-11-28 14:31:10 196

原创 网页的验证码的字母为什么总是那么难辨认

欢迎访问网易云社区,了解更多网易技术产品运营经验。首先来谈谈验证码的机制,验证码作为一种人机识别手段,其终极目的,就是区分正常人和机器的操作。而对于没有验证码的场景,比如用户登陆,则机器可以同时、大批量的发起请求,一来系统可能扛不住,二来机器可以不断变换密码来尝试破解用户的密码,实现盗号。虽然,图形类的验证码都是要求输入字符和数字,但看似只是简单的几个输入操作,而实际是人非常聪明,在人已知的知识体...

2018-11-28 14:10:17 615

原创 四步详解数据分析套路

欢迎访问网易云社区,了解更多网易技术产品运营经验。为什么会缺思路呢?其实是没有形成自己的套路,就像产品经理一样,要有微观、中观和宏观套路,然而没思路是属于没有中观套路,形成自己的套路或者使用别人的套路,就能够让你在没有任何思路的情况下却能够得出一个具有实用价值而且能够进一步使用的成果。废话结束,进入正题。数据分析中抱有目的性很重要,但是使用工具也很重要,不要停留在什么都需要自己动手的时代,要记住我...

2018-11-28 14:00:14 330

原创 小企业需要数据分析吗?

欢迎访问网易云社区,了解更多网易技术产品运营经验。在回答“小企业是否需要数据分析”这个问题之前,不妨先想想下面两个问题:你在电脑上建过表格吗?你基于表格中的数据画过柱形图、饼状图、折线图吗?可能你没又意识到,这些操作已经是数据分析了,只是程度比较浅而已。虽然这个问题好像已经有答案了,但还是觉得有点别扭,这么简单也是数据分析?我们先说说什么是数据分析。简单来说,数据分析就是利用一些统计分析方法对收集...

2018-11-28 13:51:02 1386

原创 什么是微服务架构,该从哪些方面深入理解?

欢迎访问网易云社区,了解更多网易技术产品运营经验。简单地说,微服务架构就是以业务域或业务功能为边界,将一个大而全的应用拆分为可以独立开发,独立部署,独立测试,独立运行的一组小的应用,并且使用轻量级,通用的机制在这组应用间进行通信。拿着显微镜看微服务架构,品读 Martin Fowler 的定义,可能出不来,不妨用望远镜来看一看——如同黄仁宇喜欢从数千年历史的纵深来论述历史的发展,如同唐德刚提出历史...

2018-11-28 11:21:06 215 1

原创 什么是 DDoS 攻击?

欢迎访问网易云社区,了解更多网易技术产品运营经验。全称Distributed Denial of Service,中文意思为“分布式拒绝服务”,就是利用大量合法的分布式服务器对目标发送请求,从而导致正常合法用户无法获得服务。通俗点讲就是利用网络节点资源如:IDC服务器、个人PC、手机、智能设备、打印机、摄像头等对目标发起大量攻击请求,从而导致服务器拥塞而无法对外提供正常服务,只能宣布game ov...

2018-11-28 11:02:02 834

原创 kubernetes性能测试实践

本文经作者张文娟授权发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。概述随着容器技术的发展,容器服务已经成为行业主流,然而想要在生产环境中成功部署和操作容器,关键还是容器编排技术。市场上有各种各样的容器编排工具,如Docker原生的Swarm、Mesos、kubernetes等,其中Google开发的kubernetes因为业界各大巨头的加入和开源社区的全力支撑,成为了容器编排的首选。简...

2018-11-23 17:10:11 1362 1

原创 为什么 kubernetes 天然适合微服务 (3)

此文已由作者刘超授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验 四、Kubernetes 本身就是微服务架构 基于上面这十个设计要点,我们再回来看 Kubernetes,会发现越看越顺眼。首先 Kubernetes 本身就是微服务的架构,虽然看起来复杂,但是容易定制化,容易横向扩展。如图黑色的部分是 Kubernetes 原生的部分,而蓝色的部分是网易云为了支撑大规模高并发应...

2018-11-23 11:52:06 265

原创 为什么 kubernetes 天然适合微服务 (2)

此文已由作者刘超授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验 三、微服务化的十个设计要点 微服务有哪些要点呢?第一张图是 SpringCloud 的整个生态。 第二张图是微服务的 12 要素以及在网易云的实践。 第三张图是构建一个高并发的微服务,需要考虑的所有的点。  接下来细说微服务的设计要点。 设计要点一:API 网关。 在实施微服务的过程中,不免要面临服务的聚合与拆分...

2018-11-23 11:12:14 188

原创 为什么 kubernetes 天然适合微服务 (1)

此文已由作者刘超授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验 最近总在思考,为什么在支撑容器平台和微服务的竞争中,Kubernetes 会取得最终的胜出,事实上从很多角度出发三大容器平台从功能方面来看,最后简直是一摸一样。参考Docker, Kubernetes, DCOS 不谈信仰谈技术容器平台选型的十大模式:Docker、DC/OS、K8S谁与当先? 经过一段时间的思索...

2018-11-23 11:01:33 289

原创 11月24日杭州大数据技术沙龙来袭,网易大数据、网易严选、蚂蚁金服大咖亲身经验分享!

欢迎访问网易云社区,了解更多网易技术产品运营经验。 从“互联网+、移动互联网、AI+”等概念的更迭,大家对数据的认知越来越清晰。数据既是线上场景的产物,反之又作用线上场景的持续优化。“数据将改变互联网”、“数据的量变将带来世界的质变”众说纷纭,但是大数据技术怎样在行业中落地实践并发挥作用成为让人深思的问题。11月24日,由网易大数据、DataFun社区联合举办的大数据沙龙来到杭州,并邀...

2018-11-22 17:10:13 572

原创 kubernetes1.9管中窥豹-CRD概念、使用场景及实例

欢迎访问网易云社区,了解更多网易技术产品运营经验。前言默认读者有kubernetes基础概念的背景知识,因此基础概念例如有状态、pod、Replica Sets、Deployments、statefulsets等不在此文详细阐述。 可以看我之前的一些关于kubernetes的文章:kubernetes 1.3管中窥豹- RS(Replica Sets)kubernetes pod&cont...

2018-11-22 14:40:14 1621

原创 浅谈 kubernetes service 那些事 (下篇)

欢迎访问网易云社区,了解更多网易技术产品运营经验。五、K8s 1.8 新特性——ipvsipvs与iptables的性能差异随着服务的数量增长,IPTables 规则则会成倍增长,这样带来的问题是路由延迟带来的服务访问延迟,同时添加或删除一条规则也有较大延迟。不同规模下,kube-proxy添加一条规则所需时间如下所示: 可以看出当集群中服务数量达到5千个时,路由延迟成倍增加。添加 IPTable...

2018-11-22 14:30:16 185

原创 浅谈 kubernetes service 那些事(上篇)

欢迎访问网易云社区,了解更多网易技术产品运营经验。一、问题首先,我们思考这样一个问题:访问k8s集群中的pod, 客户端需要知道pod地址,需要感知pod的状态。那如何获取各个pod的地址?若某一node上的pod故障,客户端如何感知?二、k8s service什么是service是发现后端pod服务;是为一组具有相同功能的容器应用提供一个统一的入口地址;是将请求进行负载分发到后端的各个容器应用上...

2018-11-22 13:20:12 534

原创 终于有人把云计算、大数据和人工智能讲明白了! (2)

此文已由作者刘超授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验。3大数据时代,众人拾柴火焰高当数据量很小时,很少的几台机器就能解决。慢慢的,当数据量越来越大,最牛的服务器都解决不了问题时,怎么办呢?这时就要聚合多台机器的力量,大家齐心协力一起把这个事搞定,众人拾柴火焰高。对于数据的收集:就IoT来讲,外面部署这成千上万的检测设备,将大量的温度、湿度、监控、电力等数据统统收集上...

2018-11-22 11:30:13 5948 5

原创 微服务化之服务拆分与服务发现

作者:刘超一、服务拆分的前提说到微服务,服务拆分是绕不过去的话题,但是微服务不是说拆就能拆的,有很多的前提条件,需要完成前面几节所论述的部分。首先要有一个持续集成的平台,使得服务在拆分的过程中,功能的一致性,这种一致性不能通过人的经验来,而需要经过大量的回归测试集,并且持续的拆分,持续的演进,持续的集成,从而保证系统时刻处于可以验证交付的状态,而非闭门拆分一段时间,最终谁也不知道功能最终究竟有没有...

2018-11-22 10:37:42 312

原创 终于有人把云计算、大数据和人工智能讲明白了!(1)

此文已由作者刘超授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验。今天跟大家讲讲云计算、大数据和人工智能。为什么讲这三个东西呢?因为这三个东西现在非常火,并且它们之间好像互相有关系:一般谈云计算的时候会提到大数据、谈人工智能的时候会提大数据、谈人工智能的时候会提云计算……感觉三者之间相辅相成又不可分割。但如果是非技术的人员,就可能比较难理解这三者之间的相互关系,所以有必要解释一...

2018-11-22 10:30:12 6689 7

原创 Kubernetes网络方案的三大类别和六个场景

欢迎访问网易云社区,了解更多网易技术产品运营经验。本文章根据网易云资深解决方案架构师 王必成在云原生用户大会上的分享整理。今天我将分享个人对于网络方案的理解,以及网易云在交付 Kubernetes 场景时的一些网络实践。本文分为两部分:第一部分:常见容器网络方案;第二部分:网易云基于 VPC 深度集成的 Kubernetes 网络实践。常见容器网络方案常见容器网络方案分类  常见的容器网络方案可以...

2018-11-22 10:10:49 999

原创 微服务化之缓存的设计

此文已由作者刘超授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验。在高并发场景下,需要通过缓存来减少数据库的压力,使得大量的访问进来能够命中缓存,只有少量的需要到数据库层。由于缓存基于内存,可支持的并发量远远大于基于硬盘的数据库。所以对于高并发设计,缓存的设计时必不可少的一环。一、为什么要使用缓存为什么要使用缓存呢?源于人类的一个梦想,就是多快好省的建设社会主义。多快好省?很多...

2018-11-22 10:01:10 312

原创 金融创新业务基于容器云的微服务化实践

此文已由作者刘超授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验。云计算发展至今,从普通的虚拟化到 OpenStack 再到容器云,如何为客户提供一个满意的解决方案成为一件越来越具有挑战性的事情。虚拟化或者云计算的解决方案,大多从基础设施层面,讲清楚自己的产品就可以了。而容器云和微服务化的解决方案,则不但要了解客户的基础设施层,也需要了解客户的架构层,常常要和客户的技术人员真正...

2018-11-22 09:50:14 166

原创 The Beam Model:Stream & Tables翻译(上)

作者:周思华欢迎访问网易云社区,了解更多网易技术产品运营经验。本文尝试描述Beam模型和Stream & Table理论间的关系(前者描述于数据流模型论文、the-world-beyond-batch-streaming101和the-world-beyond-batch-streaming-102,后者被MartinKleppmann和JayKreps推广)。事实证明,Steam &am...

2018-11-21 11:20:14 120

原创 SparkSQL大数据实战:揭开Join的神秘面纱

欢迎访问网易云社区,了解更多网易技术产品运营经验。Join操作是数据库和大数据计算中的高级特性,大多数场景都需要进行复杂的Join操作,本文从原理层面介绍了SparkSQL支持的常见Join算法及其适用场景。Join背景介绍Join是数据库查询永远绕不开的话题,传统查询SQL技术总体可以分为简单操作(过滤操作-where、排序操作-limit等),聚合操作-groupby以及Join操作等。其中J...

2018-11-21 10:40:14 127

原创 细说Mammut大数据系统测试环境Docker迁移之路

欢迎访问网易云社区,了解更多网易技术产品运营经验。前言最近几个月花了比较多精力在项目的测试环境Docker迁移上,从最初的docker“门外汉”到现在组里的同学(大部分测试及少数的开发)都可以熟练地使用docker环境开展测试工作,中间也积累了一些经验和踩过不少坑,借此2017复盘的机会,总结一下整个环境的搭建过程,希望可以给其他有志于向docker迁移的项目提供些许参考,同时也想跟其他docke...

2018-11-21 10:30:18 730

原创 [译] 关于 SPA,你需要掌握的 4 层 (1)

此文已由作者张威授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验。原文地址:The 4 Layers of Single Page Applications You Need to Know原文作者:Daniel Dughila译文出自:掘金翻译计划本文永久链接:https://github.com/xitu/gold-miner/blob/master/TODO1/archi...

2018-11-21 10:10:57 356

原创 基于 cookie 的 node 中间层灰度流程的一些思考

此文已由作者申国骏授权网易云社区发布。欢迎访问网易云社区,了解更多网易技术产品运营经验。前言关于灰度发布的意义此处就不进行介绍了,可以先读下这两篇文章《微服务部署:蓝绿部署、滚动部署、灰度发布、金丝雀发布》《灰度发布:灰度很简单,发布很复杂》灰度方案说白了就是,分配一定比例或者筛选有特殊身份的用户,让这部分用户提前试用产品的最新版本,以便尽早发现问题也可将问题的影响最小化。不同公司都有自己独特的灰...

2018-11-20 18:52:32 256

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除