2015年12月_yjh314

12月 11月 10月 09月 03月

转载揭秘 IFTTT 每天处理几十亿事件数据的基础结构

数据对于IFTTT至关重要。我们的 BD 和营销团队依靠数据来做出关键的业务决策。产品团队依靠数据来测试来了解用户是如何时候我的产品的，以做产品决策。数据团队本身依靠数据建立产品，比如Recipe推荐系统和垃圾邮件检测工具。此外，我们的合作伙伴依靠数据来实时获取Channels的性能。因为数据对于IFTTT如此关键，并且我们的服务每天处理几十亿事件，所以我们的数据基础设施必须具有高可扩展性、可

2015-12-31 21:05:34 833

转载 [SDCC讲师专访]阿里王晶昱：云时代的分布式数据库DRDS

王晶昱（花名：沈询），阿里巴巴资深专家，2008年加入淘宝，之后一直在中间件和稳定性平台工作至今。目前负责阿里分布式数据库，之前叫TDDL，现在运用到阿里云上改名为DRDS。此外，他还负责阿里的分布式消息服务(Notify/MetaQ)，以及阿里企业级互联网架构平台的新产品研发工作。　　在大会召开前夕，笔者有幸采访到了王晶昱，请他分享这些年的心路历程以及人生感悟。在他看来，运气很重要，但珍

2015-12-31 11:59:05 806

转载当我谈架构的时候，我谈些什么？

过去一年，业务增长迅猛，架构不断改进，但我却看不清楚架构未来的样子，经过思考悟出一些简单的道理，架构是为业务服务的，一切不以业务为指标的架构都是耍流氓。为什么要谈架构？谈一谈过去一年，自己在建设小米广告平台的一些关于架构收获。最近一年，小米广告的业务飞速发展，架构不断进化，单一业务变成了近10个业务，研发人员也翻了3倍，广告请求流量翻了10倍还多，部署的机器也翻了近8倍，各个业务将

2015-12-31 11:36:38 391

转载千万级到10亿+的疯涨，搜狗商业平台服务化体系实践之路

【编者按】互联网从诞生到现在，网站的规模不断扩大，存储和处理的数据量也远远超出了人们的想象，又随着对信息实时性、多媒体需求大幅增长的现象，互联网架构面临越来越大的挑战。CSDN致力于解决这一问题，在刚刚结束的 SDCC 2015中国软件开发者大会上，特举办了架构专场（上午报报道、下午报道），以及《程序员》电子刊10月B开设了架构专题。在接下来也将继续深耕架构师、服务于开发者，推出更多的大牛访

2015-12-31 11:35:03 901

转载专访任玉刚：从菜鸟到资深工程师的进阶之路

任玉刚，百度公司Android资深工程师，《Android开发艺术探索》作者，热爱分享和开源，常年活跃在CSDN和Github。除此之外，他还是CSDN博客专家，2014十大博客之星。从一名菜鸟演变为资深工程师，在他看来，也有自己的辛酸历程，尽管他已成为一名资深工程师，但他仍然不敢自称为“高手”，因为技术是无止境的，对技术应该抱有一颗敬畏的心理。任玉刚，百度公司Androi

2015-12-31 11:05:31 1292

转载中国互联网技术联盟正式成立京东、美团、 58到家现场分享推荐系统核心技术

12月19日，中国技术开放日暨中国互联网技术联盟（ITA）启动仪式在北京国家会议中心举行。京东技术学院院长阿朱（原明源软件CTO）、美团技术学院院长刘江（原CSDN总编）及来自联盟企业的多位CTO共同见证了这一刻。中国互联网技术联盟（ITA）正式启动京东技术学院院长阿朱（原明源软件CTO）京东技术学院院长阿朱，作为中国互联网技术联盟的发起人之一，在启动

2015-12-31 10:58:08 1810

转载漫谈大型网站架构

以下为正文：大型网站架构从来都不是一个预先定义的架构，而是一个演进式的架构。很少有一个网站从建站开始，就能够因具备大型网站的所有属性而一成不变的，从最简单的LAMP架构，再到基于IOE的大型集中式应用架构，再演变成时下的分布式应用架构，随着网站用户规模的扩大，架构也在不断演进。从实体机到虚拟机再到当前流行的Docker技术，从单机房到同城多机房再到异地多活，从LAMP到J2EE再到各

2015-12-31 10:55:44 349

转载阿里王晶昱谈淘宝双11分布式数据库实战

11月19-21日，SDCC2015中国软件开发者大会在北京顺利召开。大会包含10个主题演讲，9大技术专场论坛及5场特色活动，吸引了1067名参会者现场听讲交流。没有参会的你，通过图文直播专题：2015中国软件开发者大会或点击关键字SDCC，也可一览该技术盛会所带来的技术干货。本文是在大会SDCC专访间，采访了阿里巴巴资深技术专家，DRDS负责人王晶昱，请他谈谈淘宝双11分布式数据库实战。

2015-12-31 10:43:16 2203

转载架构师于小波：魅族实时消息推送架构

系统介绍这个系统数据情况是这样的，实时在线的用户是2500万左右，下面有一个趋势图，从今年1到10月份的都列出来了，这个系统一天PV量是50亿左右，这个系统推送速度可以达到600万条/分钟。数据结构系统架构设计系统架构逻辑上划分，划分为四层，最下面的一个是提供魅族手机的接入。第二层是消息分发服务，主要的作用就是提供上行消息的路由和用户下

2015-12-31 09:23:03 413

转载专访Mycat核心开发成员王金剑：借助Mycat轻松抵御海量并发

Mycat是一个开源的分布式数据库系统，其核心功能是分表分库，即将一个大表水平分割为多个小表，存储在后端MySQL或者其他数据库里。取名Mycat原因一是简单好记，另一个则是希望未来能够入驻 Apache，Apache的开源产品Tomcat也是一只猫。日前，笔者采访了Mycat核心开发成员王金剑，请他解读Mycat的技术特性，Mycat的团队趣闻，以及他的经验分享。在他看来，作为传统数据库开发人员

2015-12-31 09:19:44 433

转载京东商品详情页应对“双11”大流量的技术实践

以下为主题内容：大家来京东打开商品页一般会看到如通用版、闪购、全球购等不同的页面风格，这里面会牵扯到各种各样垂直化的模板页面渲染。以前的解决方案是做静态化，但是静态化一个很大的问题就是页面改版时需要重新全量生成新的静态页。我们有几亿个商品，对于这么多商品，你如果生成页面的话需要跑很多天，而且还无法应对一些突发情况。比如新的《广告法》，需要对一些数据进行清洗，

2015-12-31 09:16:10 629

转载全站 HTTPS 来了

2015-12-31 08:56:20 430

转载艺龙十万级服务器监控系统开发的架构和心得

本文是根据艺龙技术架构总监王鹏程在11月21日在麦思博（msup）有限公司主办的into100沙龙第14期《十万级服务器监控系统开发的架构和心得》演讲中的分享内容整理而成，他认为一切应从简洁出发，不要搞复杂的东西。一、监控系统架构经历了许多公司，监控系统大概都是从无到有，该经历的也都经历了。所谓监控系统，大概的架构如下：◆在服务器布置一个Agent，它负责采集数

2015-12-31 00:11:16 1381

转载为什么IT行业仍然这么火？

编辑点评：IT行业，虽然现在有时会被戏称为“IT民工”，但是IT行业巨大的人才需求和相对容易得到的高薪还是吸引着大量的理科学子。在经历了十年的告诉发展后，IT行业还是潜力满满吗？专家为你来分析。一、什么是IT？IT 这个名词，简要地说它的意思就是信息技术(INFORMATION TECHNOLOGY)，它涵盖的范围很广，举凡处理或者应用到信息技术的产业，诸如银行，咨询，

2015-12-30 23:53:20 7391 1

原创车载终端报警

1、如何模拟车载终端产生报警位： private int makeAlarmFlag() { int s = 0; for (int i = 0; i < 3; i++) { int n = r.nextInt(200); if (n == 100) { int t = r.nex

2015-12-29 10:41:26 1237

原创 redis订阅关闭异常解决

应用程序模块订阅redis运行一段时间出现一直重连Redis服务，日志如下：[2015-12-24 08:30:17,307] ERROR listener.RedisMessageListenerContainer: Connection failure occurred. Restarting subscription task after 5000 ms[2015-12-24 0

2015-12-24 11:55:25 18819 2

原创关于Redis的知识汇总[转]

1. Overview1.1 资料，最好的入门小册子，可以先于一切文档之前看，免费。作者Antirez的博客，Antirez维护的Redis推特。Redis 命令中文版， huangz同学的翻译。Redis设计与实现，又是huangz同学的巨作，深入了解内部实现机制。Redis 2.6源码中文注释版，继续是huangz同

2015-12-24 10:16:02 572

原创 java调用音频插件ffmpeg转换格式

1、调用ffmpeg插件转换wav，抛出如下异常，该异常是jave第三方jar包，在把wav格式转mp3格式出错了2、jave代码在转mp3格式是调用ffmpeg插件3、经测试在window下面是可以正常转换，而在Linux转换不行，直接Shell脚本指令命令转换不支持的编解码，经查看真实车台上报的音频格式是为3gpp 4、使用yum安装ffmpeg组件和关联相关格

2015-12-24 10:00:37 5596 3

原创 Redis常用命令

Redis服务启动n 启动 Redis 服务src/redis-server或者src/redis-server redis.confsrc/redis-server redis.conf 1>log.log 2>errlog.log #1为标准输出，2为错误输出 n 将 Redis 作为 Linux 服务随机启动 vi

2015-12-24 09:25:24 306

转载 java 同步锁（synchronized）

java中cpu分给每个线程的时间片是随机的并且在java中好多都是多个线程共用一个资源，比如火车卖票，火车票是一定的，但卖火车票的窗口到处都有，每个窗口就相当于一个线程，这么多的线程共用所有的火车票这个资源。如果在一个时间点上，两个线程同时使用这个资源，那他们取出的火车票是一样的（座位号一样），这样就会给乘客造成麻烦。比如下面程序：package com.dr.runnable2;cla

2015-12-21 17:50:23 463

Chrome插件Postman_v4.1测试Http接口

Chrome插件Postman_v4.1测试Http接口,支持HTTP的GET和POST、DELETE等提交

2018-08-27

kafka网上三种监控开源软件

三种工具分别是Kafka Web Conslole、Kafka Manager、KafkaOffsetMonitor

2017-08-29

Netty epool引入Soket多个进程监听一个服务端口

2016-04-22

epel-release-6-8.noarch

解决yum install nload 安装过程中可能会抛出异常，如下 Setting up Install Process No package git available. Nothing to do

2016-04-01

centos安装telnet插件与说明

centos直接安装telnet-server-0.17-47.el6.x86_64.rmp会报错 “error: Failed dependencies:xinetd is needed by 解决办法： 1、先安装xinetd包 rpm -ivh xinetd-2.3.14-10.el5.x86_64.rpm 2、启动xinetd service xinetd start 3、启用telnet chkconfig telnet on 4、安装telnet客户端 rpm -ivh telnet-clinet-0.17-47.el6.x86_64.rpm 5、重启xinetd service xinetd start

2016-02-01

centos安装telnet使用

2015-10-19

netty整理的源码

使用了netty等技术实现TCP\UDP的通信协议，和实现HTTP rest接口访问，

2014-11-25

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人