云计算
文章平均质量分 80
忽略一切阻力
这个作者很懒,什么都没留下…
展开
-
虚拟化和云计算:大数据价值的左膀右臂
“滴答”一秒钟过去了。你知道在这一秒钟里面,互联网上发生了什么变化吗?大数据犹如一块大蛋糕,激发起人们投身未来的激情的同时,也给人们当头一棒:现有的架构体系并不足以支撑大数据时代。而在目前来看,发展成熟的虚拟化和当下红的发紫的云计算,似乎成了大数据价值实现的左膀右臂…… “滴答”一秒钟过去了,在互联网上,人们发送了290封电子邮件;亚马逊处理72.9笔订单;人们在Youtube上传时长转载 2014-04-18 22:26:42 · 2038 阅读 · 0 评论 -
Spark SQL Catalyst源码分析之Analyzer
Analyzer位于Catalyst的analysis package下,主要职责是将Sql Parser 未能Resolved的Logical Plan 给Resolved掉。 一、Analyzer构造 Analyzer会使用Catalog和FunctionRegistry将UnresolvedAttribute和UnresolvedRelation转换为catalyst转载 2014-07-28 14:53:42 · 467 阅读 · 0 评论 -
鸡肋的JdbcRDD
spark 今天准备将mysql的数据倒腾到RDD,很早以前就知道有一个JdbcRDD,就想着使用一下,结果发现却是鸡肋一个。 首先,看看JdbcRDD的定义:[plain] view plaincopyprint?* An RDD that executes an SQL query on a JDBC connection a转载 2014-07-28 14:52:05 · 842 阅读 · 0 评论 -
ubuntu 14.04安装OVS虚拟OpenFlow交换机配置总结
一、安装OVSsudo apt-get install openvswitch-controller openvswitch-switch openvswitch-datapath-source(与网上之前的资料相比,没有安装openvswitch-brcompat,提示没有这个包。笔者目前的使用来看没有问题,可能是linux内核或OVS版本变化造成的,不再需要安装?)二、配置OVS虚转载 2014-05-21 21:51:29 · 649 阅读 · 0 评论 -
网络虚拟化技术
网络虚拟化似于服务器虚拟化,可以在一个物理网络上创建多个虚拟网络。网络虚拟化出现的时间并不长,是随着IaaS的出现而出现。IaaS中的核心技术是虚拟化,包括服务器虚拟化,存储虚拟化和网络虚拟化。其中服务器虚拟化和存储虚拟化出现的时间远远早于IaaS的概念,可以说非常成熟,有很多产品。成熟的关键标识就是行业巨头(们)的出现,行业巨头一般会占据绝大多数的市场份额。有一个结论是,在IT行业,转载 2014-06-04 10:25:06 · 791 阅读 · 0 评论 -
免费好用的web应用托管平台
1.前言曾经很久以前,想找一个免费的空间部署一个属于自己的技术博客真是太难了,使用过SAE,但是很快就面临收费了,后面也就不了了之了。目前自己又找到一个免费的PAAS平台,可以部署各种语言的web应用,那就是京东的PAAS平台京东云擎jae,网址是jae.jd.com点击打开链接.2.初体验我自己使用没有看帮助手册,根据提示注册成为开发者,然后在就控制台界面创建了一个简单的应用转载 2014-05-13 20:45:35 · 612 阅读 · 0 评论 -
微软下一代云环境Web开发框架ASP.NET vNext预览
微软在2014年5月12日的TechEd大会上宣布将会发布下一代ASP.NET框架ASP.NET vNext的预览。此次发布的ASP.NET框架与以前相比发生了根本性的变化,凸显了微软“云优先”(cloud-first)的新战略思想。微软员工Scott Hanselman发布博客对ASP.NET vNext进行了简要介绍。以下为其博客的翻译。原文:http://www.hanselma转载 2014-05-17 12:23:52 · 544 阅读 · 0 评论 -
java反射机制与动态代理
在学习HadoopRPC时,用到了函数调用,函数调用都是采用的java的反射机制和动态代理来实现的,所以现在回顾下java的反射和动态代理的相关知识。一、反射JAVA反射机制定义: JAVA反射机制是java程序在运行状态中,对于任意一个类,都能够知道这个类的所有属性和方法;对于任意一个对象,都能够调用它的任意一个方法;这种动态获取的信息以及动态调用对象的方法的功能称为java语言的反射机转载 2014-05-10 21:55:10 · 578 阅读 · 0 评论 -
HDFS追本溯源:租约,读写过程的容错处理及NN的主要数据结构
1. Lease 的机制:hdfs支持write-once-read-many,也就是说不支持并行写,那么对读写的互斥同步就是靠Lease实现的。Lease说白了就是一个有时间约束的锁。客户端写文件时需要先申请一个Lease,对应到namenode中的LeaseManager,客户端的client name就作为一个lease的holder,即租约持有者。LeaseManager维护转载 2014-05-07 22:46:52 · 522 阅读 · 0 评论 -
Docker源码分析之——Docker Client的启动与命令执行
在上文Docker源码分析之——Docker Daemon的启动 中,介绍了Docker Daemon进程的启动。Docker Daemon可以认为是一个Docker作为Server的运行载体,而真正发送关于docker container操作的请求的载体,在于Docker Client。本文从Docker源码的角度,分析Docker Client启动与执行请求的过程。转载 2014-09-19 08:24:13 · 1041 阅读 · 0 评论