python与RPC

介绍一下python 的rpc 解决方案。

在google的doc上有共享的ppt文档 地址http://docs.google.com/present/view?id=dfz4688f_0gvdx5cc8&revision=_latest&start=0&theme=blank&cwj=true

 

 

全文摘抄如下：

 

主要内容

0  动态语言特性， python 简介   。

1  以 python 自 带的一个 RPC 库   ， SimpleXMLRPCServer  来 说明   什么是 RPC,  以及 RPC 工作 过程。

2  通 过 RPC 的工作 过程讨论它的本质。以及动态语言在运用 RPC 上的 优势。

3 RPC 的 传输协议，   UDP,TCP,HTTP,XXXP.

4 RPC 的数据 协议 , xml ， json ，各种私有二 进制协议（ hessian amf3 … . ）。   大公司的 google 的   protocolbuffer  ，   facebook 的   thrift 。

5  个人推荐   一个精巧   好用   开源   的 RPC ----phprpc

 

0.1  动态语言特性， python 举例说明

1  弱 类型

a = 10 a =  ‘ string ’   a = []  变量可以改变类型   不用声明。   往往可以看成是同一父 类，如 python 的所有 类型在 c 语言级别上都是 Pyobject 这个类型

2  解 释执行

python 一行一行的解 释执行，其动态语言也很相似（ js  一段一段解 释执行）。 Python lua ，   ruby  等会生成字 节代码， python 的 dis 模 块可以显示字节代码。

3  虚 拟机

解 释性的语言往往面对的不是 cpu 具体硬件机器，所以一般都有虚 拟机（解释器）。 Javascript  ？ 对动态语言的深入了解   就是了解他的虚机。

4 自省能力 强

弱 类型的特点也就等价于它具有强大的自省能力，强大的自省能力允许了动态改变类型数据的基础。这个为 RPC 的 应用带来了很多的便利。主要是介绍这点。

0.2python 的自省与 动态

0  查看自己的类型   type （）

1 查看自己的属性   dir （）   ，   __dict__  查看帮助   help （）。

2 设置获得自己的属性 getattr （重 载 __getattr__ ）   setattr hasattr  。

3  弱 类型的多态更加广泛。例如 print  可以 对任何对象调用。这里用到

可以像函数一 样被调用的类。一个类也可以被 call  只要重 载 __call__

1.1 自在 电池的 python

一个最 简单的 RPC  服 务器端

from SimpleXMLRPCServer import SimpleXMLRPCServer

def add(a , b):

return a+b

server = SimpleXMLRPCServer(("localhost", 8000))

server.register_function(add)

server.serve_forever()

测试客户端

from xmlrpclib import ServerProxy

server = ServerProxy("http://localhost:8000")

try:

ret = server.add(30,90)

print 'result:', ret

print 'result type:', type(ret)

except Exception as ex:

print "exception", ex

1.2  服 务器客户端都干了什么？

1  从客 户端打印出通讯的数据：

发向服务器的：

POST /RPC2 HTTP/1.0

Host: localhost:8000

User-Agent: xmlrpclib.py/1.0.1 (by  www.pythonware.com )

Content-Type: text/xml

Content-Length: 189

<?xml version='1.0'?>

<methodCall>

<methodName>add</methodName>

<params>

<param><value><int>30</int></value></param>

<param><value><int>90</int></value></param>

</params>

</methodCall>

 

 

2  服 务器返回的数据：

HTTP/1.0 200 OK'

Server: BaseHTTP/0.3 Python/2.6.1

Date: Mon, 20 Jul 2009 05:33:09 GMT

Content-type: text/xml

Content-length: 123

<?xml version='1.0'?>

<methodResponse>

<params><param><value><int>120</int></value></param></params>

</methodResponse>

特点：   http 协议传输协议， xml 做数据 协议应用协议。

因 为 http 只作 为传输协议   所以只使用了 post 方法。

 

 

3 Xml 作 为数据协议是如何生成的？

客 户端在调用   server.add(30,90)  如何生成 xml 接口 调用描述？

重 载方法：   def __getattr__(self, name)  ，   点操作符会 调用它。返回对象的一个属性。因为 python 的函数也是 对象所以   __getattr__  返回的是一个函数 对象。   函数 对象可以重载它的 __call__ 方法   来达到函数 调用时的行为。如图：

server.add(30,90)  ➔   server.__getattr( ‘ name ’ )  ➔   methodobj(30,90)  ➔   method.__call__(30,90)  ➔   生成 xml  ， send request  ➔   收到 xml 数据   ➔ 生成 python 对象 return 。

这个过程动态语言和静态语言的区别在于，动态语言是自省能力生成的接口描述调用，而静态语言 rpc 往往需要手工来 编写这个调用描述。所以动态语言可以像写本地函数调用一样调用远程函数。   给程序员最好的用户感受。

RPC 本 质上是一个链接程序   ld 。

1  找到函数地址

2  确保参数正确（因 为动态语言弱类型   所以 这点表现不明显，只是确保参数个数正确   ， 类型正确属于语义上的由程序员保证。）

回 忆 c 语言的编译链接。当调用一个外部库函数的时候，只写符号在文件里，链接程序确保找到这个函数加载进来，确定程序运行时这个函数代码段的内存地址。

而且 链接程序在链接之前会检查函数声明，来确保函数的参数类型和个数正确（ c90 之前   还是只有 K&R c  链接时   是不 检查参数的）。

泛开来想， 计算机内所谓远近，都是相对的   ，硬 盘相对于内存来说是远的，网络相对于内存也是远的。调用一个文件函数，底层也是调用文件系统这个服务然后把硬盘数据读入硬盘。调用远程函数也是如此。只是“寻址”的过程有所不同。其实都是链接技术。

 

 

3.1RPC  传输协议与应用协议

 

1  传输协议：

RPC 的特点之一是向程序 员隐藏网络层。   使得 调用远程方法像调用本地方法一样。   所以 传输协议也就可以有 N 多的 选择。   常 见   HTTP ，   TCP ， udp  。甚至可以用 邮件协议。总之这点对程序员要保持透明。

也就是 说程序员即使不会网络编程   没有玩 过 socket  都不妨碍他 进行服务器的远程调用。

2  应用协议：

有很多数据格式可以采用   ， xml  ， json ，   amf3 ，   yaml  ……   为了速度和空间考虑很多 rpc 采用了二 进制协议。不管怎样这一层对程序员也应当是透明的。

所有 这些使得程序员彻底脱离了重复的“网络建设”。而且保证了代码的分离。

4.1Protocolbuffer

这是 google 公司使用的 标准数据格式。 Google 的 产品都是用的它

Protocol buffers are now Google's  lingua franca  for data  –   at time of writing, there are 48,162 different message types defined in the Google code tree across 12,183.proto files. They're used both in RPC systems and for persistent storage of data in a variety of storage systems.

http://code.google.com/intl/zh-CN/apis/protocolbuffers/docs/overview.html

因 为 google 公司只使用   python java c++  所以 这个东东也只支持这三种语言。

特点：