Zato学习笔记2 入门教程1

最新推荐文章于 2024-03-30 10:20:30 发布

weixin_34341229

最新推荐文章于 2024-03-30 10:20:30 发布

阅读量641

点赞数

文章标签： python json 前端 ViewUI

原文链接：https://my.oschina.net/u/618083/blog/197472

版权

2019独角兽企业重金招聘Python工程师标准>>>

概览

本文将指引你建立一个整合了3个外部应用的简单的服务，通过HTTP和ZeroMQ来传输，通过JSON和XML来交换数据

服务是什么？
服务是一个功能，相当于一个函数或方法，但服务运行的层次更高，函数和方法是代码层面的接口(使用APIs时一般是引入一些代码)，而服务是系统层面的（通过网络协议如HTTP访问）

一个原子的和可重用的服务可用于构建一个在线的中间件和后端应用

服务通过一些协议被调用或接受连接，如： plain HTTP, SOAP, JSON, AMQP, JMS WebSphere MQ, ZeroMQ, SQL, and FTP(S).

Zato结合Redis提供了一个用于执行周期性任务的计划任务管理器

服务在安全认证方面使用 HTTP Basic Auth, WS-Security 和 technical accounts.

你可以通过命令行界面，API和Web admin面板来管理Zato

你可以从本教程学到什么？

我们将完成下面几件事：

通过HTTP协议接收JSON和XML输入
从2个系统中调用HTTP JSON服务
实现JSON格式基于ZeroMQ的可配置的通知机制
从Redis中取得业务规则

在教程结束时你能很好的了解Zato的特性，如：命令行接口，Web管理界面，热部署，统计等。

虽然这些只是Zato中的很少一部分知识，但是会给你一个完整的概念

消息流

service-complete
我们从一个最简单银行应用开始：

一个客户端应用希望通过CUST_ID得到某个客户的更多信息
- 客户的姓氏和名字
- 最后一次交易时间
- 最后一次的交易金额
客户数据存储在CRM系统中
交易信息则保存在其它地方
对于某些客户类型，在客户进行任何操作时都通知欺诈检测系统

上图中Service和Redis颜色一样，是因为他们都在Zato集群中，而其它的不属于Zato

客户端应用(Client App)是什么我们不讨论,它可以用很多前端技术实现，本文中的客户端用Curl来模拟

快速建立一个Zato集群

开始之前，你需要安装好了Redis和PostgreSQL，这两样东西是外部组件，没有打包到Zato里面，所以你要单独安装。你也可以使用Oracle替换PostgreSQL，这里我们还是使用PostgreSQL。

ubuntu下可以简单的使用apt-get install redis-server和apt-get install postgresql来安装

安装好Redis和Prostgres并启动
Redis不需要用户,Postgres需要用下面的命令配置一下

$ sudo su - postgres # OS X users may skip it
$ createuser --no-superuser --no-createdb --no-createrole zato1
$ createdb --owner=zato1 zato1
$ psql --dbname zato1 --command="ALTER ROLE zato1 WITH PASSWORD 'zato1'"

接下来我们快速建立一个学习用的集群,先做些准备:
* 一个空目录($path)
* PostgreSQL的IP,端口,数据库和账号密码($odb_host, $odb_port, $odb_db_name, $odb_user and $odb_password)
* 用于连接Redis的IP,端口,密码($kvdb_host, $kvdb_port and $kvdb_password)
好了,现在可以运行下面的命令,代入上面准备好的参数

注意Redis密码默认为空
$ zato quickstart create $path \
postgresql $odb_host $odb_port $odb_user $odb_db_name \
$kvdb_host $kvdb_port --verbose
代入后运行:

$ zato quickstart create ~/tmp/qs-1/ \
postgresql localhost 5432 zato1 zato1 \
localhost 6379 --verbose

ODB database password (will not be echoed):
Enter the odb_password again (will not be echoed):

Key/value database password (will not be echoed):
Enter the kvdb_password again (will not be echoed):
[1/8] Certificate authority created
[2/8] ODB schema created
[3/8] ODB initial data created
[4/8] server1 created
[5/8] server2 created
[6/8] Load-balancer created
Superuser created successfully.
[7/8] Web admin created
[8/8] Management scripts created
Quickstart cluster quickstart-34657 created
Web admin user:[admin], password:[esou-kozo-unda-snon]
Start the cluster by issuing the /home/dsuch/tmp/qs-1/zato-qs-start.sh command
Visit https://zato.io/support for more information and support options
$

注意到Web admin user:[admin], password:[esou-kozo-unda-snon]没,这个账号密码用于登录刚建立的web admin系统，密码是个随机的密码，你可以用zato update password命令修改

看看我们用zato quickstart create生成了哪些东西:

一个身份认证系统
2个服务器
在服务器前面有个HA负载均衡
一个web admin面板和一个admin账号
ODB结构放在Postgres和Redis中
一些用于启动或停止环境的脚本

到这里,我们通过命令搭建了一个完整的环境

后面我们会使用的一些重要TCP端口如下:

Port	说明
11223	负载均衡使用的HTTP端口(外面应用通过它调用你开发的服务)
17010	server1的HTTP端口
17011	server2的HTTP端口
8183	web admin的HTTP端口(在浏览器中用admin用户登录)

quickstart-ports
负载均衡和servers可以运行在不同的主机上,本教程中把这些都放在了本机中.

虽然这只是个教程,但真实环境中同样可以这样做,到时只将’server1’需更名为’dev1’,然后手动增加和配置更多的’server’

通过CUrl调用服务

此刻,你需要确认Redis和PostgreSQL都正常并且允许Zato连接,你能通过下面的命令检测:

$ zato check-config /path/to/server1
SQL ODB connection OK
Redis connection OK
$

如果你的输出和上面不一样,则下面的./zato-qs-start.sh会失败,所以请务必确认一下.

好了,我们运行zato-qs-start.sh把Zato跑起来:

$ ./zato-qs-start.sh
Starting the Zato quickstart environment
Running sanity checks
[1/6] Redis connection OK
[2/6] SQL ODB connection OK
[3/6] Load-balancer started
[4/6] server1 started
[5/6] server2 started
[6/6] Web admin started
Zato quickstart environment started
Visit https://zato.io/support for more information and support options
$

Zato内置了一些有用的功能,其中一个是zato.ping,它会在Zato启动时自动加载,你可以使用Curl访问它(下面的输出稍微格式化了下)

$ curl localhost:11223/zato/ping -d '{}'
{"zato_env":
  {"details": "", "result": "ZATO_OK", "cid": "K215495307960446051245422023713428938487"},
 "zato_ping_response": {"pong": "zato"}}
$

zato.ping的响应是JSON格式.

我们能看到没有错误发生 (ZATO_OK)
cid作为一个标识能够协调跨多个系统的服务

热部署你的第一个服务

开启你最爱的IDE来建立我们的第一个Zato服务
保存下面的代码到my_service.py文件

from zato.server.service import Service

class GetClientDetails(Service):
    def handle(self):
        self.log_input()

每个服务都是zato.server.service.Service的子类
handle(self)是服务需要实现的唯一的方法,是服务的核心
log_input是服务可以访问的一个helper方法,你能想像,log_input会输出所有的输入数据到server日志中

代码保存好了,我们现在就可以热部署它.

说到这里,我们有几种方法使代码生效,热部署是其中一种

通过命令行或web admin面板,你将一个服务推送到集群中一个服务器,Zato将自动复制该服务到所有节点,不需要任何重启,更新一个服务也是一样.

要从命令行热部署一个服务你需要拷贝Python模块到pick-up目录

本教程中你可以在$path/server1/pickup-dir和$path/server2/pickup-dir中任选一个,都不会有问题,另一个目录会自动同步

好了,选择一个目录拷贝模块:

$ cp my_service.py $path/server1/pickup-dir

现在,每个server的日志文件中(./logs/server.log)会出现下面的内容

INFO - zato.hot-deploy.create:33 - Uploaded package id:[1], payload_name:[my_service.py]

一个服务可以在多个独立的通道,不同的安全配置,传输协议,数据格式下被使用,所以你需要明确的告诉Zato外部程序怎样调用服务,我们用浏览器打开http://localhost:8183/在web admin中进行配置

还记得前面生成的admin账号的密码吗?不记得了可以参考https://zato.io/docs/admin/cli/update-password.html重置密码
web-admin-login
在主菜单点击Services,选择建立的集群,输入get-client搜索服务,如下图:
web-admin-search
虽然不能在外部访问,但已经可以证实我们部署的服务已经存在

通过HTTP暴露一个服务并调用

在web admin中,转到Connections -> Channels -> Plain HTTP,如下图
web-admin-channels
web-admin-channels-new
所有字段都应该是自解释的,在web admin手册中有详细介绍,强调服务命名的重要性是为了解耦一个服务可能对应多个通道的问题
web-admin-channels-new-success
至此,通道已经建立,所有server都自动更新了它们的HTTP配置,我们可以用Curl来测试一下

$ curl localhost:11223/tutorial/first-service -d '{}'
$

这里没有任何输出,是因为我们的服务返回的None,输入数据被记录到某一个server的日志中了,我们可以用grep命令查找确认一下
日志中我们可以看到

INFO - {u'impl_name': u'my_service.GetClientDetails',
u'name': u'my-service.get-client-details',
u'cid': u'K226134078656111264088116403218497665719',
u'invocation_time': datetime.datetime(2013, 5, 14, 7, 39, 47, 417059),
u'job_type': None, u'data_format': u'json',
u'slow_threshold': 99999,
u'request.payload': '',
u'wsgi_environ': {'SERVER_PROTOCOL': 'HTTP/1.1',
      'SERVER_SOFTWARE': 'gunicorn/0.16.1',
      'SCRIPT_NAME': '',
      'wsgi.input': &lt;gunicorn.http.body.Body object at 0x4396a50&gt;,
      'REQUEST_METHOD': 'GET',
      'HTTP_HOST': 'localhost:11223',
      'PATH_INFO': '/tutorial/first-service',
      'wsgi.multithread': False,
      'QUERY_STRING': '',
      'HTTP_CONNECTION': 'close',
      'HTTP_ACCEPT': '*/*',
      'HTTP_USER_AGENT': 'curl/7.22.0',
      'wsgi.version': (1, 0),
      'REMOTE_PORT': '42325',
      'RAW_URI': '/tutorial/first-service',
      'REMOTE_ADDR': '127.0.0.1',
      'wsgi.run_once': False,
      'wsgi.errors': &lt;open file '&lt;stderr&gt;', mode 'w' at 0x7f34db2fe270&gt;,
      'wsgi.multiprocess': False,
      'wsgi.url_scheme': 'http',
      'gunicorn.socket': &lt;socket at 0x42e9290 fileno=25 sock=127.0.0.1:17011
                             peer=127.0.0.1:42325&gt;,
      'SERVER_NAME': 'localhost',
      'SERVER_PORT': '11223',
      u'zato.http.response.headers':
        {u'X-Zato-CID': u'K226134078656111264088116403218497665719'},
      'wsgi.file_wrapper': &lt;class gunicorn.http.wsgi.FileWrapper at 0x202e390&gt;},
      u'environ': {},
      u'user_msg': u'',
      u'usage': 27,
      u'channel': u'http-soap'}

这就是第一部分.你建立了一个集群,一个服务,在热部署该服务后调用成功,以这一部分为基础,下一部分我们把焦点放在业务功能上.

转载于:https://my.oschina.net/u/618083/blog/197472