saltstack—return与job管理

最新推荐文章于 2021-11-07 22:08:31 发布
最新推荐文章于 2021-11-07 22:08:31 发布
阅读量92 收藏
点赞数
文章标签： saltstack
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/neawalke/article/details/121162672
版权

目录

SaltStack之return与job管理

SaltStack组件之return

return组件可以理解为SaltStack系统对执行Minion返回后的数据进行存储或者返回给其他程序，它支持多种存储方式，比如用MySQL、MongoDB、Redis、Memcache等，通过return我们可以对SaltStack的每次操作进行记录，对以后日志审计提供了数据来源。目前官方已经支持30种return数据存储与接口，我们可以很方便的配置与使用它。当然也支持自己定义的return，自定义的return需由python来编写。在选择和配置好要使用的return后，只需在salt命令后面指定return即可。

[root@master ~]# salt node1 sys.list_returners
node1:
    - carbon
    - couchdb
    - etcd
    - highstate
    - local
    - local_cache
    - mattermost
    - multi_returner
    - pushover
    - rawfile_json
    - slack
    - slack_webhook
    - smtp
    - splunk
    - sqlite3
    - syslog
    - telegram

return流程

return是在Master端触发任务，然后Minion接受处理任务后直接与return存储服务器建立连接，然后把数据return存到存储服务器。关于这点一定要注意，因为此过程都是Minion端操作存储服务器，所以要确保Minion端的配置跟依赖包是正确的，这意味着我们将必须在每个Minion上安装指定的return方式依赖包，假如使用Mysql作

使用mysql作为return存储方式

在所有minion上安装python3-PyMySQL模块

[root@master ~]# salt '*' pkg.install python3-PyMySQL

部署一台mysql服务器用作存储服务器

[root@node2 ~]# dnf -y install mariadb-server mariadb
Updating Subscription Management repositories.
Unable to read consumer identity
This system is not registered to Red Hat Subscription Management. You can use subscription-manager to register.
CentOS-8 - AppStream - mirrors.aliyun.com                63 kB/s | 9.6 MB     02:36    
Salt repo for RHEL/CentOS 8 PY3                         6.8 kB/s | 245 kB     00:35    
软件包 mariadb-server-3:10.3.28-1.module_el8.3.0+757+d382997d.x86_64 已安装。
软件包 mariadb-3:10.3.28-1.module_el8.3.0+757+d382997d.x86_64 已安装。
依赖关系解决。
无需任何处理。
完毕！

#创建数据库和表结构
[root@node2 ~]# mysql -uroot -p123

MariaDB [(none)]> CREATE DATABASE  `salt`
    ->   DEFAULT CHARACTER SET utf8
    ->   DEFAULT COLLATE utf8_general_ci;
Query OK, 1 row affected (0.000 sec)

MariaDB [(none)]> use salt
Database changed

MariaDB [salt]> CREATE TABLE `jids` (
    ->   `jid` varchar(255) NOT NULL,
    ->   `load` mediumtext NOT NULL,
    ->   UNIQUE KEY `jid` (`jid`)
    -> ) ENGINE=InnoDB DEFAULT CHARSET=utf8;

MariaDB [salt]> CREATE TABLE `salt_returns` (
    ->   `fun` varchar(50) NOT NULL,
    ->   `jid` varchar(255) NOT NULL,
    ->   `return` mediumtext NOT NULL,
    ->   `id` varchar(255) NOT NULL,
    ->   `success` varchar(10) NOT NULL,
    ->   `full_ret` mediumtext NOT NULL,
    ->   `alter_time` TIMESTAMP DEFAULT CURRENT_TIMESTAMP,
    ->   KEY `id` (`id`),
    ->   KEY `jid` (`jid`),
    ->   KEY `fun` (`fun`)
    -> ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
Query OK, 0 rows affected (0.006 sec)

MariaDB [salt]> grant all on salt.* to salt@'%' identified by 'salt';
Query OK, 0 rows affected (0.000 sec)

MariaDB [salt]> flush privileges;
Query OK, 0 rows affected (0.001 sec)

配置minion

[root@node1 ~]# vim /etc/salt/minion
mysql.host: '192.168.8.132'
mysql.user: 'salt'
mysql.pass: 'salt'
mysql.db: 'salt'
mysql.port: 3306

[root@node1 ~]# systemctl restart salt-minion.service

在Master上测试存储到mysql中

[root@master ~]# salt node1 test.ping --return mysql
node1:
    True

在数据库中查询

MariaDB [salt]> select * from salt_returns\G
*************************** 1. row ***************************
       fun: test.ping
       jid: 20211105075423272846
    return: true
        id: node1
   success: 1
  full_ret: {"success": true, "return": true, "retcode": 0, "jid": "20211105075423272846", "fun": "test.ping", "fun_args": [], "id": "node1"}
alter_time: 2021-11-05 23:54:26
1 row in set (0.001 sec)

job cache

job cache流程

return时是由Minion直接与存储服务器进行交互，因此需要在每台Minion上安装指定的存储方式的模块，比如python-mysql，那么我们能否直接在Master上就把返回的结果给存储到存储服务器呢？

答案是肯定的，这种方式被称作 job cache 。意思是当Minion将结果返回给Master后，由Master将结果给缓存在本地，然后将缓存的结果给存储到指定的存储服务器，比如存储到mysql中。

使用mysql作为job cache数据存储

部署一台mysql服务器用作存储服务器

[root@node2 ~]# dnf -y install mariadb-server mariadb
Updating Subscription Management repositories.
Unable to read consumer identity
This system is not registered to Red Hat Subscription Management. You can use subscription-manager to register.
CentOS-8 - AppStream - mirrors.aliyun.com                63 kB/s | 9.6 MB     02:36    
Salt repo for RHEL/CentOS 8 PY3                         6.8 kB/s | 245 kB     00:35    
软件包 mariadb-server-3:10.3.28-1.module_el8.3.0+757+d382997d.x86_64 已安装。
软件包 mariadb-3:10.3.28-1.module_el8.3.0+757+d382997d.x86_64 已安装。
依赖关系解决。
无需任何处理。
完毕！

#创建数据库和表结构
[root@node2 ~]# mysql -uroot -p123

MariaDB [(none)]> CREATE DATABASE  `salt`
    ->   DEFAULT CHARACTER SET utf8
    ->   DEFAULT COLLATE utf8_general_ci;
Query OK, 1 row affected (0.000 sec)

MariaDB [(none)]> use salt
Database changed

MariaDB [salt]> CREATE TABLE `jids` (
    ->   `jid` varchar(255) NOT NULL,
    ->   `load` mediumtext NOT NULL,
    ->   UNIQUE KEY `jid` (`jid`)
    -> ) ENGINE=InnoDB DEFAULT CHARSET=utf8;

MariaDB [salt]> CREATE TABLE `salt_returns` (
    ->   `fun` varchar(50) NOT NULL,
    ->   `jid` varchar(255) NOT NULL,
    ->   `return` mediumtext NOT NULL,
    ->   `id` varchar(255) NOT NULL,
    ->   `success` varchar(10) NOT NULL,
    ->   `full_ret` mediumtext NOT NULL,
    ->   `alter_time` TIMESTAMP DEFAULT CURRENT_TIMESTAMP,
    ->   KEY `id` (`id`),
    ->   KEY `jid` (`jid`),
    ->   KEY `fun` (`fun`)
    -> ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
Query OK, 0 rows affected (0.006 sec)

MariaDB [salt]> grant all on salt.* to salt@'%' identified by 'salt';
Query OK, 0 rows affected (0.000 sec)

MariaDB [salt]> flush privileges;
Query OK, 0 rows affected (0.001 sec)

开启master端的master_job_cache

[root@master ~]# yum -y install python3-PyMySQL

[root@master ~]# vim /etc/salt/master
#job_cache: True
master_job_cache: mysql
mysql.host: '192.168.8.132'
mysql.user: 'salt'
mysql.pass: 'salt'
mysql.db: 'salt'
mysql.port: 3306

[root@master ~]# systemctl restart salt-master.service

在数据库服务器中清空表内容

[root@master ~]# salt node1 cmd.run 'df -h'
node1:
    Filesystem             Size  Used Avail Use% Mounted on
    devtmpfs               883M     0  883M   0% /dev
    tmpfs                  901M   40K  901M   1% /dev/shm
    tmpfs                  901M  8.7M  892M   1% /run
    tmpfs                  901M     0  901M   0% /sys/fs/cgroup
    /dev/mapper/rhel-root   17G  2.4G   15G  15% /
    /dev/nvme0n1p1        1014M  179M  836M  18% /boot
    tmpfs                  181M     0  181M   0% /run/user/0

在数据库中查询

MariaDB [salt]> select * from salt.salt_returns\G
*************************** 1. row ***************************
       fun: cmd.run
       jid: 20211105082821979139
    return: "Filesystem             Size  Used Avail Use% Mounted on\ndevtmpfs               883M     0  883M   0% /dev\ntmpfs                  901M   40K  901M   1% /dev/shm\ntmpfs                  901M  8.7M  892M   1% /run\ntmpfs                  901M     0  901M   0% /sys/fs/cgroup\n/dev/mapper/rhel-root   17G  2.4G   15G  15% /\n/dev/nvme0n1p1        1014M  179M  836M  18% /boot\ntmpfs                  181M     0  181M   0% /run/user/0"
        id: node1
   success: 1
  full_ret: {"cmd": "_return", "id": "node1", "success": true, "return": "Filesystem             Size  Used Avail Use% Mounted on\ndevtmpfs               883M     0  883M   0% /dev\ntmpfs                  901M   40K  901M   1% /dev/shm\ntmpfs                  901M  8.7M  892M   1% /run\ntmpfs                  901M     0  901M   0% /sys/fs/cgroup\n/dev/mapper/rhel-root   17G  2.4G   15G  15% /\n/dev/nvme0n1p1        1014M  179M  836M  18% /boot\ntmpfs                  181M     0  181M   0% /run/user/0", "retcode": 0, "jid": "20211105082821979139", "fun": "cmd.run", "fun_args": ["df -h"], "_stamp": "2021-11-05T08:28:22.522379"}
alter_time: 2021-11-06 00:28:20

job管理

获取任务的jid

[root@master ~]# salt node1 cmd.run 'uptime' -v
Executing job with jid 20211105083102466745		#此处就是此命令的jid
-------------------------------------------

node1:
     00:31:01 up  2:39,  1 user,  load average: 0.01, 0.01, 0.00

通过jid获取此任务的返回结果

[root@master ~]# salt-run jobs.lookup_jid 20211105083102466745 
node1:
     00:31:01 up  2:39,  1 user,  load average: 0.01, 0.01, 0.00
NeaWalke
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
daima.rar_return_wage_电费管理
09-14
设计是实现工资管理的类Salary，该类的形式如下： Class Salary{ Double Wage,Subsidy,Rent,WaterFee,ElecFee Pulic: Salary(……){初始化工资数据的各分项} Salary(){初始化工资数据的各分项数据为0} Void ...
saltstack return mysql_SaltStack之return与job管理
weixin_30905039的博客
02-11 93
1. SaltStack组件之returneturn组件可以理解为SaltStack系统对执行Minion返回后的数据进行存储或者返回给其他程序，它支持多种存储方式，比如用MySQL、MongoDB、Redis、Memcache等，通过return我们可以对SaltStack的每次操作进行记录，对以后日志审计提供了数据来源。目前官方已经支持30种return数据存储与接口，我们可以很方便的配置与使...
SaltStack之Job管理和Runner（八）
weixin_33739627的博客
11-09 99
SaltStack之Job管理和Runner 配置文件/etc/salt/master cachedir: /var/cache/salt/master # cache路径 keep_jobs: 24 # job保存时间 salt执行模块官方文档  https://docs.saltstack.com/en/latest/ref/modules/all/index.html   如何将m...
saltstack之Return data to a mysql server
weixin_34111819的博客
12-14 87
本文章是参照官网和网上一些资料。多数以官网为主。首先是需要安装mysql数据库，我这里已经安装好了一个mysql数据库的分支叫MariaDB数据库，我就使用现成的。听说操作和mysql的操作一样。其实我就是想试试这个数据库··依赖条件：所有minion端要安装 。MySQL-pythonmaturity:maturedepends:python-mysqldbplatform...
saltstack (4) 用mysql存储 salt 返回值
weixin_34320159的博客
12-20 112
Salt返回接收器（returner）允许把minion的响应保存在各种数据存储或不同的位置，甚至把响应内容显示在命令行。Returner可以用来扩展Salt，和新的、定制的接口和支持新的数据库进行通信。本例用mysql存储salt返回值操作如下：[root@redis01-jp ~]#yum -y install mysql-connector-python[root@...
saltstack return mysql_10-saltstack 数据返回到MySQL
weixin_42283048的博客
01-28 74
官方文档：https://docs.saltstack.com/en/latest/ref/returners/all/salt.returners.mysql.html#module-salt.returners.mysql1.MySQL服务器操作# 创建数据库CREATE DATABASE `salt`DEFAULT CHARACTER SET utf8DEFAULT COLLATE utf...
对python中return与yield的区别详解
09-17
主要介绍了对python中return与yield的区别详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
Mssql 存储过程 返回值Return 与output 区别与应用.docx
11-07
Mssql 存储过程 返回值Return 与output 区别与应用，示例说明
详解C语言中return与exit的区别
12-31
详解C语言中return与exit的区别 1，exit用于在程序运行的过程中随时结束程序，exit的参数是返回给OS的。main函数结束时也会隐式地调用exit函数。exit函数运行时首先会执行由atexit()函数登记的函数，然后会做一些...
SaltStack之return与job管理
itxiaoyu_lang的博客
07-08 211
SaltStack之return与job管理1. SaltStack组件之returnreturn流程使用mysql作为return存储方式安装python3模块部署一台mysql服务器用作存储服务器配置minion在master上测试存储到mysql中在数据库查询job cachejob cache流程开启master端的master_job_cache在master上再次测试能否存储至数据库在数据库中查询job管理获取任务的jid通过jid获取此任务的返回结果 1. SaltStack组件之return
saltstack之return与job管理
W--\\_//的博客
11-07 432
saltstack之return与job管理1、return部署1.1 准备工作1.2 部署一台数据库服务器1.3 授权权限和配置1.4 master上测试2、job cache 1、return部署 1.1 准备工作 1、所有的主机关闭防火墙和selinux [root@node02 ~]# systemctl disable --now firewalld [root@node02 ~]# setenforce 0 [root@node02 ~]# vim /etc/selinux/config # T
4.3 Saltstack之return与job管理
Yusyang_的博客
02-29 238
satlstack之return与job管理1. return组件1.1 在minion上查看yum源里有Mysql-python模块1.2 然后在minion上安装Mysql-python模块1.3 查看minion上的MYSQL-python是否安装完成1.4 使用新的服务器部署mysql来用作存储服务器1.5 在minion上安装mariadb使用mysql命令来测试远程的mysql服务器是...
SaltStack的Job基本管理
weixin_34163553的博客
05-03 180
Job基本管理saltutil模块中的job管理方法saltutil.running #查看minion当前正在运行的jobssaltutil.find_job <jid> #查看指定jid的job（minion正在运行的jobs）saltutil...
saltstack之return与job
it94wei的博客
03-04 206
return和job这两种方式都是对执行结果的返回值进行处理，这个处理可以是是返回给别的程序（sys.list_returners 查看）也可以是存储到数据库中 两者又有一定的区别，假设现在需要将处理结果，存储到数据库中，那么 return的执行流程是 主控端也就是master端对minion并行发出指令，minion端执行这个命令后，将执行的结果返回给主控端，同时将数据存储到数据库中（在...
软考-考生常见操作说明-202405101400-纯图版.pdf
05-14
软考官网--2024常见操作说明：包括如何绘制网络图、UML图、表格等 模拟作答系统是计算机技术与软件专业技术资格（水平）考试的电子化考试系统界面、作答过程的仿真系统，为各级别、各资格涉及输入和页面显示的部分题型提供体验性练习。
setuptools-34.0.3.zip
最新发布
05-14
Node.js，简称Node，是一个开源且跨平台的JavaScript运行时环境，它允许在浏览器外运行JavaScript代码。Node.js于2009年由Ryan Dahl创立，旨在创建高性能的Web服务器和网络应用程序。它基于Google Chrome的V8 JavaScript引擎，可以在Windows、Linux、Unix、Mac OS X等操作系统上运行。 Node.js的特点之一是事件驱动和非阻塞I/O模型，这使得它非常适合处理大量并发连接，从而在构建实时应用程序如在线游戏、聊天应用以及实时通讯服务时表现卓越。此外，Node.js使用了模块化的架构，通过npm（Node package manager，Node包管理器）,社区成员可以共享和复用代码，极大地促进了Node.js生态系统的发展和扩张。 Node.js不仅用于服务器端开发。随着技术的发展，它也被用于构建工具链、开发桌面应用程序、物联网设备等。Node.js能够处理文件系统、操作数据库、处理网络请求等，因此，开发者可以用JavaScript编写全栈应用程序，这一点大大提高了开发效率和便捷性。 在实践中，许多大型企业和组织已经采用Node.js作为其Web应用程序的开发平台，如Netflix、PayPal和Walmart等。它们利用Node.js提高了应用性能，简化了开发流程，并且能更快地响应市场需求。
基于遗传优化GA的三目标优化仿真【包括程序，注释，操作步骤】
05-14
1.版本：matlab2022A。 2.包含：程序，中文注释，仿真操作步骤（使用windows media player播放）。 3.领域：遗传优化 4.仿真效果：仿真效果可以参考博客同名文章《基于遗传优化GA的三目标优化仿真》 5.内容：基于遗传优化GA的三目标优化仿真。遗传算法（Genetic Algorithm, GA）是一种模拟自然选择和遗传机制的全局搜索优化方法，广泛应用于解决复杂优化问题，包括具有多个目标的优化问题，即多目标遗传算法（Multi-Objective Genetic Algorithm, MOGA）。在这里，将三个目标函数进行统一的编码，通过单目标遗传优化的方式，同步求解三个目标函数的最优值。 6.注意事项：注意MATLAB左侧当前文件夹路径，必须是程序所在文件夹位置，具体可以参考视频录。
基于单通道脑电信号的自动睡眠分期研究.zip
05-14
本项目使用了Sleep-EDF公开数据集的SC数据进行实验，一共153条整晚的睡眠记录，使用Fpz-Cz通道，采样频率为100Hz 整套代码写的较为简洁，而且有添加相应的注释，因此进行分享，而且不仅仅说是睡眠分期，也可以作为学习如何使用神经网络去进行时序数据分类问题的一个入门项目，包括怎么用GRU、LSTM和Attention这些经典网络结构。 网络结构（具体可查看network.py文件）： 网络整体结构类似于TinySleepNet，对RNN部分进行了修改，增加了双向RNN、GRU、Attention等网络结构，可根据参数进行调整选择。 定义了seq_len参数，可以更灵活地调整batch_size与seq_len。 数据集加载（具体可查看dataset.py文件） 直接继承自torch的Dataset，并定义了seq_len和shuffle_seed，方便调整输入，并复现实验。 训练（具体可查看train.py文件）：
python中函数return与print
10-28
在Python中，函数的返回值可以通过return语句来实现。当函数执行到return语句时，会将return后面的值作为函数的返回值返回给调用者。而print函数则是将括号中的内容输出到控制台上。需要注意的是，print函数只是将...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值