开源SQL审核查询平台Archery-基于docker安装

已于 2022-03-28 11:38:58 修改
阅读量5.5k 收藏 17
点赞数 1
分类专栏： Linux学习 文章标签： docker archery
于 2022-03-25 14:29:34 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hundan_520520/article/details/123734051
版权

一.Archery产品介绍

在技术团队内部进行有效的 SQL 管理并不容易，如何进行数据库的统一管理，和线上 SQL 操作的统一审核，变得尤为重要。Archery，这个开源的 SQL 审核查询平台，或许能为 SQL 审核工作带来不小的效率提升。
一条高质量的 SQL 语句能使整个服务加速好几倍，而一条有问题的 SQL 则可能会引发灾难，造成严重后果，因此，数据库管理人员的工作就十分重要了，他们掌握着千百万数据的命运。

简介

Archery是archer的分支项目，定位于SQL审核查询平台，旨在提升DBA的工作效率，支持多数据库的SQL上线和查询，同时支持丰富的MySQL运维功能，所有功能都兼容手机端操作，项目位于 https://github.com/hhyo/Archery，同时也在 Gitee 上开源，位于 https://gitee.com/rtttte/Archery
在这里插入图片描述

二.基于docker搭建Archery

系统环境

  • Centos7
  • Docker 17.2
  • Archery1.8.1

安装 Docker

安装 Docker Compose

# 如果下载速度比较慢，可以切换源
sudo curl -L "https://github.com/docker/compose/releases/download/1.24.1/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose
# 注意修改权限，不然会报错
sudo chmod +x /usr/local/bin/docker-compose
# 测试，查看版本
docker-compose --version

下载Archery

#下载地址 
https://github.com/hhyo/archery/releases/

#下载解压后路径pwd
/usr/local/Archery-1.8.1

安装并启动

# 启动
cd /usr/local/Archery-1.8.1/src/docker-compose
# 下载的东西很多，速度比较慢，如果下载失败，就多试几次 
# 生成了五个docker实例：redis inception archery goinception mysql
docker-compose -f docker-compose.yml up -d

表结构初始化

docker exec -ti archery /bin/bash
cd /opt/archery
source /opt/venv4archery/bin/activate
python3 manage.py makemigrations sql
python3 manage.py migrate 
# 编译翻译文件（有些命令也不知道为啥执行，参考一些教学，这条可选执行）
python3 manage.py compilemessages

数据初始化

# 不同的版本，不一定都有这两个sql文件，所以这两个命令不一定会执行成功
python3 manage.py dbshell<sql/fixtures/auth_group.sql
python3 manage.py dbshell<src/init_sql/mysql_slow_query_review.sql

创建管理用户

python3 manage.py createsuperuser

# python3 manage.py createsuperuser
用户名: admin
电子邮件地址: [email protected]
Password: 
Password (again): 
Superuser created successfully.

退出重启

exit
docker restart archery

日志查看和问题排查

docker logs archery -f --tail=50

启动成功查看

访问 http://ip:9123
在这里插入图片描述
用刚刚创建的admin账号登录
在这里插入图片描述

端口占用情况

redis 端口：6379
mysql端口：3306
inception端口：6669
goinception端口：4000
archery端口：9123

在这里插入图片描述

三.基本操作

停止

# 停止
docker stop redis
docker stop inception
docker stop archery
docker stop goinception
docker stop mysql

删除

docker rm -f redis
docker rm -f inception
docker rm -f archery
docker rm -f goinception
docker rm -f mysql

四.角色说明

角色说明
DBA数据库管理员（Database Administrator，简称DBA）
RD研发（Research and Development）
PM项目经理( Project Manager )
QA测试（QUALITY ASSURANCE，中文意思是“质量保证”）

五.系统设置

1.goinception配置 对MySQL进行审核和执行

这个需要提前配置好，不然会导致无法提交sql审核，备份库需要开启binlog，不然会执行失败
在这里插入图片描述

配置项说明
GO_INCEPTION_HOST连接地址，docker-compose启动的请配置为容器名或者docker的ip地址
GO_INCEPTION_PORTgoInception的连接端口，默认4000
BACKUP_HOST备份库链接HOST，用于页面展示回滚语句
BACKUP _PORT备份库链接端口
BACKUP_USER备份库链接用户
BACKUP_PASSWORD备份库链接密码

该配置信息，仅仅用于archery从备份库查询回滚语句使用，该配置信息不会被goInception服务使用，goInception连接备份库使用的数据库连接信息应在其自身的config.toml中配置。

2. SQL查询

在这里插入图片描述

配置项说明
INCEPTION_HOSTInception连接HOST，用于SQL查询语法解析，docker-compose启动的请配置为容器名或者docker的ip
INCEPTION_PORTInception连接端口，默认6669
QUERY_CHECK相关issues: https://github.com/hhyo/Archery/issues/145

是否开启SQL查询脱敏的Inception检测，平台的SQL查询功能依靠Inception的语法树打印来解析查询语句中包含的库、表、字段信息，从而进行数据脱敏

  • 开启QUERY_CHECK后，如果遇到Inception无法解析的语句，则会直接抛出错误信息，禁止查询
  • 关闭QUERY_CHECK后，如果遇到Inception无法解析的语句，系统不再进行数据脱敏，会有数据泄露的风险，请谨慎选择
  • 动态脱敏不支持的语法：嵌套子查询、部分非单字段函数，如concat(phone,’,’)、max(id+num)

DATA_MASKING： 是否开启动态脱敏，会利用inception语法树打印，结合后台设置的脱敏字段和脱敏规则，对查询数据进行脱敏。遇到无法解析的语句是报错还是返回未脱敏的数据同样由QUERY_CHECK参数控制 * 正常脱敏：
在这里插入图片描述
开启QUERY_CHECK后执行不支持语句
在这里插入图片描述
关闭QUERY_CHECK后执行不支持语句
在这里插入图片描述
MAX_EXECUTION_TIME： 在线查询超时时间阈值，单位秒，默认60，超时的语句会被终止并返回提示信息，目前仅支持MySQL
ADMIN_QUERY_LIMIT： 超级管理员的查询限制行数，超级管理员查询数据时不做权限校验，仅由该参数设置最大行数

3.SQL优化

在这里插入图片描述

配置项说明
SQLADVISOR_PATHSQLAdvisor的可执行文件路径，路径需要完整，docker镜像内已经集成 * 1.4.0以前的docker版本配置成/opt/sqladvisor * 1.4.0以以后的docker版本配置成 /opt/archery/src/plugins/sqladvisor
SOAR_PATHSOAR的可执行文件路径，路径需要完整，docker镜像内已经集成，docker镜像内已经集成 * 1.4.0以前的docker版本配置成/opt/soar * 1.4.0以以后的docker版本配置成 /opt/archery/src/plugins/soar

4.其他配置

在这里插入图片描述

配置项说明
INDEX_PATH_URL系统首页路径，默认是SQL工单页面
BINLOG2SQLBINLOG2SQL调用路径，用于实现binlog2sql解析的功能，docker镜像内已经集成 * docker部署请配置为 /opt/archery/src/plugins/binlog2sql/binlog2sql.py
DEFAULT_AUTH_GROUP默认权限组名，新用户首次登录自动关联, 老用户请手动配置
DEFAULT_RESOURCE_GROUP默认资源组名，新用户首次登录自动关联, 老用户请手动配置
DEFAULT_RESOURCE_GROUP默认资源组名，新用户首次登录自动关联, 老用户请手动配置
LOCK_TIME_THRESHOLD账户登录失败锁定时间(秒)
LOCK_CNT_THRESHOLD账户登录失败几次锁账户
SIGN_UP_ENABLED是否开启注册功能，关闭后将无法自主注册用户

参考：
https://www.tqwba.com/x_d/jishu/353746.html
https://blog.csdn.net/a_yonga/article/details/117435676
官网：https://archerydms.com/configuration/

hundan_520520
关注
  • 1
    点赞
  • 踩
  • 17
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Archery SQL审核查询平台.zip
09-21
## Archery SQL审核查询平台 ###Description: Archery 定位于 SQL 审核查询平台，旨在提升 DBA 的工作效率，支持多种数据库的 SQL 上线和查询，同时支持丰富的MySQL运维功能，所有功能都兼容手机端操作。启动：下载 Releases文件，解压后进入docker-compose文件夹#启动docker-compose -f docker-compose.yml up -d#表结构初始化docker exec -ti archer
sql审核平台archery
03-24
sql审核平台archery配置文档
探索Archery：一款强大的SQL审核与数据分析平台
最新发布
gitblog_00036的博客
03-21 429
探索Archery：一款强大的SQL审核与数据分析平台 项目地址:https://gitcode.com/hhyo/Archery Archery是一个开源的Web应用，它专为数据分析师和DBA设计，提供了SQL审核、数据查询、报表生成等功能。它的目标是简化大数据环境下的数据操作流程，使数据分析工作更加高效和便捷。 项目简介 Archery是基于Python开发的，利用Flask作为后端框架，前端...
inception-master源代码、数据库审计平台
07-11
数据库审计平台源码，原作者github代码已经删除，把自己留存的代码发出来供大家使用
Archery:SQL 审核查询平台
04-30
| | 介绍 Archery是archer的分支项目，定位于SQL审核查询平台，旨在提升DBA的工作效率，支持多数据库SQL上线和查询，同时支持丰富MySQL运维功能，所有功能都兼容手机端操作 功能清单 查询 审核 执行 备份 数据字典 慢日志 会话管理 账号管理 参数管理 数据归档 MySQL √ √ √ √ √ √ √ √ √ √ MsSQL √ × √ × × × × × × × Redis √ × √ × × × × × × × PgSQL √ × √ × × × × × × × Oracle √ × √ :check_mark: × × × × × × MongoDB √ √ √ × × × × × × × 快速开始 系统体验 在线体验 账号 密码 archer archer Docker 准备运行配置 具体可参考：https://github.com/hhyo/Archery/tree/mast
sql 审核平台方案
weixin_56071908的博客
02-15 365
开源 SQL 审核平台 1、Archery:https://github.com/hhyo/Archery 2、See：https://github.com/myide/see 3、爱可生开源：https://opensource.actionsky.com/sqle/(爱可生开源方案) 4、yearning 前端：https://github.com/cookieY/gemini-nex...
【SQL 审核查询平台】Archery使用介绍
DreamSun的博客
02-02 1347
Archery 读作：[ˈɑːrtʃəri]功能模块介绍：权限管理，工作流，实例管理，SQL审核，SQL查询，SQL优化，消息通知，工具插件，云数据库等
搭建sql审核平台archery
雅冰石的专栏
02-10 4866
一 archer介绍 Archery是一站式的 SQL 审核查询平台，旨在提升DBA的工作效率，支持多数据库的SQL上线和查询，同时支持丰富的MySQL运维功能，所有功能都兼容手机端操作。 二 搭建archery审核平台 2.1 前提条件 服务器能联网。 2.2 安装步骤 2.2.1 安装docker #安装 yum install docker-y #启动docker服务 systemctl start docker #查看docker状态 systemctl stat..
开源的SQL审核平台推荐
叱咤少帅的博客
02-20 630
开源的SQL审核平台推荐
archery sql审计工具
stone_tomcate的博客
02-09 1172
本文基于官方文档安装，有不太详细的地方请多多包涵，下方为官方文档连接： 快速开始 - Archery Archery中文官方文档 简介 Archery是archer的分支项目，定位于SQL审核查询平台，旨在提升DBA的工作效率，支持多数据库的SQL上线和查询，同时支持丰富的MySQL运维功能，所有功能都兼容手机端操作 部署升级 支持docker部署、手动部署，支持升级。 由于安装包部署略微繁琐，本文不提供介绍，详细请看上方文档地址，自行搭建，本次只是提供基于docker的部署教程。 do.
Mysql审核查询平台Archery部署
赵广陆
05-22 1356
目录 1 Archery产品介绍 2 基于docker搭建Archery 2.1 系统环境 2.2 安装 Docker 2.2.1 安装 Docker Compose 2.2.2 下载Archery 2.2.3 安装并启动 2.2.4 表结构初始化 2.2.5 数据初始化 2.2.6 创建管理用户 2.2.7 退出重启 2.2.8 日志查看和问题排查 2.2.9 启动成功查看 2.2.10 端口占用情况 3 基本操作 3.1 停止 3.2 删除 4 角色说明 5 系统设置 5.1 goinception配
Archery SQL审核查询平台-其他
06-12
Archery 定位于 SQL 审核查询平台，旨在提升 DBA 的工作效率，支持多种数据库的 SQL 上线和查询，同时支持丰富的MySQL运维功能，所有功能都兼容手机端操作。 启动： 下载 Releases文件，解压后进入docker-compose...
Archery SQL 审核查询平台
04-27
SQL 审核查询平台
Archery: 一款超强大的在线 SQL 审核平台，爆赞推荐
easylife206的专栏
07-25 2598
公众号关注「奇妙的 Linux 世界」设为「星标」，每天带你玩转 Linux ！今天给大家推荐一个关于 SQL 审核平台的开源项目，这个开源项目叫：Archery， 是 archer 的分支项目，定位于 SQL 审核查询平台，旨在提升 DBA 的工作效率，支持多数据库的 SQL 上线和查询，同时支持丰富的 MySQL 运维功能，所有功能都兼容手机端操作这个开源项目，采用...
archery安装测试
Du.的博客
07-05 947
Archery为SQL审核查询平台，旨在提升DBA的工作效率，支持多数据库的SQL上线和查询，同时支持丰富的MySQL运维功能。
mysql自动化运维平台_MySQL自动化运维审核平台archery
weixin_29051811的博客
01-18 379
archery是一套SQL审核平台，支持SQL审核、SQL优化(SQLAdvisor|SOAR|SQLTuning)、脱敏查询、慢日志管理、数据库审核、表结构同步、会话管理、RDS管理首先安装docker( 可以参考我的文章centos7安装docker)操作系统为centos71 安装docker-compose首先安装依赖yum install python-develpip inst...
Docker安装部署sql审计平台Archery1.9.1版本
W1124824402的博客
01-17 734
Docker安装部署sql审计平台Archery1.9.1版本（简单便捷）
MySQL5.7开启 binlog
热门推荐
魂-淡
03-28 1万+
前言 binlog日志，即binary log，是二进制日志文件。它有两个作用，一是增量备份，即只备份新增的内容；二是用于主从复制等，即主节点维护了一个binlog日志文件，从节点从binlog中同步数据 开启步骤 1. Linux下 1.登录MySQL mysql -h 127.0.0.1 -u root -p 输入密码 2. 查看状态 show variables like '%log_bin%'; 目前是：未开启状态 3.创建目录和设置权限组 mkdir /usr/local/mysql/lo
docker-compose 安装 Archery
05-10
要在 Docker Compose 中安装 Archery，您需要执行以下步骤： 1. 首先，您需要安装 Docker 和 Docker Compose。您可以使用以下命令在 Ubuntu 上安装它们： ``` $ sudo apt-get update $ sudo apt-get install ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值