JAVA替换shell模板内容_shell模板变量替换

我们经常使用一些模板语言来处理一些变量替换。比如jsp，php，velocity，freemarker，thymeleaf等。那对于shell来说，应该怎样替换变量呢。有一种很简单的办法可以做到。

先来看一个应用场景。在datax是阿里开源的一个异构数据源同步框架，其配置文档是json的，我想要用shell去调用执行pg到pg的数据同步，需要根据我的配置生成对应的配置文件。这如果用java来做就是维护一个对象，设置value，最后json-encode就好了。要是使用shell，这样也可以做到：

渲染脚本

#!/bin/bash

SRC_USER_NAME=etl

SRC_USER_PWD=etl

SRC_SQL="select * from tab"

SRC_HOST_IP="192.168.1.1"

SRC_HOST_PORT=3306

SRC_DB="abc_db"

TAR_USER_NAME="etl2"

TAR_USER_PWD="pass2"

fields_map="\"a\",\"b\",\"c\""

TAR_HOST_IP="aaaadfsdfdsfjsdjf"

TAR_HOST_PORT="5432"

TAR_DB="tar_db"

TAR_TABLENAME="tbname"

eval "cat <

$(< pg2pg.datax.json)

EOF

" > result.json

模板文档

pg2pg.datax.json

{

"job": {

"setting": {

"speed": {

"byte": 1048576

},

"errorLimit": {

"record": 0,

"percentage": 0.02

}

},

"content": [

{

"reader": {

"name": "postgresqlreader",

"parameter": {

"username": "${SRC_USER_NAME}",

"password": "${SRC_USER_PWD}",

"where": "",

"connection": [

{

"querySql": [

"${SRC_SQL}"

],

"jdbcUrl": [

"jdbc:postgresql://${SRC_HOST_IP}:${SRC_HOST_PORT}/${SRC_DB}"

]

}

]

}

},

"writer": {

"name": "postgresqlwriter",

"parameter": {

"username": "${TAR_USER_NAME}",

"password": "${TAR_USER_PWD}",

"column": [

${fields_map}

],

"preSql": [

""

],

"connection": [

{

"jdbcUrl": "jdbc:postgresql://${TAR_HOST_IP}:${TAR_HOST_PORT}/${TAR_DB}",

"table": [

"${TAR_TABLENAME}"

]

}

]

}

}

}

]

}

}

输出结果

{

"job": {

"setting": {

"speed": {

"byte": 1048576

},

"errorLimit": {

"record": 0,

"percentage": 0.02

}

},

"content": [

{

"reader": {

"name": "postgresqlreader",

"parameter": {

"username": "etl",

"password": "etl",

"where": "",

"connection": [

{

"querySql": [

"select * from tab"

],

"jdbcUrl": [

"jdbc:postgresql://192.168.1.1:3306/abc_db"

]

}

]

}

},

"writer": {

"name": "postgresqlwriter",

"parameter": {

"username": "etl2",

"password": "pass2",

"column": [

"a","b","c"

],

"preSql": [

""

],

"connection": [

{

"jdbcUrl": "jdbc:postgresql://aaaadfsdfdsfjsdjf:5432/tar_db",

"table": [

"tbname"

]

}

]

}

}

}

]

}

}

核心内容是

eval "cat <

$(< pg2pg.datax.json)

EOF

" > result.json

其中有几个语法需要学习下。

第一shell中变量的定义，变量赋值时，等号(=)`两边必须没有空格。

第二, eval的用法。

语法：eval cmdLine

eval会对后面的cmdLine进行两遍扫描，如果第一遍扫描替换变量，然后执行cmdLine.

[etl@data-server001 test]$ set 11 22 33 44

[etl@data-server001 test]$ echo $4

44

[etl@data-server001 test]$ echo $#

4

[etl@data-server001 test]$ echo "\$$#"

$4

[etl@data-server001 test]$ eval echo "\$$#"

44

本组测试中，echo可以读取变量的第一层定义，所以$#代表参数个数4，$4代表第4个参数44。但我们想要直接取最后一个参数，需要使用变量的值作为变量的value。eval就会再次扫描一遍。

第三，cat <

[etl@data-server001 test]$ cat <

> aaa

> bbb

> ccc

> EOF

aaa

bbb

ccc

EOF代表End Of File，这里表示输入结束标志，<

第四， $(xxx) 表示执行命令，和两个反引号的效果相同，会执行里面的命令。所以< pg2pg.datax.json 才会读取文件内容。

最后输入EOF结束内容。需要注意EOF前后不要有空格，必须是回车，不然就不代表最后一个字符了。

为了更加容易理解，可以修改渲染脚本

content=$(cat pg2pg.datax.json)

eval "cat <

$content

EOF" > result.json

eval替换$content的值