用docker-compose部署postgres+ postgis

20190411更新。之前写的太啰嗦,也不删了,重新来.小坑还是有的

psql 命令行客户端

因为postgres用docker镜像安装,所以host不需要安装pg,只需要安装客户端

sudo apt-get install -y postgresql-client

 

 

postgres+postGIS

使用https://github.com/appropriate/docker-postgis  有各种版本组合,目前使用 pg11 + pGIS 2.5

把3个文件放到1个文件夹里我这里是./machines/postgis,因为还有别的dockerfile。让docker-compose能找到

# Use postgres/example user/password credentials
version: '3.7'

services:

  postgis: #postgres+ postGIS 安装 不塞入自己写的任何代码!
      #image: mdillon/postgis  #图省事可以直接用docker hub上的镜像
    build: ./machines/postgis
    restart: always
    environment:
        POSTGRES_PASSWORD: example
    volumes:
        - data_pg:/var/lib/postgresql/data
    ports:
      - "5432:5432"
    networks:
      mynet:
        ipv4_address: '172.19.0.12'


networks:
  mynet:
    ipam:
      driver: default
      config:
        - subnet: 172.19.0.0/16

volumes:
    data_pg:
      driver_opts:
        type: none
        #device: ./common
        device: /home/XXX/data_pg
        o: bind

小坑: volume 用bind本地文件夹的方式,一定要先手工创建出 /home/XXX/data_pg 

然后, 一定要注意挂载进去名字要一样. 今年文曲化忌,很容易因为这些小问题卡住

 

networks是为了手工指定IP地址,真正和pg有关的是把本地文件夹作为volumes 命名为data_pg 挂进去,让pg能找到,这样数据保存在本地文件夹里。

暴露pg的默认端口5432,用于pgadmin查看

 

----20190505发现的坑--------

启动sh脚本需要时间,  多个服务的时候,或者原作者那样直接docker run 不会有问题

但是,如果docker-compose 只包含1个pg服务的时候, 直接entrypoint就退了!  无论如何启动不好.

卡了1晚上.

不得不说,docker-compose 不是个适合定制初始化过程的工具.   服务间等待之类的都要依赖wait-for-it.sh,像这种只有1个服务的,反而问题更大.有点垃圾.

主观原因:还是不够单一职责,  

让docker-compose只负责把实例启动起来

不要把初始化db这些工作,耦合进容器启动中这个生命周期里来,

应该在启动后用别的方式搞定.

 

于是一咬牙.舍掉sh脚本

无非是用psql 连接pg 创建数据库模板, 安装postgis extention的语句.这些

实测,完全可以用py通过pscopg2 搞定.

——果然,1小时搞定 

 

 

多说几句,dockerfile写的很精简

FROM postgres:11
MAINTAINER Mike Dillon <mike@appropriate.io>

ENV POSTGIS_MAJOR 2.5
ENV POSTGIS_VERSION 2.5.2+dfsg-1~exp1.pgdg90+1

RUN apt-get update \
      && apt-cache showpkg postgresql-$PG_MAJOR-postgis-$POSTGIS_MAJOR \
      && apt-get install -y --no-install-recommends \
           postgresql-$PG_MAJOR-postgis-$POSTGIS_MAJOR=$POSTGIS_VERSION \
           postgresql-$PG_MAJOR-postgis-$POSTGIS_MAJOR-scripts=$POSTGIS_VERSION \
           postgis=$POSTGIS_VERSION \
      && rm -rf /var/lib/apt/lists/*

RUN mkdir -p /docker-entrypoint-initdb.d
COPY ./initdb-postgis.sh /docker-entrypoint-initdb.d/postgis.sh
COPY ./update-postgis.sh /usr/local/bin

只要把sh考进去, 就能在最后结尾时自动当成entrypoint 执行

这样,不需要显式写 ENTRYPOINT CMD

 

pgadmin

用py写的pg GUI,安装在本地就可以了。就不创建虚环境了

参考https://linuxhint.com/install-pgadmin4-ubuntu/

安装依赖

$ sudo apt-get install build-essential libssl-dev libffi-dev libgmp3-dev
virtualenv python-pip libpq-dev python-dev

 

 确认当前是py版本:和pip安装的库路径

马上2020年1月, py2就不支持了. 所以确认一下都是py3.6.

 

python
from distutils.sysconfig import get_python_lib
print(get_python_lib())

我自己竟然发现默认版本是不知什么时候装的Anaconda3,

想卸载,官网https://docs.anaconda.com/anaconda/install/uninstall/  提示 卸载只能删除,2333

 

确认 pip是2的还是3的

进入文件夹

/usr/local/bin

看看,pip 是更像 pip2 还是更像pip3,否则pip了半天,还是运行不了

python2 到2020年就不支持了,确保pip 和python都指向系统自带的3.6 

 

 

下载安装。

居然不发布到pip上,几个意思

wget https://ftp.postgresql.org/pub/pgadmin/pgadmin4/v4.5/pip/pgadmin4-4.5-py2.py3-none-any.whl

sudo -H pip install pgadmin4-4.5-py2.py3-none-any.whl

安装了一堆py库,净是老面孔,2333

 如果出现

Cannot uninstall 'psutil'. It is a distutils installed project and thus we cannot accurately determine which files belong to it which would lead to only a partial uninstall.

sudo -H pip install pgadmin4-4.5-py2.py3-none-any.whl --ignore-installed

 

 参考https://www.pgadmin.org/faq/#2

运行

sudo xed /usr/local/lib/python3.6/dist-packages/pgadmin4/config_distro.py

加入SERVER_MODE = False

然后再运行,不然必须输入email+pwd 烦。

 

python /usr/local/lib/python3.6/dist-packages/pgadmin4/pgAdmin4.py 

结果

OSError: [Errno 13] Permission denied: '/var/lib/pgadmin'

 参考:

https://stackoverflow.com/questions/46707935/oserror-errno-13-permission-denied-var-lib-pgadmin

sudo mkdir "/var/log/pgadmin"
sudo chmod a+wrx "/var/log/pgadmin"

sudo mkdir "/var/lib/pgadmin"
sudo chmod a+wrx "/var/lib/pgadmin"

 

居然是用flask写的一个web! 访问默认网址http://127.0.0.1:5050/browser/#

有点意思

 

看见除了默认的postgres数据库之外, 已经创建出了1个template_postgis数据库,包含几个extention(dockerfile 安装时initdb-postgis.sh里定义)

 

至此,postgis安装成功!

#-------------------------------------------------------------------------------------------------- 

dockerhub官网直接有postgis镜像,但是pg版本低,还是9.x的

所以就选择自己配个pg10+postgis 2.4.1

 postgres

postgres在dockerhub上的官方介绍不是太清楚,没有演示-v 

我目前的主要需求是:

db用镜像起容器

数据内容保存在容器外

启动db容器时,用-v把数据内容挂进去

主要目的就是懒得安装db配参数,然后,db更新升级的时候别影响数据。

 

yml这样写

# Use postgres/example user/password credentials
version: '3.1'

services:
    db:
        image: postgres
        restart: always
        environment:
            POSTGRES_PASSWORD: example
        volumes:
            - /home/db/postgres:/var/lib/postgresql/data

    adminer:
        image: adminer
        restart: always
        ports:
            - 8080:8080

/home/db/postgres是自己随便写的。可以事先不存在。

放在/home,是因为装系统的时候/home为独立分区,重装系统的时候只要挂载点选上home,就完全保留数据。

 

然后用adminer 登录数据库。用户名用 postgres 密码是 example  Database是postgres 

 server对应的是docker-compose.yml里services:下面 用postgres镜像的名字,在这里是db。如果换成别的名字,就要注意修改!

 

老实说,和pg的文档八字不合。先是没看懂dockerhub里各种乱七八糟的参数设置介绍(例子里用全局变量配了密码,可是不配用户名,莫名其妙啊);

然后没看懂“Use postgres/example user/password” 这句话。直接写 user:postgres password:example,或者加个as “ use postgres/example as user/password”行吗?

是我智力低, 脑抽了,还是他文档过于奇葩?

反正主要是为了postgis也就忍了。

PostGIS

安装依赖项一堆,除去常见的gcc make g++,这些不算,gdal geos proj4 3件套是必装的,官网的各种版本依赖关系矩阵茫茫多啊。。。然后还有json-c什么的。

实在懒得自己配了。直接参考github上docker-postgis, dockerhub地址

只要把第一句pg版本从9.5改成10.0就OK了:优点,使用的linux是alpine,体积超小。但gdal,geos 都是用apk 安装的,看版本,在依赖关系矩阵里也还算比较新吧。

 

只砍了一句,不知道postgis 2.4.1的 SHA256码是多少,砍了 

 

转载于:https://www.cnblogs.com/xuanmanstein/p/7742647.html

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值