GreenPlum数据仓库快速配置，通过python连接

最新推荐文章于 2024-08-21 12:04:21 发布
最新推荐文章于 2024-08-21 12:04:21 发布
阅读量4.2k 收藏 4
点赞数
分类专栏： 数据库原理 项目作品 python 文章标签： greenplum python GP docker
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq547276542/article/details/79058299
版权
本文介绍了如何快速配置GreenPlum数据仓库，包括下载安装docker，拉取GP镜像，安装postgresql和pyGreSQL库，以及使用Python连接数据库进行增删改查操作。还提供了docker常用命令。
摘要由CSDN通过智能技术生成

GreenPlum数据仓库快速配置，通过python连接

数据库期末作业要用GP开发一个项目，弄的蛋疼，这里总结下我的快速配置过程…

1.docker官网下载docker客户端，安装

官网链接： 点击这里

2.拉取GP的docker镜像，挂载

按照这个来https://yq.aliyun.com/articles/57656#1，照做1.1~4.3步(5.1开始的就不一样了，版本问题)

(参考注意事项：https://github.com/dbbaskette/gpdb-docker/blob/master/README.md )

这步做完后GP就部署完毕了，访问主机的5432端口就能访问到docker中的GP的5432端口。

3.在主机上安装本地版postgresql（否则下一步进行不了）

brew install  postgresql  #macOS
最低0.47元/天 解锁文章
DASEason
关注
专栏目录
python连接greenplum/postgresql
软件老王
07-08 2561
文章目录1. 场景描述2. 解决方案2.1 真实代码2.1.1 调用类2.1.2 Gp数据库连接类2.2 代码说明 1. 场景描述 使用python连接greenplum或者postgresql。 2. 解决方案 2.1 真实代码 2.1.1 调用类 import dbgp as dbgp # 执行 def execGP(params): sql = params.get("sql") ...
Greenplum开源数据仓库-实现100亿监控数据的秒级分析-萧少聪
08-24
Greenplum开源数据仓库-实现100亿监控数据的秒级分析-萧少聪 Greenplum开源数据仓库 在阿里云中Greenplum的扩展
python连接Greenplum数据库
weixin_30436101的博客
02-15 857
配置greenplum客户端认证 配置pg_hba.conf cd /home/gpadmin/gpdbdata/master/gpseg-1 vim pg_hba.conf 增加 host all gpadmin 10.1.201.55/32 trust [gpadmin@ gpseg-1]$ export PGDATA=/h...
部署greenplum集群详细教程
最新发布
weixin_57900254的博客
08-21 676
这里使用1个master，2个segment的集群，ip为：其中1192.168.1.171为master，192.168.1.172为备用节点，其余为segment。注意：PGPORT指的是你安装greenplum数据库的端口号。
【python 连接 Greenplum】python 连接Greenplum数据库
赖德发的博客
04-08 743
Python和PostgrelSQL进行交互，需要安装三方库，PostgrelSQL跟mysql 的用法类似 pip install psycopg2 例子： import psycopg2 import psycopg2.extras conn = psycopg2.connect(host='localhost', port=6432, user='postgres', password='root', database='mytest') cursor = co
gpadmin联接mysql_python连接Greenplum数据库
weixin_34129222的博客
02-05 247
配置greenplum客户端认证配置pg_hba.confcd /home/gpadmin/gpdbdata/master/gpseg-1vim pg_hba.conf增加host all gpadmin10.1.201.55/32trust[gpadmin@ gpseg-1]$ export PGDATA=/home/gpadmin/gpdbdata/master/gpse...
oracle数据同步到Greenplum的python脚本
08-31
DBconn: 数据库连接池配置及查询返回方法 DumpCsv:导出csv文件方法 Log:日志输出方法 DataBase:判断表是否存在、表或分区表是否有数据、是否为分区表、数据导出、表分区遍历、指定分区表导出等方法 py_...
greenplum-cc-web-6.8.0-gp6-rhel7-x86_64.zip
09-14
6.8.0版本进一步增强了其在数据仓库、实时分析和大数据处理中的能力。而“CC Web”则代表了Control Center Web界面，这是一个图形化的管理工具，使得用户能够更直观、便捷地监控和管理Greenplum集群。 在RHEL7平台...
数据仓库介绍
weixin_39272255的博客
12-01 868
一、数据仓库基础介绍 DW数据仓库（Data Warehouse）是一个面向主题的（Subject Oriented）、集成的（Integrated）、相对稳定的（Non-Volatile）、反映历史变化（TimeVariant）的数据集合，用于支持管理决策(Decision Making Support)。 ODS（Operational Data Store）：操作型数据存储。 EDW(Enterprise Data Warehouse) 是企业级数据仓库 数据集市：部门级别的数据集合，一般基于数据仓库
如何从Teradata迁移到Greenplum（上篇）
Greenplum中文社区
06-12 976
我们在之前的文章中介绍了如何从Oracle迁移到Greenplum。与Oracle迁移类似，作为在世界范围内有广泛用户的数据仓库产品，在综合...
greenplum常用命令
10-12
字符串函数 1）字符串拼接：|| 2）字符串长度：length 3）字符串截取：substring('fsfd' from 2 for 3)、substr('fsfd',2,3) 4）字符串两头去字符：trim(' fsf')、trim(both 'x' from 'xfdsx') 5）大小写转换：upper()、lower() 6）替换字符串：replae('fsfsfsf',fs'','ab') 7）把字符串中某几个连续字符替换成指定字符：overlay('freda' placing 'fsf' from 2 for 4) 8）按照某个字符拆分字符串：split_part('adas|dada|ffr','|',2) 9）手动数据：select * from (values ('a1',3),('a2',4)) t(col,num) 10）指定字符串在字符串中的起始位置：position('as' in 'dadassa')
根据postgresql或者greenplum数据库创建表的sql语句转换成最基本的django model
09-12
有时候在django中使用postgresql和greenplum数据库时，使用django model的数据库同步命令时会有问题，生成不了对应的数据库表，无奈只有手工先创建数据库表，然后再根据表字段手动创建model，为了提高效率我写了一个简单的脚本把创建表的sql自动转换成Model格式的字符串。
Greenplum第三方工具链接
weixin_34356555的博客
10-13 329
在master节点的$MASTER_DATA_DIRECTORY/pg_hba.conf中添加新客户端服务器信息 #add host all gpadmin 0.0.0.0/0 trust 然后重新服务即可链接 su - gpadmin gpstop gpstart 转载于:https://www.cnblogs.com/peng-...
Python连接Greenplum及常用gp函数和方法（持续更新）
zkkkkkkkkkkkkk的博客
05-21 3825
目录 前言 了解postgresql Python连接gp 记录postgresql一些函数和方法（持续更新） ①：int类型时间转time类型时间 ②：合并两列值 ③：取最近N个月数据 ④：按指定字符串或者符号切割 ⑤：字符串切割 前言 最近也是在做项目，没有什么时间更新。今天抽空来更新一篇在项目中使用的postgresql一些相关的知识。 了解postgresql 需求：千百万数据存储在Greenplum中，需要使用Python来对gp进行读写，其中包含各种字...
Python脚本访问Greenplum数据库安装指导
learning_oracle的博客
07-18 998
安装前准备 （1）操作系统(系统上面要安装一些必备的开发工具(比如gcc等)) linux-82:/home/PyODBC # cat/etc/SuSE-release SUSE Linux EnterpriseServer 11 (x86_64) VERSION = 11 PATCHLEVEL = 1 （2）安装所需的软件包 gree
Python脚本通过unixODBC驱动访问Greenplum(4.3.8.2)数据库安装指导
DataFlow范式
07-08 4894
本篇文档主要用来描述：1.    搭建unixODBC驱动，用来通过odbc方式访问数据库2.    搭建Pyodbc驱动，用来使用Python脚本通过系统的odbc方式来对数据库进行操作3.    这种架构的好处：l  通过odbc访问数据库的性能要好于jdbc的方式l  通过Python脚本开发，后续可以通过调度平台来执行Python执行数据分析，比如设置定时任务，周期性地执行Python脚本
使用pycharm搭建python开发环境及连接greenplum和mysql
小海的专栏
02-19 5547
一、安装PYTHON JDK a) http://www.python.org/downloads/ b) 点击“download python 2.7.11 ” c) 选择与自己机器匹配的JDK  ,一个是64位，一个是32位  Windows x86-64 MSI installer  Windows x86 MSI installer d) 下载安装 二、安装PYTHON开
perl连接字符串_「实战」助力数据库开发之接口篇 - Perl 连接 Greenplum
weixin_39860755的博客
12-06 127
Perl 是一种功能丰富的计算机编程语言。借取了 C、sed、awk、shell 脚本语言以及很多其他程序语言的特性，其中最重要的特性是它内部集成了正则表达式的功能。它就像 C 一样强大，像 awk、sed 等脚本描述语言一样方便，被 Perl 语言爱好者称之为“一种拥有各种语言功能的梦幻脚本言”、“Unix中的王牌工具”。Perl 语言连接 Greenplum 也是通过底层 C 接口 libpq...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值