GreenPlum数据仓库快速配置，通过python连接

最新推荐文章于 2024-05-23 10:27:01 发布
最新推荐文章于 2024-05-23 10:27:01 发布
阅读量4.2k 收藏 4
点赞数
分类专栏： 数据库原理 项目作品 python 文章标签： greenplum python GP docker
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq547276542/article/details/79058299
版权

GreenPlum数据仓库快速配置，通过python连接

数据库期末作业要用GP开发一个项目，弄的蛋疼，这里总结下我的快速配置过程…

1.docker官网下载docker客户端，安装

官网链接： 点击这里

2.拉取GP的docker镜像，挂载

按照这个来https://yq.aliyun.com/articles/57656#1，照做1.1~4.3步(5.1开始的就不一样了，版本问题)

(参考注意事项：https://github.com/dbbaskette/gpdb-docker/blob/master/README.md )

这步做完后GP就部署完毕了，访问主机的5432端口就能访问到docker中的GP的5432端口。

3.在主机上安装本地版postgresql（否则下一步进行不了）

brew install  postgresql  #macOS
最低0.47元/天 解锁文章
DASEason
关注
  • 0
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
python连接greenplum/postgresql
软件老王
07-08 2550
文章目录1. 场景描述2. 解决方案2.1 真实代码2.1.1 调用类2.1.2 Gp数据库连接类2.2 代码说明 1. 场景描述 使用python连接greenplum或者postgresql。 2. 解决方案 2.1 真实代码 2.1.1 调用类 import dbgp as dbgp # 执行 def execGP(params): sql = params.get("sql") ...
Greenplum数据仓库设计规范1
08-04
《Greenplum数据仓库设计规范1》 在大数据领域，数据仓库是不可或缺的一部分，它用于存储、管理和分析大量结构化数据。Greenplum作为一个高效、可扩展的数据仓库平台，其设计规范至关重要，确保了数据的一致性、...
Greenplum开源数据仓库-实现100亿监控数据的秒级分析-萧少聪
08-24
Greenplum开源数据仓库-实现100亿监控数据的秒级分析-萧少聪 Greenplum开源数据仓库 在阿里云中Greenplum的扩展
python连接Greenplum数据库
weixin_30436101的博客
02-15 849
配置greenplum客户端认证 配置pg_hba.conf cd /home/gpadmin/gpdbdata/master/gpseg-1 vim pg_hba.conf 增加 host all gpadmin 10.1.201.55/32 trust [gpadmin@ gpseg-1]$ export PGDATA=/h...
sheng的学习笔记-docker部署Greenplum
最新发布
coldstarry的专栏
05-23 445
创建的默认数据库是gpadmin，密码也是这个。创建的默认数据库是gpadmin，密码也是这个。打开终端，输入代码，查看版本。
【python 连接 Greenplum】python 连接Greenplum数据库
赖德发的博客
04-08 688
Python和PostgrelSQL进行交互，需要安装三方库，PostgrelSQL跟mysql 的用法类似 pip install psycopg2 例子： import psycopg2 import psycopg2.extras conn = psycopg2.connect(host='localhost', port=6432, user='postgres', password='root', database='mytest') cursor = co
gpadmin联接mysql_python连接Greenplum数据库
weixin_34129222的博客
02-05 234
配置greenplum客户端认证配置pg_hba.confcd /home/gpadmin/gpdbdata/master/gpseg-1vim pg_hba.conf增加host all gpadmin10.1.201.55/32trust[gpadmin@ gpseg-1]$ export PGDATA=/home/gpadmin/gpdbdata/master/gpse...
oracle数据同步到Greenplum的python脚本
08-31
DBconn: 数据库连接池配置及查询返回方法 DumpCsv:导出csv文件方法 Log:日志输出方法 DataBase:判断表是否存在、表或分区表是否有数据、是否为分区表、数据导出、表分区遍历、指定分区表导出等方法 py_...
greenplum需要的python库
03-31
它们涵盖了数据处理、数据库连接、系统监控、配置管理以及安全等多个方面，是构建高效、安全的Greenplum数据处理应用的基础。在实际开发中，还需要结合其他Python库，如NumPy、Pandas、Matplotlib等进行数据清洗、...
Greenplum数据仓库技术架构介绍.pptx
10-14
"Greenplum数据仓库技术架构介绍" 本文将对Greenplum数据仓库技术架构进行详细的介绍，包括数据仓库的概念、架构设计、技术实现等方面的知识点。 数据仓库概念 数据仓库是指将来自不同数据源的数据集 Become a ...
数据仓库greenplum
06-23
数据仓库Greenplum是一个强大的并行数据库系统，专为大数据分析设计。它是基于MPP（大规模并行处理）架构，能够高效地处理PB级别的数据。Greenplum由Pivotal公司开发，现已被EMC收购，是许多企业进行数据仓库和大...
greenplum常用命令
10-12
字符串函数 1）字符串拼接：|| 2）字符串长度：length 3）字符串截取：substring('fsfd' from 2 for 3)、substr('fsfd',2,3) 4）字符串两头去字符：trim(' fsf')、trim(both 'x' from 'xfdsx') 5）大小写转换：upper()、lower() 6）替换字符串：replae('fsfsfsf',fs'','ab') 7）把字符串中某几个连续字符替换成指定字符：overlay('freda' placing 'fsf' from 2 for 4) 8）按照某个字符拆分字符串：split_part('adas|dada|ffr','|',2) 9）手动数据：select * from (values ('a1',3),('a2',4)) t(col,num) 10）指定字符串在字符串中的起始位置：position('as' in 'dadassa')
根据postgresql或者greenplum数据库创建表的sql语句转换成最基本的django model
09-12
有时候在django中使用postgresql和greenplum数据库时，使用django model的数据库同步命令时会有问题，生成不了对应的数据库表，无奈只有手工先创建数据库表，然后再根据表字段手动创建model，为了提高效率我写了一个简单的脚本把创建表的sql自动转换成Model格式的字符串。
GP数据库安装及使用手册
12-29
非常全的GP安装与使用手册非常详细适应于企业GP数据库安装
Greenplum第三方工具链接
weixin_34356555的博客
10-13 319
在master节点的$MASTER_DATA_DIRECTORY/pg_hba.conf中添加新客户端服务器信息 #add host all gpadmin 0.0.0.0/0 trust 然后重新服务即可链接 su - gpadmin gpstop gpstart 转载于:https://www.cnblogs.com/peng-...
Python连接Greenplum及常用gp函数和方法（持续更新）
zkkkkkkkkkkkkk的博客
05-21 3617
目录 前言 了解postgresql Python连接gp 记录postgresql一些函数和方法（持续更新） ①：int类型时间转time类型时间 ②：合并两列值 ③：取最近N个月数据 ④：按指定字符串或者符号切割 ⑤：字符串切割 前言 最近也是在做项目，没有什么时间更新。今天抽空来更新一篇在项目中使用的postgresql一些相关的知识。 了解postgresql 需求：千百万数据存储在Greenplum中，需要使用Python来对gp进行读写，其中包含各种字...
Python脚本访问Greenplum数据库安装指导
learning_oracle的博客
07-18 969
安装前准备 （1）操作系统(系统上面要安装一些必备的开发工具(比如gcc等)) linux-82:/home/PyODBC # cat/etc/SuSE-release SUSE Linux EnterpriseServer 11 (x86_64) VERSION = 11 PATCHLEVEL = 1 （2）安装所需的软件包 gree
Python脚本通过unixODBC驱动访问Greenplum(4.3.8.2)数据库安装指导
DataFlow范式
07-08 4866
本篇文档主要用来描述：1.    搭建unixODBC驱动，用来通过odbc方式访问数据库2.    搭建Pyodbc驱动，用来使用Python脚本通过系统的odbc方式来对数据库进行操作3.    这种架构的好处：l  通过odbc访问数据库的性能要好于jdbc的方式l  通过Python脚本开发，后续可以通过调度平台来执行Python执行数据分析，比如设置定时任务，周期性地执行Python脚本
使用pycharm搭建python开发环境及连接greenplum和mysql
小海的专栏
02-19 5516
一、安装PYTHON JDK a) http://www.python.org/downloads/ b) 点击“download python 2.7.11 ” c) 选择与自己机器匹配的JDK  ,一个是64位，一个是32位  Windows x86-64 MSI installer  Windows x86 MSI installer d) 下载安装 二、安装PYTHON开
greenplum 连接到数据节点
06-08
要连接到Greenplum的数据节点，需要使用psql命令行工具或者其他的客户端工具。以下是连接到Greenplum数据节点的步骤： 1. 打开终端窗口，并输入以下命令来连接到Greenplum主节点： ``` psql -h <主节点IP地址> -...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值