GreenPlum工具gpload安装指南

最新推荐文章于 2024-01-25 10:25:45 发布
最新推荐文章于 2024-01-25 10:25:45 发布
阅读量2k 收藏 1
点赞数
分类专栏： 经验分享 数据库 笔记 文章标签： etl工程师 数据库开发 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhang0114/article/details/121076796
版权

一、介质准备

Gploader介质需从官方下载，下载地址：Download VMware Tanzu™ Greenplum® — VMware Tanzu Network

GreenPlum6.0及之后的版本loader与client合并在了一起，因此只需要根据操作系统下载client的相应介质：

 在6.0之前的版本中client与loader是分开的，因此要分别下载client和loader的介质：

二、安装过程

gpload依赖于python2.7，因此首先要在环境中安装python2.7版本。

根据版本不同，介质安装方式不同：

6.0以下版本（以5.14.0版本为例）：

1、准备介质

解压介质包

unzip greenplum-clients-5.14.0-rhel7-x86_64.zip #获得greenplum-clients-5.14.0-rhel7-
最低0.47元/天 解锁文章
EngineZhang
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
在ubuntu安装vscode和可视化的代码跟踪调试
klklklbb的博客
11-06 269
在ubuntu安装vscode命令安装1. 1. 在网页下载deb安装包：https://code.visualstudio.com/Download2. 在命令行安装：3. 在命令行执行： 命令安装 1. 1. 在网页下载deb安装包：https://code.visualstudio.com/Download 2. 在命令行安装： （如果出现错误，提示：dpkg: 处理软件包XXX时出错：依赖关系问题，仍未被配置 使用如下命令：sudo apt-get install -f） 3. 在命令行执行：
Kettle调用GPLoad 加载数据到GreenPlum（Windows）
最新发布
qq_36883593的博客
03-22 401
用kettle自带的pg批量加载插件速度也还可以，能到一万+每秒，调用GPLoad加载数据能到两三万条数据每秒，到处百度发现都是比较老的资料，现装完了重新整理一下操作过程，末尾会附上所有安装包的网盘地址。我是从 sqlserver 抽数到Greenplum ,这里我遇到一个坑点，数据库表字段中有描述字段，正式的业务系统用户写出来的描述五花八门，找了许久才发现是描述中的反斜杠 解码错误，用kettle自带的组件替换掉后执行成功了。2）允许的错误数据，正式环境肯定是一条错误数据也不能出现的。
Linux(Centos7.6)安装Greenplum客户端
qq_33445829的博客
12-03 1918
下载客户端 Greenplum客户端官方下载地址 rpm安装 [root@etl gpload]# rpm -ivh greenplum-db-clients-6.10.0-rhel7-x86_64.rpm 配置环境变量 [gpload@etl ~]$ vi .bashrc ##增加 source /usr/local/greenplum-db-clients/greenplum_loaders_path.sh [gpload@etl ~]$ source .bashrc 测试 [gpload@e
AWS CLI version 2 在 Windows 下的安装
HONEY MOOSE
09-10 728
首先你需要到下面的链接地址中下载需要的应用： https://awscli.amazonaws.com/AWSCLIV2.msi 双击运行 双击运行下载的可以运行的文件 下一步继续 下一步继续安装进程 许可协议 你需要同意许可协议后继续安装。 安装路径 你可以选择自定义安装路径，一般来说默认就可以了。 安装进程 在这里单击安装来进行安装。 安装进程 继续安装的进程。 完成安装 单击完成来完成安装。 校验安装 在 Cmd 命令下，输入 aws
GPload yml配置文件详解
firestarwolf的博客
03-24 1018
创建对应YAML文件 创建对应YAML文件 VERSION: 1.0.0.1 # 默认不修改 DATABASE: postgres # 对应入库的数据库名 USER: gpadmin # 通常都是gpadmin HOST: 127.0.0.1 # Greenplum Master IP地址 PORT: 5432 # Greenplum Master 端口号 GPLOAD: INPUT: - SOURCE: LOCAL_HOSTNAME: - localhos...
gpload 客户端安装
happyzxs的博客
12-29 2213
gpload使用说明： 安装gpload ，tdm，dmp 用同一个用户（避免环境变量因素引起的麻烦，目前只测试通root用户） 注1与2 两项只需在启动tdm之前操作一次，3是每次添加脱敏任务都要根据实际填写 1.在系统中安装gpload程序的zip命令 (1)unzip greenplum-loaders-4.3.14.1-build-1-rhel5-x86_
greenplum Utility Guide
01-02
本指南旨在为用户提供关于Pivotal™ Greenplum Database® Version 4.3 Utility Guide的详细信息。该文档详细介绍了如何使用各种管理和客户端实用工具来管理和维护Greenplum数据库系统。本章节将根据给定的文件内容...
Greenplum system admin guide
12-02
- **工具**：提供了多种工具和方法，如`gpfdist`、`gpload`等。 ##### 2.6 关于管理和监控 - **定义**：为了确保系统稳定运行，需要对数据库进行持续的监控与管理。 - **工具**：提供了丰富的工具和接口，例如`...
SQL Server向Greenplum_移植参考手册
09-18
5. **数据导入**：Greenplum提供了多种导入工具，如gpfdist和gpload，用于高效地将数据导入新系统。 **二、SQL移植** SQL移植涉及SQL语法的调整，因为Greenplum遵循PostgreSQL的SQL标准。手册会列出常见的SQL语法...
Greenplum_4.3.6数据库官方文档汇总合集.rar
03-19
本文档合集全面覆盖了Greenplum 4.3.6的主要特性、安装部署、操作管理、性能优化、安全策略以及故障排查等多个方面，为用户提供了详尽的技术指导。 1. **系统架构与特性** - MPP架构：Greenplum采用分布式计算模型...
greenplum 4.3.11.3 gpload.py 支持关键字
12-18
由于greenplum gpload不支持设置关键字，所以有些表导入会失败。本文件修改了gpload脚本，使其支持了字段名为关键字。替换/usr/local/greenplum-db-4.3.11.3/bin/gpload.py 即可。
greenplum-db-4.2.8.0-build-1-RHEL5-x86_64
07-10
Greenplum提供了丰富的文档和工具，如`gpload`用于数据加载，`gpfdist`用于数据分发，以及`pgAdmin`等图形管理工具。 总结，Greenplum 4.2.8.0在RHEL5上的安装涉及多个步骤，包括系统准备、下载解压、安装配置、...
kettle之gpload组件使用
CS_GUNNER的博客
01-28 2382
KETTLE使用GPLOAD组件 Greenplum已经很少人用了，最近新项目要用这个的时候发现网上资料不多，尤其是kettle+gp的组合。所以最后经过几天加班才研究出来，特地记录一下。 这里用的kettle是最新的版本kettle9.0.0.0-423; greenplum是6.0.1的；gp安装在linux上的虚拟机上，这里说写merge模式的。 首先为什么要用gpload这个组件呢，是因为开始用kettle的表输出和插入更新这两个组件来把MYSQL的数据抽到greenplum里，速度实在是慢到接受不
系统运维系列 之gpload的简单实用
langxiaolin的博客
01-25 131
gpload的简单实用
Greenplum Python工具库gpload学习——gpload类
肥叔菌的博客
11-02 938
gpload.py代码写得挺简洁的，主要逻辑集中中gpload类中，其中run函数是最为重要的，而run函数主要逻辑就是调用run2函数。 if __name__ == '__main__': g = gpload(sys.argv[1:]) g.run() sys.stdout.flush() sys.stderr.flush() os._exit(g.exitValue) gpload构造函数 def __init__(self,argv):
Greenplum中装载和卸载数据
日常打卡每日一Bug的博客
05-23 614
装载和卸载数据GP装载概述关于外部表1) 外部表允许用户像访问标准数据库表一样访问外部表 2) 结合GP的并行文件分配程序(gpfdist)，外部表支持在装载和卸载数据时全并行化利用所有segment实例的资源 3) GP还可以利用Hadoop分布式文件系统的并行架构来访问文件 4) GP提供了两种类型的外部表： 可读外部表：用于数据装载，不允许对数据进行修改 可写外部表：用于数据卸载，从数据库表...
gpload 导入csv数据进Greenplum数据库的yaml文件编写以及运行
weixin_45948414的博客
08-05 692
gpload 导入csv数据进Greenplum数据库的yaml文件编写以及运行
通过kettle 的gpload 插件和greenplum-loaders实现批量并行加载
happyzxs的博客
12-18 5105
1.安装客户端，前面已经说过。不在多言 2.修改kettle的源码/*! * This program is free software; you can redistribute it and/or modify it under the * terms of the GNU Lesser General Public License, version 2.1 as published by
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

EngineZhang

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值