文件服务器 架设,文件服务器架设教程

文件服务器架设教程 内容精选

换一换

c8a5a5028d2cabfeeee0907ef5119e7e.png

本教程旨在演示使用GDS(Gauss Data Service)工具将远端服务器上的数据导入GaussDB(for openGauss)中的办法,帮助您学习如何通过GDS进行数据导入的方法。在本教程中,您将:生成本教程需要使用的CSV格式的数据源文件。将数据源文件上传到数据服务器。创建外表,用于对接GDS和GaussDB(for open

本教程旨在演示使用GDS(General Data Service)工具将远端服务器上的数据导入GaussDB(DWS)中的办法,帮助您学习如何通过GDS进行数据导入的方法。在本教程中,您将:生成本教程需要使用的CSV格式的数据源文件。将数据源文件上传到数据服务器。创建外表,用于对接GDS和GaussDB(DWS),及将数据服务器上的数据

文件服务器架设教程 相关内容

GaussDB(DWS)支持将存在远端服务器上的TEXT、CSV和FIXED格式的数据导入到集群中。本教程以CSV格式的数据为例进行演示。其他两种格式,方法相同,只在外表的相关参数项设置上有差异,详细请参见使用GDS从远端服务器导入数据。为了演示如何导入多个文件,此教程使用如下3个CSV格式的数据文件作为示例进行讲解。在实际场景中,数据源

已准备好用于存放源数据的服务器,且此服务器可以与GaussDB(for openGauss)正常通信。存放源数据的服务器拥有充足的系统资源(内存、磁盘空间、文件句柄等)。单击此处获取GaussDB(for openGauss)软件包,解压获取GDS软件包。

文件服务器架设教程 更多内容

4a3dbebf52c74fe713408ff26033c570.png

例如main.cpp中所需输入数据如下所示:rank:输出结果的维度。dim:表示有1000行推理结果。label:表示数据标签序号。value:表示每个结果下的置信度。

784dc64e49dbbf1bc7916486d97eab2c.png

在存放数据源文件的服务器上,安装配置并启动GDS服务。以便后续应用GDS服务连通GaussDB(DWS),进行数据导入。以上传SUSE Linux版本的工具包为例 ,将GDS工具包“dws_client_8.1.x_suse_x64.zip”上传至上一步所创建的目录中。若当前集群版本为8.0.x及以前版本,请跳过9,直接执行10。若当前集

784b2dc537fb8677eac9c3453eafe288.png

GaussDB(for openGauss)支持将存在远端服务器上的TEXT、CSV和FIXED格式的数据导入到集群中。本教程以CSV格式的数据为例进行演示。其他两种格式,方法相同,只在外表的相关参数项设置上有差异,详细请参见8.1。为了演示如何导入多个文件,此教程使用如下3个CSV格式的数据文件作为示例进行讲解。在实际场景中,数据源文件

e8856eb4a33744e9e363326f14bf7b97.png

体验馆提供了各场景下的无服务器构造方案,指导您端到端地构建一个无服务器案例。对于每个案例都介绍了如下内容,包含的案例如表1所示。动态展示案例架构图。动态展示案例的实际效果。使用动图分步骤演示构建过程。

a0c42bb47a44c6ed1cd778f97e224009.png

华为云帮助中心,为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档,帮助您快速上手使用华为云服务。

b80c406dd1bff1336ad2b20072f4b1ca.png

在存放数据源文件的服务器上,安装配置并启动GDS服务。以便后续应用GDS服务连通GaussDB(for openGauss),进行数据导入。以上传EULER Linux版本的工具包为例,将软件安装包中的GDS工具包“GaussDB-Kernel-VxxxRxxxCxx-EULER-64bit-Gds.tar.gz”上传至上一步所创建的目录

402994aa3acda5ebf01ee1c6ade658d0.png

CDM支持周期性自动将新增文件上传到OBS,不需要写代码,也不需要用户频繁手动上传即可使用OBS的海量存储能力进行文件备份。这里以CDM周期性备份FTP的文件到OBS为例进行介绍。例如:FTP服务器的to_obs_test目录下有一个子目录another_dir和两个文件file1和file2,其中file2在another_dir目录下

a4c4c5b28481f97f2139da8bb7c47c58.png

对数据导入过程中出现的数据格式错误信息进行处理,若没有错误信息,此步骤可跳过。按照本教程的示例操作,错误表中应该无错误信息。您也可以将步骤2:在数据服务器上安装配置和启动GDS一节所建外表中的FILL_MISSING_FIELDS和IGNORE_EXTRA_DATA改为 'false'后,重新进行数据导入并查询错误表。此时,您将看到因如下

c98716077afa118c4722d3df701d5c06.png

CDM支持周期性自动将新增文件上传到OBS,不需要写代码,也不需要用户频繁手动上传即可使用OBS的海量存储能力进行文件备份。这里以CDM周期性备份FTP的文件到OBS为例进行介绍。例如:FTP服务器的to_obs_test目录下有一个子目录another_dir和两个文件file1和file2,其中file2在another_dir目录下

293f5c3a9815ee95e4ed79a7f04b8f18.png

文件系统挂载功能为函数提供了按需扩展的文件存储,可为多个函数、多个实例提供共享访问,函数可以像访问本地文件系统一样对这些共享文件进行读写等操作。您只需要在函数上进行相关配置,如对应的文件系统,函数访问路径等信息。目前FunctionGraph函数支持以下文件系统配置。SFS文件系统弹性文件服务(Scalable File Service,

b5693ff7a1d6bd5360d83fe2bfafdfb3.png

本章节为您介绍以下内容:准备弹性云服务器作为GDS服务器在使用GDS导入导出数据之前,需要准备一台或多台与GaussDB(DWS) 集群在相同VPC内的Linux弹性云服务器(简称ECS),用于安装GDS工具包,作为GDS服务器。对于导入数据待导入的数据源文件,需要存放到GDS服务器上。数据源文件所在的服务器称为数据服务器,也称为GDS服

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值