Streamsets（二）SS添加MySQL驱动包

最新推荐文章于 2022-08-06 10:40:34 发布
最新推荐文章于 2022-08-06 10:40:34 发布
阅读量674 收藏 2
点赞数
分类专栏： Streamsets
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/maomaosi2009/article/details/108292640
版权
本文介绍了如何在Streamsets（SS）中添加MySQL驱动包。首先，手动在服务器上创建SDC Libraries Extra Directory并设置权限，接着通过CM配置SS的外部依赖目录，然后重启SS服务，最后在SS的Package Manager上传MySQL驱动包并重启SS以应用更改。
摘要由CSDN通过智能技术生成

1、创建目录

因为是使用的CDH集成的SS，因此外部依赖的目录实际上并没有创建，外部依赖的存放位置从这查看

 

到部署了SS的服务器上手动创建SDC Libraries Extra Directory配置的目录，并修改权限为sdc:sdc

sudo mkdir /opt/cloudera/parcels/STREAMSETS_DATACOLLECTOR-3.13.0/streamsets-libs-extras
sudo chown -R sdc:sdc /opt/cloudera/parcels/STREAMSETS_DATACOLLECTOR-3.13.0/streamsets-libs-extras

 

 

2、通CM配置SS的外部依赖目录

通过CM界面进入SS的配置页，在sdc-env.sh 的 Data Collector 高级配置代码段（安全阀）中添加配置

export STREAMSETS_LIBRARIES_EXTRA_DIR="/opt/cloudera/parcels/ST
最低0.47元/天 解锁文章
芦苇_
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ss2000驱动
07-30
东芝SS2000是10年前非常优秀和超前的轻簿触摸屏笔记本，驱动已很难找到，这里提供给大家共享。
streamsets添加mysql驱动_StreamSets3.9.1安装说明
weixin_39772388的博客
02-11 309
#1新建账号 streamsetsuseradd streamsetspasswd streamsets输入密码： streamsets#1上传并解压streamsets-datacollector-core-3.9.1.tgz[streamsets@cdhagent2 streamsets-datacollector-3.9.1]$ tar -zxvf streamsets-datacollec...
sscom42&USB转串口驱动
05-31
XP下用的sscom在win7下不能用，今天找个win7可以用的，和大家分享，所有资源下载不用积分，纯属共享。 资源： 1、软件：sscom42 2、可以系统：win7 winXp 3、USB转串口驱动 USB_win7_drivers；
SSM框架——项目驱动
weixin_43772228的博客
03-10 251
整合SSM框架（项目驱动） Mybatis层（Model=Dao+Service） 配置数据库： CREATE DATABASE ssmbuild; USE ssmbuild; CREATE TABLE `books`( `bookID` INT NOT NULL AUTO_INCREMENT COMMENT '书id', `bookName` VARCHAR(100) NOT NULL COMMENT '书名', `bookCounts` INT NOT NULL COMMENT '数量', `detai
Cloudera Manager部署StreamSets
邢为栋
07-14 448
通过Cloudera Manager部署StreamSets。 环境： 服务 版本 操作系统 CentOS7.8 Cloudera Manager 6.3.1 CDH 6.3.2 StreamSets 3.16.1 部署步骤： 1、安装StreamSets Custom Service Descriptor(CSD)。 2、手动安装parcel和校验文件。 3、分发和激活StreamSets Parcel。 4、配置StreamSets服务。 下面将安装步骤进行详细说明。 安
mysql的驱动包 jar包 描述有使用链接
10-26
MySQL驱动包，通常指的是用于Java应用程序连接MySQL数据库的JDBC驱动程序。JAR（Java Archive）包是Java平台上的一个标准归档文件格式，它包含了Java类和其他资源，便于Java应用进行分发和运行。在本场景中，"mysql-...
东芝ss2000m驱动合集包(含显卡驱动) 官方版
07-14
东芝ss2000m驱动合集包含显卡驱动由整理发布，小编提供的驱动包包含东芝ss2000m显卡驱动、声卡驱动、usb驱动、触摸板驱动等等，解决东芝ss2000m笔记本用户所有的驱动安装问题，欢迎下载使用。驱动安装说明用户可以...
桥式驱动芯片-SS6285L规格书
最新发布
02-22
### 桥式驱动芯片-SS6285L规格书知识点详解 #### 一、产品概述 **SS6285L**是一款专为驱动单通道直流有刷马达设计的高性能驱动芯片。该芯片适用于多种应用场景，包括但不限于玩具、自动阀门驱动系统、电磁门锁驱动...
ss628驱动.rar
02-03
标题中的"ss628驱动.rar"表明这是一个与SS628相关的驱动程序压缩包，通常用于解决硬件设备，特别是读卡器的连接和数据传输问题。在IT领域，驱动程序是操作系统与硬件设备之间的桥梁，它使得操作系统能够识别并控制...
高拍仪安装驱动ss628m10p.zip
12-08
《神思高拍仪SS628M10P驱动安装指南及常见问题解析》 在信息化办公的时代，高拍仪作为高效文档扫描与管理的工具，已经广泛应用于各行各业。神思高拍仪以其出色的性能和易用性，赢得了用户的青睐。其中，神思SS628...
StreamSets3.9.1安装说明
weixin_30667301的博客
07-24 406
#1新建账号 streamsetsuseradd streamsetspasswd streamsets输入密码： streamsets#1上传并解压streamsets-datacollector-core-3.9.1.tgz[streamsets@cdhagent2 streamsets-datacollector-3.9.1]$ tar -zxvf streamsets-datacollec...
《StreamSets安装及Mysql数据同步入门示例》
Mathieu66的博客
03-17 4908
一、安装部署 1.1. jar包下载： https://archives.streamsets.com/datacollector/3.7.2/tarball/streamsets-datacollector-core-3.7.2.tgz [maxiu@zhumei00 softwares]$ wget --no-check-certificate https://archives.str...
使用Streamsets将Oracle数据实时同步到MySQL中
JJBOOM425的博客
12-30 4703
相关环境： Oracle 11g：11.2.0.1.0 MySQL：8.0.22 前期准备： 1、打开Oracle的logminer a.在SQL Shell中，以具有DBA的用户身份登录数据库： sqlplus /nolog; conn / as sysdba; b.检查数据库日志记录模式： select log_mode from v$database; 如果查询结果是ARCHIVELOG，则以下操作都不用执行，如果命令返回NOARCHIVELOG，请继续执行以下步骤： c..
StreamSets中配置外部库，解决上传jar包时报REST_1003 - Failed to create directory错误
JJBOOM425的博客
08-14 1392
遇到的问题 今天在添加Oracle Database 的JDBC驱动程序包ojdbc.jar时，这里如果直接进行上传jar包则会报错，REST_1003 - Failed to create directory: lib： 解决步骤： 说明需要配置streamsets外部库，具体步骤如下A、B、C、D。 A、进入到STREAMSETS_DATACOLLECTOR安装的路径 一般路径为：/opt/cloudera/parcels/STREAMSETS_DATACOLLECTOR B、.
StreamSets 安装JDBC驱动指北
高矮
11-09 5695
如果新安装的StreamSet首先要配置环境变量： export STREAMSETS_LIBRARIES_EXTRA_DIR="/opt/cloudera/parcels/STREAMSETS_DATACOLLECTOR/sdc-extras/"   这里是配置你外部包引入的路径， 如果此路径不存在，执行以下命令： mkdir sdc-extras chown -R sdc:sd...
Streamsets部署MySQL JDBC
victory0508的专栏
11-11 1216
1. 创建用户sdc 2. 在/home/sdc目录下，下载tar:https://archives.streamsets.com/datacollector/3.8.0/tarball/streamsets-datacollector-all-3.8.0.tgz streamsets-datacollector-core-3.8.0.tgz 3. 解压：tar zxvfstreamse...
给streamSets装jdbc,实现mysql数据库同步
wenxi2367的博客
08-08 1033
启动streamSets（还没成功） [root@localhost ~]# docker run --restart on-failure -p 18630:18630 -d --name streamsets-dc streamsets/datacollector dc docker: Error response from daemon: Conflict. The container name "/streamsets-dc" is already in use by container "
025-大数据ETL工具之StreamSets安装及订阅mysql binlog
weixin_34148340的博客
06-20 1509
这是坚持技术写作计划（含翻译）的第25篇，定个小目标999，每周最少2篇。 本文主要介绍CDH6.2+StreamSets3.9。 StreamSets是一个大数据采集和数据处理工具。可以通过拖拽式的可视化操作，实现数据管道(Pipelines)的设计和调度。其特点有： 拖拽式的可视化界面操作，上手快。 对常见数据处理(数据源、数据操作、数据输出)支持较好。 内置监控，可以对数据流进行观测。...
【StreamSet】ETL之StreamSet学习之旅十一Mysql同步到Snowflake
m0_54252387的博客
08-06 552
MySQL Binlog支持多种数据更新格式包括Row、Statement和mix（Row和Statement的混合），这里仅仅建议使用Row模式，因为该模式是StreamSets的推荐模式。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值