问题现象
使用 sftp 加载大文件报错,加载小文件正常。
原因分析
当集群并发加载任务数和单任务加载线程数较大时,会出现 sftp 文件加载失败的情
况。
解决方法
确定是参数 gcluster_loader_max_data_processors 设置太大造成,将参数调小后无报
错。
说明
建议使用 sftp 加载的方式,sshd 的配置文件需要调整 maxstartup、maxsession 等参数。
问题现象
使用 sftp 加载大文件报错,加载小文件正常。
原因分析
当集群并发加载任务数和单任务加载线程数较大时,会出现 sftp 文件加载失败的情
况。
解决方法
确定是参数 gcluster_loader_max_data_processors 设置太大造成,将参数调小后无报
错。
说明
建议使用 sftp 加载的方式,sshd 的配置文件需要调整 maxstartup、maxsession 等参数。