java.io.IOException: Pipe closed（S)FTP多文件上传

最新推荐文章于 2023-07-10 10:17:36 发布

HelloWordBoy

最新推荐文章于 2023-07-10 10:17:36 发布

阅读量1.9k

点赞数

分类专栏： FTP 文章标签： java sftp ftp

本文链接：https://blog.csdn.net/AA_Dai/article/details/108767149

版权

FTP 专栏收录该内容

1 篇文章 0 订阅

订阅专栏

本文探讨了在实现FTP和SFTP多文件上传时遇到的问题，特别是当从单文件上传扩展到多文件上传时，由于未正确处理连接关闭导致的异常。解决方案是将FTP/SFTP连接关闭的代码移至整个传输过程结束后，以确保所有文件成功上传。此优化对于提升文件上传的稳定性和效率至关重要。

摘要由CSDN通过智能技术生成

关于FTP，SFTP多文件上传可能出现的问题

1.单文件上传没有问题，多文件上传到第二个出现抛异常

在多文件上传时候应该去把关闭（S）FTP连接写到整个传输之后，因为一开始写的只是单文件的上传，后期加上循环之后没有把上传关闭的方法提出来所以导致出错。

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

HelloWordBoy

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

读取集群中HDFS上的文件报错Error: java.io.IOException: Filesystem closed at org.apache.hadoop.hdfs.DFSCl

QYHuiiQ

06-07

814

在MapReduce中读取HDFS上的文件时报错：这是因为每个datanode使用的是同一个Configuration对象，节点在访问文件系统时会根据Configuration对象创建一个FileSystem实例（我的自定义Mapper中的代码）：创建的这个实例默认会存在缓存中（由于下图中的源码），所以每个节点来读取时使用的就是同一个实例，这样如果一个节点读完了文件，然后关闭流，下一个节点来读取时就会报错。而如果我们不添加配置禁用缓存，那么默认是false：所以需要对Configuration对象添

java.io.IOException: Broken pipe

xusanyao的博客

05-08

988

先了解一下 java.io.IOException: Broken pipe pipe是管道的意思，管道里面是数据流，通常是从文件或网络套接字读取的数据。当该管道从另一端突然关闭时，会发生数据突然中断，即是broken 场景：我们平台（简称A）调用其他小组平台（简称B平台）调用方式：httpclient post请求问题：A调用B平台接口，B平台接口正常执行，但是返回结果很忽快忽慢（可能是他们接口原因），慢的时候可能***10分钟***都没有响应时间。导致结果：在并发量大的情况下A平台的该接

参与评论您还未登录，请先登录后发表或查看评论

SFTP上传文件报：“java.io.IOException: Pipe closed”

bqy115的专栏

02-01

2万+

背景：实现文件SFTP上传和下载功能我这边负责对外打交道，上传的文件内容我不做判断，只是负责从内部SFTP取到文件，上传到外部SFTP,再从外部SFTP取文件放到内部SFTP里面刚开始是把从内部文件取下来放在本地保存，再上传外部SFTP,上传成功之后，删除本地文件，整个流程下来跑的没有问题。后续觉得代码应该更简单一些，对于我这样的老程序员，代码越少看起来越舒服，于是我就把获取内部...

Caused by: java.io.IOException: Pipe closed

黄河涛涛h的博客

11-14

5782

问题？用sftp循环遍历上传文件的时候，包这个错，如果上传单个文件，没有问题解决: 把SftpUtil实例化放到循环里面就可以了 for(String string:map.keySet()){ SftpUtil sftp1 = new SftpUtil("xiecheng", "***", "192.168.2.**", 22); ...

SFTP问题排查 java.io.IOException: Pipe closed

wangxiaonan

07-17

1万+

又是一个线上问题，排查的时间不算长，但是由于日志体现不出来，因此不敢确认是不是sftp的问题，也算是经验记录一下错误日志：（由于日志打印不是特别规范，描述一下大概的错误信息，主要是这两行） java.io.IOException: Pipe closed com.jcraft.jsch.ChannelSftp.start(ChannelSftp.java:315) 排查过程：查看是不是远程...

任务执行异常：java.io.IOException: Pipe closed,com.jcraft.jsch.JSchException: java.io.IOException: Pipe clo

Seven·的专栏

03-01

4250

java.io.IOException: Pipe clo

sftp下载文件过程中报错：“java.io.IOException: Pipe closed” 解决：inputStream复制

qq_38261544的博客

01-20

1万+

背景：实现文件SFTP上传和下载功能，公司一开始实现是直接上传到服务器，生产环境权限不足不能进行新建文件，改进为sftp上传下载，在下载的过程中出现以下报错 sftp下载文件过程中报错：“java.io.IOException: Pipe closed” 原因：关闭SFTP连接的时候InputStream流也随着关闭改造：我从下载SFTP流里面读取字节返回，再把读取的字节放到流里面上传外部SFTP，这样问题就解决了。 public class StreamOperateUtil { pu

JSP上传图片产生 java.io.IOException: Stream closed异常解决方法

01-08

jsp，上传时产生如下异常: 2012-12-31 8:59:21 org.apache.catalina.core.StandardWrapperValve invoke 严重: Servlet.service() for servlet jsp threw exception java.io.IOException: Stream closed … 百思不得...

java.io.IOexception:Broken pipe； java.io.IOexception:connection reset by peer

weixin_43115740的博客

08-18

680

java.io.IOexception:Broken pipe； java.io.IOexception:connection reset by peer 语言：java 需求：java连接hbase，进行读写如标题所示，IO异常了，但是这个时候的报错特别的笼统。根本看不到错误！首先查看hbase的master以及regionserver是否启动，日志有无异常，但是很不幸无异常接下来查看zk的leader日志以及穷情况也无问题因为是架构师写的代码，最开始根本没有想过代码会有问题，仔细查看代码后发现

Hadoop报错Caused by: java.io.IOException: Stream closed问题

wangkuangood3200的专栏

11-10

3751

【问题现象】这几天离线计算平台有个别计算作业运行失败，排查原因，查看平台日志，报错关键信息如下： WARNING: Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions. Consider using a different execution engine (i.e. spark, tez) or using Hive 1.X releases.Error: org.apache.hive.s

sftp在上传文件时抛异常:java.io.IOException: Pipe closed

一只蜗牛的博客

03-04

6064

原因:自己写的sftp上传工具类的获取sftp连接的方法是用了@postconstruct注解,此注解在初始化类时构造方法之后运行,也就是spring管理bean时容器启动时只会运行一次,但是sftp的连接会超时失效这就造成了本地测试时代码没问题但是测试环境是通过定时任务发起的上传文件请求容器启动的时候有sftp连接到真正上传时连接早已经断开解决方案:将获取sftp连接的方...

SFTP 报错 pipe closed

热门推荐

u011835473的博客

04-12

2万+

原因是代码中执行顺序错误，应该是先链接上SFTP 再创建ChannelSFTP。错误代码： ChannelSftp cs = para.sftp; if (!para.isConnected) connectSFTP(para, para.conFTPTryCount); 正确的代码应该如下： if (!para.isConnected) connectS

SftpUtil Pipe closed 超时导致的

Zealot_Cat的博客

04-07

1万+

我的报错情况是连接成功，然后超过90s不操作，自动断开连接，此时没判断连接是否正常，直接读取文件，导致报错。我导致这个错误的步骤是：//创建sftp对象Channel channel = sshSession.openChannel("sftp");channel.connect();ChannelSftp sftp = (ChannelSftp) channel; //等待时间超过超时

java pipe closed_java io系列20之 PipedReader和PipedWriter

weixin_34752204的博客

02-13

754

本章，我们学习PipedReader和PipedWriter。它们和“PipedWriter 是字符管道输出流，它继承于Writer。PipedReader 是字符管道输入流，它继承于Writer。PipedWriter和PipedReader的作用是可以通过管道进行线程间的通讯。在使用管道通信时，必须将PipedWriter和PipedReader配套使用。PipedWriter和PipedRe...

java randomaccessfile pipe closed_Java BufferedWriter close()方法

weixin_42169971的博客

02-24

114

Java BufferedWriter close()方法java.io.BufferedWriter.close()用于关闭输入流。关闭后，调用write()，append()或flush()方法将引发IOException异常。1 语法public Writer close()2 参数无3 返回值无4 示例package com.yiidian;/*** 一点教程网： http://www....

sftp、ssh连接提示client_loop: send disconnect: Broken pipe Connection closed. Connection clos

weixin_43135696的博客

07-10

3584

【代码】sftp、ssh连接提示client_loop: send disconnect: Broken pipe Connection closed. Connection clos。

java randomaccessfile pipe closed_java中RandomAccessFile的问题

weixin_36244678的博客

02-24

142

源代码：importjava.io.*;classTest2{publicstaticvoidmain(String[]args)throwsException{RandomAccessFilerfa=newRandomAccessFile("1.txt","rw");Students1=newStudent(1,"zhangsa...源代码：import java.io.*;class Test...

java randomaccessfile pipe closed_Java中的文件操作（一）RandomAccessFile

weixin_34184444的博客

02-24

134

今天，学到的是java中的文件操作。Java.IO.FileJava中操作文件用到RandomAccessFile类，既可以读取文件内容，也可以向文件输出数据，但不同与普通输入/输出流的是RandomAccessFile支持“随机访问”的方式，即程序可以跳转到文件的任意地方来读写数据。局限：只能读写文件，不能读写其他IO节点了解(1)Java文件模型在硬盘上是byte byte byte 储存的，...

java randomaccessfile pipe closed_JavaIO流（02）RandomAccessFile类详解

weixin_34183908的博客

02-24

146

RandomAccessFile类该类主要是对文件内容进行操作，可以随机的读取一个文件中指定位置的数据；但是如果想实现这样的功能，则每个数据的长度应该保持一致；构造方法：接受File类中的对象，但是在设置时需要设置模式，r：只读；w：只写；rw：读写(常用)publicRandomAccessFile(Filefile,Stringmode)throwsFileNotFoundExcep...

java.io.ioexception: pipe closed