Java连接ftp挪数据_JAVA ftp连接池功能实现

最新推荐文章于 2024-04-25 16:58:38 发布
最新推荐文章于 2024-04-25 16:58:38 发布
阅读量249 收藏
点赞数
文章标签： Java连接ftp挪数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_28911479/article/details/114803026
版权

抽象类：

package com.echo.store;

import java.util.Enumeration;

import java.util.Hashtable;

abstract class ObjectPool {

long ttl ;

Hashtable lock,unlock ;

public ObjectPool() {

ttl = 50000;

lock = new Hashtable();

unlock = new Hashtable();

}

abstract T create();

abstract boolean valide(T t);

abstract void destory( T t );

synchronized public T takeOut(){

long now = System.currentTimeMillis();

T t ;

if(unlock.size() > 0){

Enumeration e = unlock.keys();

while ( e.hasMoreElements() ){

t = e.nextElement();

if( ( now-unlock.get(t) > ttl) || !valide(t) ){

unlock.remove(t);

destory(t);

t = null;

}else{

unlock.remove(t);

lock.put(t, ttl);

return t;

}

}

}

t = create();

lock.put(t,ttl);

return t;

}

synchronized public void takeIn( T t ){

lock.remove(t);

unlock.put( t, ttl);

}

}

Ftp链接池实现类：

package com.echo.store;

import org.apache.commons.net.ftp.FTP;

import org.apache.commons.net.ftp.FTPClient;

import java.io.IOException;

import java.util.Hashtable;

public class FtpPool extends ObjectPool {

FtpConfig ftpConfig;

public static Hashtable instance = new Hashtable();

public static final FtpPool getInstance( FtpConfig cfg ){

if (instance.get(cfg) == null) {

synchronized (FtpPool.class){

if (instance.get(cfg) == null) {

instance.put(cfg, new FtpPool( cfg ));

}

}

}

return instance.get(cfg);

}

public FtpPool( FtpConfig ftpCfg ) {

ftpConfig = ftpCfg;

}

@Override

FTPClient create( ) {

FTPClient ftpClient = new FTPClient();

try {

ftpClient.connect(ftpConfig.getIp());

ftpClient.login(ftpConfig.getUser(),ftpConfig.getPasswd());

ftpClient.setFileType(FTP.BINARY_FILE_TYPE);

} catch (IOException e) {

e.printStackTrace();

}

return ftpClient;

}

@Override

boolean valide(FTPClient ftpClient) {

return ftpClient.isConnected();

}

@Override

void destory(FTPClient ftpClient) {

//ftpClient.;

}

}

调用方法：

public static void main(String[] args) {

FtpConfig cfg = new FtpConfig();

cfg.setIp("xxx");

cfg.setUser("xxx");

cfg.setPasswd("vvv");

FtpPool instance = FtpPool.getInstance(cfg);

FTPClient ftpClient = instance.takeOut();

FtpOperation ftpOperation = FtpOperation.getInstance();

ftpOperation.download(ftpClient,"/remote", "./location");

}

上传方法实现：

package com.echo.services;

import org.apache.commons.net.ftp.FTPClient;

import org.apache.commons.net.ftp.FTPFile;

import org.slf4j.Logger;

import org.slf4j.LoggerFactory;

import java.io.File;

import java.io.FileOutputStream;

import java.io.IOException;

public class FtpOperation {

Logger log = LoggerFactory.getLogger(FtpOperation.class);

public static FtpOperation instance = null;

private FtpOperation() {}

public static FtpOperation getInstance(){

if( instance == null ){

synchronized (FtpOperation.class){

if (instance == null) {

instance = new FtpOperation();

}

}

}

return instance;

}

public void download(FTPClient ftpClient, String remote, String loc ){

try {

log.info("remote :"+remote);

ftpClient.changeWorkingDirectory(remote);

//生成本地目录

File locFile = new File(loc);

if( !locFile.exists() ){

locFile.mkdir();

}

downLoadFile(ftpClient, loc);

} catch (IOException e) {

e.printStackTrace();

}

}

private void downLoadFile( FTPClient ftpClient, String LocDir ){

try {

for (FTPFile ftpFile : ftpClient.listFiles()) {

String path = LocDir+"/"+ftpFile.getName();

if( ftpFile.isDirectory() ){

//生成本地目录

File localFile = new File( path );

if( !localFile.exists() ){

localFile.mkdir();

}

//浏览Ftp目录

ftpClient.changeWorkingDirectory( ftpFile.getName());

downLoadFile(ftpClient, path );

ftpClient.changeToParentDirectory();

}else{

if(

( !ftpFile.getName().equals("ualice.access.log") )

){

continue;

}

FileOutputStream fostream = new FileOutputStream( path );

ftpClient.retrieveFile(ftpFile.getName(), fostream);

fostream.flush();

fostream.close();

log.info("文件："+LocDir+ftpFile.getName()+" 下载完毕。");

}

}

} catch (IOException e) {

e.printStackTrace();

}

}

}

Java 自定义FTP连接池

转自:https://blog.csdn.net/eakom/article/details/79038590 版权声明:本文为博主原创文章,未经博主允许不得转载. https://blog.csdn ...

FTP连接池

我们项目使用的是 Apache的(commons-net-3.2.jar) FTPClient,但是系统偶尔会有异常,趁着刚解决完,总结一下. 日志中提示是类似 java.lang.Exception ...

Java Mysql连接池配置和案例分析--超时异常和处理

前言: 最近在开发服务的时候, 发现服务只要一段时间不用, 下次首次访问总是失败. 该问题影响虽不大, 但终究影响用户体验. 观察日志后发现, mysql连接因长时间空闲而被关闭, 使用时没有死链检测 ...

java自定义连接池

1.java自定义连接池 1.1连接池的概念: 实际开发中"获取连接"或“释放资源”是非常消耗系统资源的两个过程,为了姐姐此类性能问题,通常情况我们采用连接池技术来贡献连接Conn ...

使用commons-pool2实现FTP连接池

​ GitHub : https://github.com/jayknoxqu/ftp-pool 一. 连接池概述 ​ 频繁的建立和关闭连接,会极大的降低系统的性能,而连接池会在初始化的时候会创建一定 ...

MySQL_(Java)【连接池】使用DBCP简单模拟银行转账事物

dbcp下载 传送门 Commons Pool下载 传送门 Commons log下载 传送门 MySQL_(Java)[事物操作]使用JDBC模拟银行转账向数据库发起修改请求 传送门 MySQL_( ...

MySQL_(Java)【连接池】简单在JDBCUtils.java中创建连接池

MySQL_(Java)[事物操作]使用JDBC模拟银行转账向数据库发起修改请求 传送门 MySQL_(Java)[连接池]使用DBCP简单模拟银行转账事物 传送门 Java应用程序访问数据库的过程: ...

Java创建连接池连接不同数据库

在一个应用里面,可能涉及到连接多个不同数据库进行操作,而每次连接写不同的实现会很麻烦.前面已经会了用JDBC连接数据库,那么利用反射和工厂模式,可以实现连接不同的数据库,这样处理起来将会很方便.同时建 ...

Java开源连接池c3p0的基本用法

前言:其实c3p0只是一个实现了javax.sql 接口 DataSource的一个工具集,使用c3p0可以帮我们管理宝贵的Connection资源,无须我们去创建连接(免去每次配置数据库驱动,url ...

随机推荐

知方可补不足~sqlserver中使用sp_who查看sql的进程

回到目录 在SQLSERVER中每个会话,即每个查询分析器窗口都会产生一个SQL进程,对于那些持续时间短的进程,它们转瞬即失,而对于持续时间比较长的,我们需要希望查看它的运行状态,就可以借助SQL提供 ...

怎么使PUTTY一直连接

如何才能保证PUTTY一直连接,即使我们好长时间不去敲命令,也让它一直连接着? PuTTY的设置方法是:在Connection里面有个Seconds between keepaliaves.这里就是每 ...

Nginx重新编译添加模块

原文链接:http://www.linuxidc.com/Linux/2013-06/86438.htm 找到安装nginx的源码根目录,如果没有的话下载新的源码 http://nginx.org t ...

js对象，原型，call，apply浅析

//对象直接量,创建对象最简单的方式是在js里使用对象直接量 var book = { "main title": "js", //属性里有空格,要用引号 &q ...

Codeforces Round #343 (Div. 2) D - Babaei and Birthday Cake 线段树+DP

题意:做蛋糕,给出N个半径,和高的圆柱,要求后面的体积比前面大的可以堆在前一个的上面,求最大的体积和. 思路:首先离散化蛋糕体积,以蛋糕数量建树建树,每个节点维护最大值,也就是假如节点i放在最上层情况 ...

C#读取Excel表中的数据时，为何有些行的字段内容读取不到

转载:http://bbs.csdn.net/topics/360220285 1.当某列数据中含有混合类型时,在.NET中使用Microsoft.Jet.OLEDB.4.0来读取Excel文件造成数 ...

java获得url里面所带参数的值

url: http://localhost:8080/test/list?p=1&d=2014 要获得所带参数p和d的值,方法如下: int p = Integer.parseInt(requ ...

ON DUPLICATE KEY UPDATE 当记录不存在时插入，当记录存在时更新

MySQL 当记录不存在时插入,当记录存在时更新网上基本有三种解决方法.第一种:示例一:插入多条记录假设有一个主键为 client_id 的 clients 表,可以使用下面的语句:INSERTINT ...

Android开发----------- 手电筒改进版本号

在之前的基础上 在 res 目录以下: 加入一个 drawable/local_me.xml localme_cml

工业狂魔
关注
java ftp 心跳_java实现ftp连接池
weixin_32672471的博客
02-13 1158
前言由于工作需要使用到ftp服务，一开始是每次建立ftp连接，上传文件成功后，再释放连接，后来发现这个方法太浪费资源和时间了，就想到了使用ftp连接池的方式实现，这样，预先创建好ftp连接池，需要上传的时候从池子取一个连接，上传成功后再放回池子即可，省下了创建和释放ftp连接的时间。实现ftp服务的配置文件在config.properties配置好ftp服务ftp.ip=127.0.0.1ftp....
java 多ftp连接池,实现一个ftp连接池
weixin_32787251的博客
03-12 991
背景在此之前，本人曾经写过两篇总结文章，《封装一个FTP工具类》和《使用commons-pool管理FTP连接》，相应地造了两个小项目轮子。两个项目之间有相同点，也有不同的侧重点：都是使用commons-net和commons-pool库构建的，前者最大的特点是使用了模板方法设计模式，借鉴了JdbcTemplate的实现，造了上传下载工具类方法；后者最大的特点是使用AutoCloseable的方式...
java ftp连接池
03-08
在网上找了好久没有现成的ftp连接池jar包，自己花了一些时间实现了一个简单的连接池，用了一段时间稳定性还可以。
java ftp 连接池
weixin_43881309的博客
12-31 1562
Ftp连接池 maven引入，主要引入ftp的包和连接池的包 其他默认使用spring的包。 <dependency> <groupId>commons-net</groupId> <artifactId>commons-net</artifactId> <version>3.3</version> </depende
Java 自定义FTP连接池
eakom
01-11 5123
一、引入FTP包和连接池包 dependency> groupId>commons-netgroupId> artifactId>commons-netartifactId> version>3.5version> dependency> dependency> groupId>org.apache.commonsgroupId> artifa
Java连接FTP服务器，并使用ftp连接池进行文件操作
最新发布
qq_41481924的博客
04-25 2466
使用Java连接FTP服务器进行文件操作，包含文件和文件夹上传、下载、获取文件夹内文件名、文件数量、将文件夹打包成zip在浏览器下载等接口，并且使用FTP连接池降低资源消耗，提高响应速率。
java ftpclient 池_JAVA ftp连接池功能实现
weixin_35763055的博客
02-13 263
packagecom.echo.services;importorg.apache.commons.net.ftp.FTPClient;importorg.apache.commons.net.ftp.FTPFile;importorg.slf4j.Logger;importorg.slf4j.LoggerFactory;importjava.io.File;importjava.io.FileO...
Java FTPClient连接池的实现
08-27
Java FTPClient连接池的实现 在这篇文章中，我们主要介绍了Java FTPClient连接池的实现。首先，我们需要了解为什么需要使用连接池。创建和销毁FTPClient对象是非常耗费资源的操作，因此，我们可以使用连接池来复用...
ftp.rar_ftp_ftp java_java ftp 下载
09-24
在Java中，我们可以创建`FTPClient`对象来建立FTP连接。首先，设置服务器地址、端口号、用户名和密码。然后，使用`connect()`方法连接到FTP服务器，`login()`方法登录。如果服务器要求SSL/TLS安全连接，可以使用`...
java ftpclient多线程_Spring Boot：Spring Boot整合FTPClient线程池
weixin_42601134的博客
02-13 586
最近在写一个FTP上传工具，用到了Apache的FTPClient，但是每个线程频繁的创建和销毁FTPClient对象对服务器的压力很大，因此，此处最好使用一个FTPClient连接池。仔细翻了一下Apache的api，发现它并没有一个FTPClientPool的实现，所以，不得不自己写一个FTPClientPool。下面就大体介绍一下开发连接池的整个过程，供大家参考。我们可以利用Apache提供...
java ftpClient 连接池设计
08-11
1 博文链接：https://bai2mumu.iteye.com/blog/2231916
ftp连接池实例
11-03
经过几天的琢磨，去看了csdn上一位大牛的数据库的连接池实现方案，从中感悟很多，感谢这位大神。 让我才能有信心去坚持下去。也不知道写的好不好··不好的话，大家指出。但是我是努力去做了，这一个过程，很享受，大家互相学习吧~ 其实ftp连接池跟数据库连接池的原理是差不多的，不同的是ftp连接池有个连接时间的限制，如果你没设置的话，它的默认连接服务器的时间是0，所以我们要合理的设置它的服务器的时间，ftp.setConnectTimeout(5000);在这里设置了它的时间是5s。 写ftp连接池的目的就是合理的利用资源，本文的目的是在初始的时候，创建10个Ftp连接，放到一个队列中去，当多个用户同时去下载ftp上的文件的时候，就会从队列中取，若当前的队列中存在着空闲的连接，就获取该ftp的连接，并设置此连接为忙的状态，否则就在创建新的连接到连接池中去（有最大的连接池数的限制，不能超过这个连接数，超过的话，就会进入等待状态，直到其它连接释放连接），在执行下载操作的前对登录ftp时间进行判断。看是否超时，超时的话，就重新连接到ftp服务器，在这里我所做的操作就是，在开始创建ftp连接池的时候，记录下系统的当前时间，例如为：long beginTime=System.currentTimeMillis(),在取文件之前获得 当前系统的时间 long endTime=System.currentTimeMillis(),此时我们就可以获得系统登录ftp的时间time=endTime-beginTime,在此我们可以用time与ftp最大登录服务器时间（ftpPool.getConnection();）进行比较。 当然了，在操作完之后我们需要将所操作的连接池中的ftp设置为空闲状态。代码在文件中，为了测试，我本地自己创建了一个ftp服务器，创建ftp的方法，大家可以到网上查资料，我用的是Serv-U工具。傻瓜式的。所用到的jar包是commons-net2.0.
FTPClient连接池
07-22
基于SpringBoot搭建 使用apache的commons-pool2 构建 FTPClient连接池 有FtpClientFactory、FtpClientPool、FtpConfig、FtpOperate 四个类组成 还有ftp连接池的一些配置参数信息在ftp.properties文件中 注释完整欢迎大家下载使用
java 连接 FTP 文件操作(上传，下载，删除，复制
07-23
java 连接 FTP 文件操作(上传，下载，删除，复制
ftp上传文本、移动文件、删除文件
10-02
public class FTPUtil { private FTPClient ftpClient=null; private boolean result = false; private FileInputStream fis; String ftpHost = "10.16.111.111"; String port = 21 String ftpUserName = "ftpuser11; String ftpPassword = "1234561"; /** * 登录服务器 * @param ftpInfo * @return * @throws IOException */ public FTPClient login() throws IOException { ftpClient = new FTPClient(); ftpClient.connect(ftpHost); boolean login = ftpClient.login(ftpUserName,ftpPassword); int reply = ftpClient.getReplyCode(); if (!FTPReply.isPositiveCompletion(reply)) { ftpClient.disconnect(); } if(login){ System.out.println("ftp连接成功！"); }else{ System.out.println("ftp连接失败！"); } //ftpClient.setControlEncoding("GBK"); return ftpClient; } /** * 字符串作为文件上传指定目录 下 * @param content 源字符串 * @param uploadDir 上传目录 * @param ftpFileName 上传文件名称 * @throws Exception */ public void ftpUploadByText(String content ,String uploadDir,String ftpFileName) throws Exception{ try { ftpClient = this.login(); //创建目录 createDir(ftpClient,uploadDir); // 设置上传目录 这个也应该用配置文件读取 ftpClient.changeWorkingDirectory(uploadDir); ftpClient.setBufferSize(1024); ftpClient.setControlEncoding("GBK"); // 设置文件类型（二进制） ftpClient.setFileType(FTPClient.BINARY_FILE_TYPE); String fileName = new String(ftpFileName.getBytes("GBK"),"iso-8859-1"); OutputStream os = ftpClient.storeFileStream(fileName); byte[] bytes = content.getBytes(); os.write(bytes); os.flush(); os.close(); } catch (Exception e) { ftpClient.disconnect(); ftpClient = null; e.printStackTrace(); throw e; }finally{ ftpClient.disconnect(); ftpClient = null; } } /** * 移动文件 * @param ftpInfo * @return * @throws Exception */ public boolean moveFile(FTPInfo ftpInfo)throws Exception { boolean flag = false; try { ftpClient = this.login(); flag = this.moveFile(ftpClient, ftpInfo.getChangeWorkingDirectoryPath(), ftpInfo.getFilePath()); } catch (IOException e) { e.printStackTrace(); throw e; } finally { try { ftpClient.disconnect(); ftpClient = null; } catch (IOException e) { e.printStackTrace(); throw new RuntimeException("关闭FTP连接发生异常！", e); }catch (Exception e) { e.printStackTrace(); throw e; } } return flag; } /** * 删除文件 * @param ftpInfo * @return * @throws Exception */ public boolean deleteFile(FTPInfo ftpInfo)throws Exception { boolean flag = false; try { ftpClient = this.login(); flag = this.deleteByFolder(ftpClient, ftpInfo.getChangeWorkingDirectoryPath()); } catch (IOException e) { e.printStackTrace(); throw e; } finally { try { ftpClient.disconnect(); ftpClient = null; } catch (IOException e) { e.printStackTrace(); throw new RuntimeException("关闭FTP连接发生异常！", e); }catch (Exception e) { e.printStackTrace(); throw e; } } return flag; } /** * 实现文件的移动，这里做的是一个文件夹下的所有内容移动到新的文件， * 如果要做指定文件移动，加个判断判断文件名 * 如果不需要移动，只是需要文件重命名，可以使用ftp.rename(oleName,newName) * @param ftp * @param oldPath * @param newPath * @return */ public boolean moveFile(FTPClient ftp,String oldPath,String newPath){ boolean flag = false; try { ftp.changeWorkingDirectory(oldPath); ftp.enterLocalPassiveMode(); //获取文件数组 FTPFile[] files = ftp.listFiles(); //新文件夹不存在则创建 if(!ftp.changeWorkingDirectory(newPath)){ ftp.makeDirectory(newPath); } //回到原有工作目录 ftp.changeWorkingDirectory(oldPath); for (FTPFile file : files) { if(file.isDirectory()) { moveFile(ftp,oldPath+file.getName()+"/" ,newPath+file.getName()+"/"); }else{ //转存目录 flag = ftp.rename(oldPath+new String(file.getName().getBytes("GBK"),"ISO-8859-1"), newPath+"/"+new String(file.getName().getBytes("GBK"),"ISO-8859-1")); } if(flag){ System.out.println(file.getName()+"移动成功"); }else{ System.out.println(file.getName()+"移动失败"); } } ftp.removeDirectory(new String(oldPath.getBytes("GBK"),"ISO-8859-1")); } catch (Exception e) { e.printStackTrace(); System.out.println("移动文件失败"); } return flag; } /** * 删除FTP上指定文件夹下文件及其子文件方法，添加了对中文目录的支持 * @param ftp FTPClient对象 * @param FtpFolder 需要删除的文件夹 * @return */ public boolean deleteByFolder(FTPClient ftp,String FtpFolder){ boolean flag = false; try { ftp.changeWorkingDirectory(new String(FtpFolder.getBytes("GBK"),"ISO-8859-1")); ftp.enterLocalPassiveMode(); FTPFile[] files = ftp.listFiles(); for (FTPFile file : files) { //判断为文件则删除 if(file.isFile()){ ftp.deleteFile(FtpFolder+new String(file.getName().getBytes("GBK"),"ISO-8859-1")); } //判断是文件夹 if(file.isDirectory()){ String childPath = FtpFolder +file.getName()+ "/"; //递归删除子文件夹 deleteByFolder(ftp,childPath); } } //循环完成后删除文件夹 flag = ftp.removeDirectory(new String(FtpFolder.getBytes("GBK"),"ISO-8859-1")); if(flag){ System.out.println(FtpFolder+"文件夹删除成功"); }else{ System.out.println(FtpFolder+"文件夹删除成功"); } } catch (Exception e) { e.printStackTrace(); System.out.println("删除失败"); } return flag; } /** * 创建目录 * @param createpath * @param sftp */ public void createDir(FTPClient ftpClient,String createpath) throws Exception { try { if(ftpClient.changeWorkingDirectory(createpath)) { return; } String pathArry[] = createpath.split("/"); StringBuffer filePath = new StringBuffer("/"); for (String path : pathArry) { if (path.equals("")) { continue; } filePath.append(path + "/"); if(!ftpClient.changeWorkingDirectory(filePath.toString())) { ftpClient.makeDirectory(filePath.toString()); ftpClient.changeWorkingDirectory(filePath.toString()); } } ftpClient.changeWorkingDirectory(createpath); }catch (Exception e) { e.printStackTrace(); throw new Exception("创建路径错误：" + createpath); } } }
java实现ftp连接池ftp-client-pool
夏增明的博客
05-01 2477
首先引入maven依赖 <!-- apache ftp支持 --> <dependency> <groupId>commons-net</groupId> <artifactId>commons-net</artifactId> <version>3.6</version> </dependency> <!-- apache 连接池支持 --> <depe
java ftp连接池_ftp连接池客户端(示例代码)
weixin_39854867的博客
02-16 258
package com.scenetec.isv.utils.ftp.core;import com.scenetec.isv.utils.ftp.config.FtpClientProperties;import lombok.extern.slf4j.Slf4j;import org.apache.commons.net.ftp.FTPClient;import org.apache.comm...
Apache Commons Pool 2.x Java连接池应用：FtpClient连接池、NettyClient连接池
leijmdas的专栏
04-06 1036
throw new Exception("ftpClient登陆失败!password:"log.error("FTPServer 拒绝连接");log.error("ftpClient登陆失败!log.error("FTP连接失败：" + e);
Java连接ftp挪数据,Java操作FTP
weixin_33462050的博客
03-16 145
// lombok 注解@Slf4jpublic class FtpUtil {public static final String SPLITTER = "/";public static final int BUFFER_SIZE = 1024; public static final int INTQUANTUM_SECOND_MILLIS = 1000;public static void...
Java FTPClient连接池自定义实现与Apache common-pool应用
Java FTPClient连接池的实现是一种优化多线程FTP上传性能的技术，特别是在大量并发请求时，频繁创建和销毁FTPClient实例会带来不必要的性能开销。本文将详细介绍如何利用Java的连接池机制来管理和复用FTPClient对象...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值