ftp读取文件并处理数据插入数据库

{
    FTPClient ftpClient = new FTPClient();
    try {
        //生成文件名(我这里是生成了具体的文件夹名,不知道的话可以遍历取)
        Calendar cal=Calendar.getInstance();
        cal.add(Calendar.DATE,-1);
        Date date = cal.getTime();
        String fileName = "test"+ DateUtils.format(date,"yyyyMMdd") + ".txt";
        //连接ftp服务器
        ftpClient.setConnectTimeout(1000 * 30);
        ftpClient.connect(host);
        ftpClient.login(userName,passWord);
        //这个要加不然会出现一个问题,好像是乱码的问题导致找不到对应的文件
        ftpClient.setFileType(FTP.BINARY_FILE_TYPE);
        //获取响应code,连接失败就关闭
        int replyCode = ftpClient.getReplyCode();
        if (!FTPReply.isPositiveCompletion(replyCode)) {
            ftpClient.disconnect();
        }
        //这个要加不然会出现一个问题,好像是乱码的问题导致找不到对应的文件
        ftpClient.enterLocalPassiveMode();
        //获取文件流
        InputStream is = ftpClient.retrieveFileStream(fileName);
        //使用字节流处理
        BufferedReader br = new BufferedReader(new InputStreamReader(is));
        //将每行数据放入list
        List<Map<String,Object>> list = new ArrayList<>();
        String s;
        int line = 1;
        String[] keys = null;
        //不为空就一直读,其中要跳过不要的
        while((s = br.readLine()) != null) {
            if (line <= 2) {
                if(line == 2)keys = s.split("\\|");
                line++;
                continue;
            }
            if (s.contains("111") || s.contains("111")) continue;
            //切割str
            String[] values = s.split("\\|");
            Map<String,Object> record = new HashMap<>();;
            for (int i = 0; i < values.length; i++) {
                record.put(StringUtil.trimAll(keys[i]),StringUtil.trimAll(values[i]));
            }
            list.add(record);
        }

        //遍历插入数据库
        for (Map<String,Object> tradeRecord : list){
            //这里写自己的业务逻辑
        }
        //关闭流
        br.close();
    } catch (Exception e) {
        e.printStackTrace();
    } finally {
        if (ftpClient.isConnected()) {
            try {
                //关闭ftp连接
                ftpClient.disconnect();
            } catch (IOException ioe) {
            }
        }
    }
}
  • 1
    点赞
  • 12
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Oracle数据库也可以使用类似的方法从FTP服务器上提取文本数据并将其插入数据库中。以下是一些步骤: 1. 首先需要在Oracle数据库中创建一个外部表(External Table),它可以让我们直接从FTP服务器上读取数据。 2. 在Oracle数据库中创建一个目录(Directory),它用来指向FTP服务器上的文件路径。 3. 创建一个授权用户(Grant User)并授予读取FTP服务器上文件的权限。 4. 在外部表中定义数据格式和文件路径。 5. 执行INSERT INTO SELECT语句,从外部表中读取数据插入到目标表中。 举个例子,假设我们要从FTP服务器上读取一个名为data.txt的文件,并将其插入到Oracle数据库的表中。以下是一些示例代码: 首先创建一个目录指向FTP服务器上文件路径: ``` CREATE DIRECTORY ftp_dir AS '/ftp/path/'; ``` 然后创建一个授权用户: ``` CREATE USER ftp_user IDENTIFIED BY password; GRANT READ ON DIRECTORY ftp_dir TO ftp_user; ``` 接着创建一个外部表: ``` CREATE TABLE ext_data ( col1 NUMBER, col2 VARCHAR2(50) ) ORGANIZATION EXTERNAL ( TYPE ORACLE_LOADER DEFAULT DIRECTORY ftp_dir ACCESS PARAMETERS ( RECORDS DELIMITED BY NEWLINE FIELDS TERMINATED BY ',' MISSING FIELD VALUES ARE NULL ) LOCATION ('data.txt') ) REJECT LIMIT UNLIMITED; ``` 最后执行INSERT INTO SELECT语句,将数据插入到目标表中: ``` INSERT INTO target_table (col1, col2) SELECT col1, col2 FROM ext_data; ``` 请注意,以上示例代码仅供参考,您需要根据自己的实际情况进行调整。如果您需要更多的帮助,可以参考Oracle官方文档或咨询专业的数据库开发人员。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值