java6 -- fastFdfs在java高并发下中的应用（图片上传），上线测试无误

Haoea！

已于 2022-02-28 15:16:37 修改

阅读量613

点赞数

分类专栏： java 文章标签： java 开发语言后端

于 2022-02-28 10:12:24 首次发布

本文链接：https://blog.csdn.net/snwown/article/details/122880030

版权

本文介绍了在Java高并发环境中使用FastDFS进行图片上传时遇到的问题及解决方案。业务需求要求按月存储图片，起初采用的FastDFS包在高并发下出现数据丢失。通过对源码的研究，实现了既能指定存储目录又能适应高并发的上传方法，通过调整配置和创建工具类以确保连接池数量合适，避免客户端连接异常。提供了相关配置和工具类的实现思路。

摘要由CSDN通过智能技术生成

前言

之所以整理一下fastFdfs在java中的应用，着实是因为它让我emo了很久，简直都自闭了。

业务要求：可以将图片按照分文件夹存储到fastFdfs服务器中。
本来以为这个很简单的，网上有很多的参考案例，拿过来之后，测试很容易就成功了。测试成功了之后便往线上环境上去布上。

哭唧唧~ 可是由于数据量太大了，没几个小时就开始报错了，当时以为是服务器配置的问题，就把fastFdfs中的tracker和storage中的连接数去更改到了最大4000，但是还是报错，需要调整连接数。

之前是导入的fastDFS的这个包

<dependency>
    <groupId>com.github.tobato</groupId>
    <artifactId>fastdfs-client</artifactId>
    <version>1.27.2</version>
</dependency>

这个包在线程上有线程池，针对于高并发的环境，更加友好。但是我们的目的是为了将图片按照每月的不同上传到不同的文件夹。
在这个的Git上也详细的表明了，链接地址

5.返回的文件名看起来乱糟糟的，能自定义文件名吗？能指定上传路径吗？
上传以后的文件名是FastDfs服务端根据一定规则生成的，不可以修改文件名，因此也不可以由客户端指定上传的路径。 客户端只能控制把文件上传到哪一个分组(Group).

一般处理方法是把服务端返回的文件路径记录到数据库里，自己按需要在数据库里再记录一个便于识别的文件名。

然而，fastDFS另外有一个包是这个

   <dependency>
            <groupId>net.oschina.zcx7878</groupId>
            <artifactId>fastdfs-client-java</artifactId>
            <version>1.27.0.0</version>
        </dependency>

这个包的优势，就是可以将上传的图片指定到所要上传的某一个文件夹中，符合业务要求，但事实，无法实现高并发下的场景，造成数据丢失。

之后去观摩了这两个代码的源码，实现了一种能够在高并发下实现fastDFS的存储，并且能指定文件夹。在线上测试成功，此种方式只做参考。

fastDFS按照指定文件再高并发下实现存储

首先，配置application.yml文件，具体配置参考GitHub上。
注意：配置的连接池的数目一定要比服务器上的少，不然容易报客户端连接服务器异常的错误

fdfs:
  so-timeout: 1501
  connect-timeout: 601
  thumb-image:             #缩略图生成参数，这个缩略图不需要，可以不添加。
    width: 150
    height: 150
  tracker-list:            #TrackerList参数,支持多个
    - 127.