Java-实现文本数据去重

最新推荐文章于 2024-08-14 23:41:11 发布

Jaylin_

最新推荐文章于 2024-08-14 23:41:11 发布

阅读量3.1k

点赞数

分类专栏： Java 文章标签： java Set 去重

本文链接：https://blog.csdn.net/qq_28637575/article/details/55533622

版权

本文介绍如何使用Java结合Apache Commons IO库实现文本数据的去重操作，通过示例代码详细阐述具体步骤。

摘要由CSDN通过智能技术生成

Java实现文本去重

直接看代码吧，具体写在注释里了

import org.apache.commons.io.FileUtils;

import java.io.File;
import java.io.IOException;
import java.util.HashSet;
import java.util.Set;

/**
 * Created by Jaylin on 2017/2/17.
 */
public class RepeatFilter {
   
    public static void main(String[] args) {
        File inFile = new File("C:\\Users\\Jaylin\\Desktop\\a.txt");