SpringBoot 导出数据至CSV文件

1、大数据量情况下导出csv格式文件,一般使用多线程分批读取到内存中,这样可以避免OOM情况,同时也可以使用消息队列方式,这样也可以实现数据削峰读取,本文主要是记录核心的导出CSV功能,架构没有在此文中实现

2、csv导出核心代码

String tableName = o.toString();
String path = System.getProperty("user.dir") + "\\res\\";
int pageNum = 1;
int listSize = pageSize;
// 批量写入数据
List<String[]> rows = new ArrayList<>();
// 创建 CSV 文件写入器
CsvWriter writer = new CsvWriter(path + tableName + PublicVariables.CSV_FORMAT, CharsetUtil.CHARSET_UTF_8);
            try     {
                while (listSize >= pageSize) {
                    PageHelper.startPage(pageNum, pageSize);
                    List<LinkedHashMap<String, Object>> list = environmentApiMapper.selectTaskDataInfo(tableName, pageSize);
                    String[] columnNames;
                    if (pageNum == 1 && !CollectionUtils.isEmpty(list)) {
                        LinkedHashMap<String, Object> firstData = list.get(0);
                        columnNames = firstData.entrySet().stream()
                                .map(entry -> entry.getKey())
                                .toArray(String[]::new);
                        if (columnNames.length <= 0) {
                            return;
                        }
                        // 写入表头
                        writer.write(columnNames);
                    }
                    for (LinkedHashMap<String, Object> data : list) {
                        String[] row = data.entrySet().stream()
                                .map(entry -> "" + entry.getValue())
                                .toArray(String[]::new);
                        rows.add(row);
                    }
                    listSize = list.size();
                    pageNum++;
                }
                writer.write(rows);

            } finally {
                // 关闭文件写入器
                writer.close();
            }

  • 15
    点赞
  • 14
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要在Spring Boot应用程序中导出数据CSV文件,需要执行以下步骤: 1.添加CSV依赖项 在pom.xml文件中添加以下依赖项: ``` <dependency> <groupId>com.opencsv</groupId> <artifactId>opencsv</artifactId> <version>5.2</version> </dependency> ``` 2.创建CSVWriter 使用CSVWriter类将数据写入CSV文件。在Spring Boot应用程序中,可以使用以下代码创建一个CSVWriter: ``` CSVWriter writer = new CSVWriter(new FileWriter("data.csv")); ``` 3.将数据写入CSV文件 使用CSVWriter的writeNext方法将数据写入CSV文件。例如,以下代码将一行数据写入CSV文件: ``` String[] data = {"John", "Doe", "john.doe@example.com"}; writer.writeNext(data); ``` 4.关闭CSVWriter 最后,关闭CSVWriter以确保所有数据都已写入CSV文件: ``` writer.close(); ``` 完整示例: ``` @GetMapping("/export") public void exportToCSV(HttpServletResponse response) throws IOException { response.setContentType("text/csv"); response.setHeader(HttpHeaders.CONTENT_DISPOSITION, "attachment; filename=\"data.csv\""); CSVWriter writer = new CSVWriter(new FileWriter("data.csv")); String[] header = {"First Name", "Last Name", "Email"}; writer.writeNext(header); List<User> users = userService.getAllUsers(); for (User user : users) { String[] data = {user.getFirstName(), user.getLastName(), user.getEmail()}; writer.writeNext(data); } writer.close(); } ``` 此代码块将从UserService中获取所有用户,将其写入CSV文件并将其下载到用户的计算机上。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值