批量读取csv文件指定列

一、算法原理

在读取csv文件进行点云处理的时候,常常需要跳过表头,并且进行批量读取。本代码,将每行数据记录为一个数组,并将多个csv文件合并记录。
在使用中,需要自己修改想要提取的列数以及定义的参数。

二、代码实现

#include <iostream>
#include <fstream>
#include <sstream>
#include <string>
#include <vector>
#include <cmath>
#include <iomanip>
#include <Eigen/Dense>

using namespace Eigen;

// 结构体用于存储CSV中的一行数据
struct CSVRow {
    std::string col1;
    std::string col2;
    std::string col3;
    std::string col4;
    std::string col5;
    std::string col6;
    std::string col7;
    std::string col8; 
    std::string col9;
    std::string col10;
    std::string col11;
    std::string col12;
    std::string col13;
    std::string col14;
    std::string col15;
    std::string col16;
    std::string col17;
    std::string col18;
    std::string col19;
    std::string col20;
    std::string col21;
    std::string col22;
    std::string col23;
    std::string col24;
    std::string col25;
};

// 读取CSV文件的指定列
std::vector<CSVRow> readCSVColumn(const std::string& filename) {
    std::vector<CSVRow> data;
    std::ifstream infile(filename);

    if (!infile) {
        std::cerr << "无法打开文件: " << filename << std::endl;
        return data;
    }

    // 跳过第一行
    std::string skipLine;
    std::getline(infile, skipLine);

    std::string line;
    while (std::getline(infile, line)) {
        std::istringstream iss(line);
        std::string col1, col2, col3, col4, col5, col6, col7, col8; 
        if (std::getline(iss, col1, ',') && std::getline(iss, col2, ',') &&
            std::getline(iss, col3, ',') && std::getline(iss, col4, ',') && std::getline(iss, col5, ',') &&
            std::getline(iss, col6, ',') && std::getline(iss, col7, ',') && std::getline(iss, col8, ',')) {
            std::string col9, col10, col11, col12, col13, col14, col15, col16, col17, col18, col19, col20, col21, col22, col23, col24, col25;
            std::getline(iss, col9, ',');
            std::getline(iss, col10, ',');
            std::getline(iss, col11, ',');
            std::getline(iss, col12, ',');
            std::getline(iss, col13, ',');
            std::getline(iss, col14, ',');
            std::getline(iss, col15, ',');
            std::getline(iss, col16, ',');
            std::getline(iss, col17, ',');
            std::getline(iss, col18, ',');
            std::getline(iss, col19, ',');
            std::getline(iss, col20, ',');
            std::getline(iss, col21, ',');
            std::getline(iss, col22, ',');
            std::getline(iss, col23, ',');
            std::getline(iss, col24, ',');
            std::getline(iss, col25, ',');

            data.push_back({ col1, col2, col3, col4, col5, col6, col7, col8, col9, col10, col11, col12, col13, col14, col15, col16, col17, col18, col19, col20, col21, col22, col23, col24, col25 });
        }
    }

    infile.close();
    return data;
}

int main() {
    std::vector<std::string> filenames = {
        "C:\\Users\\dell\\Desktop\\440882004003000100533.csv",
        "C:\\Users\\dell\\Desktop\\440882004003000100534.csv",
        //在此处添加需要处理的文件
    };

    std::vector<CSVRow> combinedData;
    for (const auto& filename : filenames) {
        std::vector<CSVRow> csvData = readCSVColumn(filename);
        combinedData.insert(combinedData.end(), csvData.begin(), csvData.end());
    }
    return 0;
}

三、注意事项

此代码只适用于读取csv文件,不涉及如何输出文件。

批量删除CSV文件指定可以通过以下几个步骤实现: 1. 找到要处理的CSV文件,并打开它。 2. 读取CSV文件的内容,并确定要删除的号或名。 3. 创建一个空白的CSV文件,用于存储删除指定后的结果。 4. 遍历原始CSV文件的每一行,将不需要删除的内容写入到新的CSV文件中。 5. 关闭原始CSV文件和新的CSV文件。 具体代码实现如下: ```python import csv import os def remove_columns(csv_path, columns_to_delete): with open(csv_path, 'r') as file: csv_reader = csv.reader(file) header = next(csv_reader) # 获取CSV文件的头部 column_idxs = [] # 根据名找到对应的索引 if isinstance(columns_to_delete, list): for column_name in columns_to_delete: if column_name in header: column_idxs.append(header.index(column_name)) else: if columns_to_delete in header: column_idxs.append(header.index(columns_to_delete)) # 创建结果CSV文件 result_csv_path = os.path.splitext(csv_path)[0] + "_result.csv" with open(result_csv_path, 'w', newline='') as result_file: csv_writer = csv.writer(result_file) csv_writer.writerow([header[i] for i in range(len(header)) if i not in column_idxs]) # 将不需要删除的写入新文件 for row in csv_reader: csv_writer.writerow([row[i] for i in range(len(row)) if i not in column_idxs]) print("指定已从CSV文件成功删除,并保存为:" + result_csv_path) # 示例调用 csv_file_path = "path/to/your/csv/file.csv" columns_to_remove = ["名1", "名2"] remove_columns(csv_file_path, columns_to_remove) ``` 以上代码可以根据提供的表或名,删除CSV文件中的指定,并将结果保存为新的文件。要使用该代码,只需将`csv_file_path`变量更改为要处理的CSV文件的路径,并使用`columns_to_remove`变量设置要删除的的名称。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值