数据分析 | 离散型数据的类别转换 | Python代码

最新推荐文章于 2024-10-08 17:53:59 发布

梨子串桃子

最新推荐文章于 2024-10-08 17:53:59 发布

阅读量398

点赞数 7

分类专栏：数据分析数学建模文章标签：数据分析 python 机器学习数据挖掘

本文链接：https://blog.csdn.net/L040514/article/details/134938044

版权

数学建模同时被 2 个专栏收录

16 篇文章 14 订阅

订阅专栏

数据分析

12 篇文章 3 订阅

订阅专栏

有一列类别数据，共有25433条样本，38个类别，其中有24个类别有对应的大类，现需要将38个类别全部转换成其对应的大类，没有对应的大类的类别转换成unknown。

数据集见GitHub连接：https://github.com/ChuanTaoLai/Corresponding_category_conversion

标签转换.xlsx : 整理后代码运行的文件

KDDTrain+.csv、KDDTest+.csv ：原始数据集

Attack Types.csv ：类别和大类对应的文件

converted_dataset_test.csv、converted_dataset_train.csv ：转后后输出的结果

import pandas as pd

# 读取 Excel 文件
data = pd.read_excel(r'D:\0文献整理\网络入侵检测\KDD99\标签转换.xlsx')
original_labels = data['label1']

# 转化字典
label_mapping = {
    'dos': ['back', 'land', 'neptune', 'pod', 'smurf', 'teardrop'],
    'u2r': ['buffer_overflow', 'loadmodule', 'perl', 'rootkit'],
    'r2l': ['ftp_write', 'guess_passwd', 'imap', 'multihop', 'phf', 'spy', 'warezclient', 'warezmaster'],
    'probe': ['ipsweep', 'nmap', 'portsweep', 'satan'],
    'normal': ['normal'],
}

# 转化函数
def convert_labels(original_labels, label_mapping):
    converted_labels = []

    for label in original_labels:
        for new_label, original_labels_list in label_mapping.items():
            if label in original_labels_list:
                converted_labels.append(new_label)
                break
        else:
            # 如果标签不在映射字典中，则转化为'unknown'
            converted_labels.append('unknown')

    return converted_labels

# 进行标签转化
converted_labels = convert_labels(original_labels, label_mapping)

# 创建DataFrame
df = pd.DataFrame({'Original_Label': original_labels, 'Converted_Label': converted_labels})

# 保存为CSV文件
df.to_csv('converted_dataset_train.csv', index=False)