cic-2017数据预处理,记录一下科研进度。这里是原项目链接。
1.Obtaining Dataset(s)
这里是做数据处理前的准备工作,包括下载数据,配置路径和导入相关包。
这里给的数据集地址好像已经失效了,只能换源下载。
2.Cleaning the Data
这里做数据清洗,是数据处理中最关键的一个部分。
2.1. Grouping all seven files into one from the CIC-IDS 2017 dataset
这里做读取数据和数据的分组。
2.2 Reformatting column headers
这里把所有的列名去掉空格(中间的空格变为下划线)并且都变为小写。
2.3 Dropping unnecessary columns
去掉无用的列。
2.3.1 Dropping irrelevant features and columns with all 0s
去掉不相关的特征列和值都为0的列。
2.3.2 Dropping NaNs and INFs
去掉值为非数字或无穷的列。