数据预处理—数据基本状态查看

数据基本状态的查看

在进行机器学习算法之前的数据基本情况的查看，了解该数据的数据最后两行，数据类型，数据基本描述。
分别使用的函数为：df.tail(2)，df.dtypes，df.describe()

原数据下载：

gitgub数据地址

读入数据

# 定义特殊字段数据格式
dtypes = {'order_id': np.object,
          'pro_id': np.object,
          'use_id': np.object}
raw_data = pd.read_table('abnormal_orders.txt', delimiter=',', dtype=dtypes)  # 读取数据集

查看数据基本状态

def set_summary(df):
    '''
    查看数据集后2条数据、数据类型、描述性统计
    :param df: 数据框
    :return: 无
    '''
    print ('{:*^60}'.format('Data overview:'))
    print (df.tail(2))  # 打印原始数据后2条
    print ('{:*^60}'.format('Data dtypes:'))
    print (df.dtypes)  # 打印数据类型
    print ('{:*^60}'.format('Data DESC:'))
    print (df.describe().round(2).T)  # 打印原始数据基本描述

程序中format函数的使用参考链接

输出结果：

整个程序可以在这里看