![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
技术分享
韩涛_gibbs
这个作者很懒,什么都没留下…
展开
-
数据分析的步骤-数据的清洗、特征选择
数据导入后对数据进行数据的分析和整理工作。好的数据清洗可以让未来的工作简单有效,对于未来的模型而言数据本身的质量决定了结果的上限,模型的选择和调优是不断趋近于这个上线的手段。对于数据清洗而言首先应该对数据进行了解,了解数据的来源,通过来源可以对数据进行清洗和整理工作,例如性别等字段可以将文字转化成向量等形式,同时可以对数据的空值等进行统计,根据数据的真实情况决定是否可以进行填补操作。 有的字段例如身高等字段需要通过分桶的技术将其进行类似降维处理。 时间字段根据...原创 2021-07-30 16:39:59 · 640 阅读 · 1 评论 -
数据分析的步骤-数据的读取
做了一个多月的业务,某天敲代码忽然发现很多之前熟练于心的东西忘了,十分恐怖,因此以此为契机梳理一下自己做数据分析时的步骤,为未来的自己提供一个可以快速查找的机会。获取当前文件夹下所有文件的名字# -*- coding: utf-8 -*-import osdef file_name(file_dir): L=[] for root, dirs, files in os.walk(file_dir): for file in files: ...原创 2021-07-30 10:29:37 · 299 阅读 · 0 评论