数据处理
xiaobai11as
我想知道答案,就必须一步步向前。
展开
-
图片3通道转化为1通道,然后转化成3通道
最近我用深度学习训练一些图片数据,为了排除图片颜色的影响,我需要把彩色图片转化为灰度图像。这个容易,直接转化就行,可是会出现新的问题,深度学习的框架的开始是输入3通道的,改框架的话,不能用预训练模型,怎么办??? 我就想到把1通道的灰色图像转化为3通道的灰色图像,这样问题就解决了,下面是参考代码:from PIL import Imageimport numpy as npi...原创 2020-03-23 14:43:43 · 6233 阅读 · 9 评论 -
pandas 查询某行记录 速度优化!(速度提升10倍以上)
最近,为了提高数据量为200多万数据的查询速度,可是费了老大功夫。下面是一些实验,最后有总结。前提说明: 你已经知道所找数据的 id(key),需要在dataframe中找到你需要的数据。实验一:pandas 的query方法 ,(fu_gongxu为一个 id数组,gongxu为dataframe。)mubiao = gongxu.query('key == {}'.form...原创 2019-04-26 14:09:48 · 6136 阅读 · 0 评论 -
pandas groupby 方法根据 多个列 合并
我的方法是增加 一个列首先:people['班组全称'] = people['厂区'] + ' ' + people['生产中心'] + ' ' + people['机列'] + ' ' + people['班组'].map(str).map(str) :可以把其他类型变成字符串类型然后:old_of_people = old_of_people.groupby('班组全称...原创 2019-04-24 15:24:48 · 6917 阅读 · 0 评论