数据处理
包含人工智能中各类数据预处理,为你的dirty work节约时间
优惠券已抵扣
余额抵扣
还需支付
¥9.90
¥99.00
购买须知?
本专栏为图文内容,最终完结不会低于15篇文章。
订阅专栏,享有专栏所有文章阅读权限。
本专栏为虚拟商品,基于网络商品和虚拟商品的性质和特征,专栏一经购买无正当理由不予退款,不支持升级,敬请谅解。
坠金
记性很差,写博客一是记录,二是交流分享,欢迎批评
展开
-
从一个简单的实际例子看并行处理
并行处理的定义介绍见另一篇博客(待更新)原创 2023-12-05 15:12:15 · 92 阅读 · 0 评论 -
voc获取文件夹下所有文件的文件名(去掉后缀)
【代码】voc获取文件夹下所有文件的文件名(去掉后缀)原创 2023-12-04 17:13:36 · 78 阅读 · 0 评论 -
labelme2voc 标签重叠/覆盖问题
使用labelme自带的 labelme2voc.py转换voc数据集时可能标签重叠。原创 2023-09-12 18:18:14 · 542 阅读 · 1 评论 -
coco数据集转yolo
yolov5自己有标注,下载之后可以看到,train的json文件,train,val的图片文件是缺少的,直接从yolov5里把缺少的拖过去就能用了。问题描述:yolo怎么跑coco数据集?bash get_coco.sh在window中不能使用怎么办?方法一:自己转换(不推荐)这个可能有自带数据集。原创 2023-04-26 15:04:21 · 426 阅读 · 0 评论 -
python限定位数的小数输出:round,%.2f , decimal
round,%.2f , decimal的区别,float和decimal的区别原创 2023-04-06 16:16:23 · 1091 阅读 · 0 评论 -
遥感数据集(目标检测/分割)汇总
关于建筑:不知道怎么下载:csv格式,包含建筑:原创 2022-12-10 17:09:31 · 370 阅读 · 0 评论 -
数据增强实现与分析
Tensorflow 目标检测中数据增强究竟起了什么作用?-开源基础软件社区-51CTO.COM这篇博客的思路很好,首先在原训练集上进行flip数据增强,发现测试集的结果没有变好,提出猜想:flip提升了模型识别翻转对象的能力,但是测试集中没有翻转对象,因此结果没有体现然后进行验证,验证方法是:将测试集也进行翻转,然后用训练过的模型识别,比对结果这里有一个小知识点,对于一些目标,某些垂直翻转情况对于原图像的影响不是很大(比如飞机、猫),因此是否使用flip,要根据识别的目标因地制宜原创 2022-12-08 11:14:58 · 281 阅读 · 0 评论 -
coco数据集标签可视化
下面的代码还没有写上类别,目前只能输出检测框,待更新。原创 2022-10-26 11:36:44 · 642 阅读 · 0 评论 -
yolov数据集txt标签可视化
【目标检测】小脚本:YOLO标签可视化_zstar-_的博客-CSDN博客原创 2022-10-18 20:14:29 · 1140 阅读 · 0 评论 -
python plt.pyplot显示中文
【代码】python plt.pyplot显示中文。原创 2022-10-07 15:45:36 · 785 阅读 · 0 评论 -
数据表格合并,清洗
合并两个表,若不指定on=***,则根据相同的列来合并。若指定,则按on里的内容合并。df=pd.merge(data1,data2,on=['年份'])左右拼接两个表,将data2作为新列并入data1的左侧。查看0值/占总数据的比例。原创 2022-10-06 19:35:13 · 138 阅读 · 0 评论 -
labelme生成的json数据集转换voc xml格式
voc2004的格式是jpg+png,2007之后的格式是jpg+xml格式。原创 2022-09-25 10:58:48 · 1786 阅读 · 0 评论 -
labelme生成的数据集转换yolov5格式
在保存图像的目录下,创建lanelme2yolo.py文件,将以下代码拷贝粘贴。│ └─ labels # 下面放训练集标签。├─ train # 下面放训练集标签。│ ├─ images # 下面放训练集图片。├─ test # 下面放测试集标签。│ ├─ train # 下面放训练集图片。└─ val # 下面放验证集标签。│ ├─ test # 下面放测试集图片。│ └─ val # 下面放验证集图片。我这里转载一下避免链接丢失。├─ test #测试集(可能没内容)原创 2022-09-12 09:22:18 · 829 阅读 · 0 评论 -
图像处理常用公开数据集
VOC:visual object classesPASCAL VOC 挑战赛是视觉对象的分类识别和检测的一个基准测试,提,挑战赛和其所使用的数据集已经成为了对象检测领域普遍接受的一种标准。该挑战的主要目的是识别真实场景中一些类别的物体。在该挑战中,这是一个监督学习的问题,训练集以带标签的图片的形式给出。这些物体包括20类:该挑战主要包括三类任务:分类(classification),检测(detection),和分割(segmentation)VOC2007:中包含9963张标注过的图片, .原创 2022-02-05 18:26:09 · 1029 阅读 · 0 评论 -
labelme生成的数据集转换coco格式
三个参数分别是:标注的原始文件夹,输出的文件夹,标签文件labels.txt。, 比如你标注的是roof,tree,car,tortoise。首先用labelme做好相应json数据,怎么催了再更。然后下载github上的labelme项目。那么labels.txt里写的就是这样。...原创 2022-08-25 14:36:41 · 497 阅读 · 0 评论 -
数据输出-图片注释、标注
在右上角标注哪条线是什么,叫做添加图例plt.legend()给图片一个名字plt.titlt('图片名字')更进一步,其他一些标注方法见下面的链接。原创 2022-07-27 10:15:43 · 523 阅读 · 0 评论 -
数据输出-绘制动图
代码】数据输出-绘制动图。原创 2022-07-27 10:09:57 · 95 阅读 · 0 评论 -
修改csv
我要修改的csv有两列数据。原创 2022-07-17 10:03:43 · 599 阅读 · 0 评论 -
修改txt内容
def updateFile(file,old_str,new_str): file_data = "" with open(file, "r") as f: for line in f: line = line.replace(old_str,new_str) file_data += line with open(file,"w") as f:原创 2022-07-07 11:32:44 · 439 阅读 · 0 评论 -
读取文件名写入csv
首先读取文件夹内的文件名到list中,然后转换成narray,写入dataframe(这里将png后缀的文件改写后缀和地址,是为了指向另一个文件夹内的,这是特殊的需要,如果不需要的话可以不写)然后将dataframe写入csv其中insert是增加列的方法.........原创 2022-06-17 17:20:44 · 452 阅读 · 0 评论 -
python数据读取
输入对txt文件: with open('C:\Users\mage\Desktop\test.txt’,'r') as f: txt=f.read() txt=txt.replace('\n','') #删除数据中的回车符号 data=[] for i in range (0,n): t=[] t.append(txt.split(',')[i])#读取数据 数据间分割符号是逗号划分数据集def sample原创 2022-05-11 19:36:52 · 586 阅读 · 0 评论 -
cifar10数据读取
from __future__ import print_functionfrom six.moves import cPickle as pickleimport numpy as npimport osimport platform# 读取文件def load_pickle(f): version = platform.python_version_tuple() # 取python版本号 if version[0] == '2': return pi.原创 2022-05-29 22:35:14 · 698 阅读 · 0 评论 -
文件重命名/改名
import osdef list_dictionary_codes(root_dir): paths_list = [] for parent, dirNames, fileNames in os.walk(root_dir): for name in fileNames: ext = ['.h', '.m', '.xib', '.json', '.c', '.cpp', '.mm', '.md'] if name.end.原创 2022-05-25 20:07:38 · 120 阅读 · 0 评论