- 博客(9)
- 收藏
- 关注
RSS订阅原创 FastAI实战练手-华录杯医学影像赛道初赛心得体会
数据处理首先到手的数据是这个样子的：从图片就可以看出来，大的大小的小，明显是不符合直接训练的要求的。多次实验之后目前的数据处理思路：获取最大的长宽，这个用numpy很好做到 padding到大于且接近最大尺寸且为2倍数的尺寸，windows自带的有程序猿计算器可以很方便的用2进制数找到一个十进制数 选择一个合适的尺寸失败尺寸192*144，用滑动窗口算法切割若干小图片，呼应2中的倍数要求 切割之后的数据作为原始数据训练算法算法这一块就只是默认的套壳unet，内部为Resn..
2021-08-11 12:07:06
297
原创 丐中丐双卡个人微型工作站，二手Tesla M40 12G水冷显卡改造上机心得
整机配置设备型号 情况介绍 价格 AMDRyzen7 5800X（散） 某宝1700置换 1600 酷冷堡垒240Ex水冷 某东购入 420 海盗船复仇者3200mhz 8*2套条某东购入 500 RTX 1660super 6G 去年某东购入 1550 Tesla M40 12G 海鲜市场购入 被动散热 1350 散热改装组件 某宝购入 150 爱国者冰塔120极光 水冷 某宝...
2021-08-05 16:32:20
8187
7
原创 Kaggle X FastAi 手写字识别
原始数据数据这方面，Kaggle给出的是csv文件,0列表示的是标签，其他28*28列是每个像素的值，而FastAi在设计的时候是没有考虑这种数据的，所以DataLoaders和learner都是不支持该类型的数据的。某些文章的做法是重写DataLoaders和learner的Model，但是个人观点，这样的话直接用Torch不是更好的选择么。FasterAi的API那么用是一定要用的，而数据都是像素值也不必要特殊的预处理，所以生成数据就完事了。数据生成采用了PIL.Image中的方法，配合os
2021-07-19 11:34:51
213
原创 FastAi-CSV图像批量分类预测完美解决方案&ImageDataLoders源码解读&踩坑轨迹
图像训练数据集就是最基础的70000张minist数据集无图只有CSV，图片靠CSV生成或者直接使用像素数据。我们常规的操作是这样的：读取数据dls = ImageDataLoaders.from_folder(train_image_folder,valid_pct=0.2,seed=1024)迁移学习训练learn = cnn_learner(dls,models.resnet34)learn.lr_find()learn.fine_tune(1)图像预测-基于f.
2021-07-18 23:44:29
780
4
原创 Titanic - （XGBoost，RF随机森林，Fastai-tabular_learner）总结
数据处理从高分code学到很多表格数据处理的方法，主要是以下几种：fillnaNan值得填充确实会对准确率有小幅度的提升 数据增强使用原始数据为基础生成额外的维度 连续数据转换将连续数据分段转换成分类数据 one-hot独热编码通过pandas.get_dummies()可以轻松实现分类数据的独热编码算法表格数据集在小数据量的情况下，决策树家族更有竞争力。采取了一些算法的对比使用，放在Titanic-M.ipynb中，代码地址https://github.com/AshenWit...
2021-07-17 13:42:15
330
原创 Kaggle X FastAI系列 1 --titanic(改)
前情概要之前的第一版直接使用fastai提供的方法，过拟合问题比较严重，所以寻求了一下改进方法。CostFunction经过几次测试，将CostFunction改为了loss_func=FocalLossFlat(gamma=5)从fastai官方文档中的CostFunction中看到了它，论文没有看，体感这个gamma应该是个超参数。经过测试gamma的值越大对w和b的惩罚越大，当gamma的值取10左右时产生梯度消失。gamma的默认值为1，针对这个数据集gamma取2-6的效果比
2021-07-15 18:03:10
117
原创 Kaggle X FastAI系列 1 --titanic
数据准备直接在Anaconda命令行里用kaggle提供的命令下载，参考fastbook中09_tabula的API方法没有成功。 用pandas读取一下数据。path = URLs.path('titanic')train_path = path/'train.csv'test_path = path/'test.csv'df = pd.read_csv(train_path, low_memory=False,skipinitialspace=True)...
2021-07-15 10:51:53
74
原创 FastAI Course2020学习总结（Windows环境）
代码环境机器配置 ryzen1700 8C16T @3.7Mhz 解压加载数据集模型速度偏慢，5800X已经在路上了准备换掉，顺便安排水冷 海盗船马甲条 3200Mhz 8GX2 勉强够用，占用在 10G上下 RTX 1660super 6GRam 7.5算力 经常性OOM，可能不是太够用 毕竟fastai提出的是no nee...
2021-07-13 21:46:48
107
1
原创 Windows环境下Fast.ai安装过程
初始环境使用一个安装好cuda，cudnn，pytorch，tensorflow的conda环境，这个环境有一段时间了，版本可能有点老了，但是牵一发而动全身不想重新搭建了。fast.ai安装根据官网提示，需要先安装torch，因为环境已经是安装好的了就不再重新安装了。 To install with pip, use:pip install fastai运行完成后如图：看起来应该是成功了 。 ...
2021-06-23 13:26:48
984
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人