- 博客(77)
- 收藏
- 关注
RSS订阅原创 【技术追踪】TeethDreamer：从 5 张口腔照片实现三维牙齿重建（MICCAI-2024）
TeethDreamer：一种3D牙齿重建新框架，旨在恢复上下牙齿的形状和位置，引入大型扩散模型的先验知识和3D感知特征注意力机制，重建性能表现SOTA！
2024-07-18 22:53:58
902
原创 【技术追踪】使用去噪扩散型进行 3D 血管图生成（MICCAI-2024）
本文提出了第一个去噪扩散模型在 3D 血管图生成中的工作，其是新颖的两阶段生成方法，依次对节点坐标和边进行去噪，在生成多样化、新颖且解剖学上合理的血管图方面性能表现出色。
2024-07-14 22:40:42
1073
原创 【技术追踪】HiDiff：医学图像分割的混合扩散框架（TMI-2024）
HiDiff：一种用于医学图像分割的新型混合扩散框架，它可以协同现有判别分割模型和新型生成扩散模型的优势，在腹部器官、脑肿瘤、息肉和视网膜血管分割数据集上性能表现 SOTA ！
2024-07-11 20:43:02
881
原创 【技术追踪】DiffuMatting：使用抠图级别注释合成任意对象（ECCV-2024）
获得高精度或抠图注释是非常困难和费力的，为了解决这一挑战，本文提出了 DiffuMatting，它继承了扩散强大的万物生成能力，并赋予了“matting anything”的能力。
2024-07-09 20:55:34
759
原创 【技术追踪】GeCA：高分辨率医学图像合成的神经元胞扩散（MICCAI-2024）
本文提出一种称为生成式元胞自动机 (Generative Cellular Automata，GeCA) 的新模型系列，其灵感来自于生物体从单细胞进化而来的过程，显著提高了11 种不同眼科疾病分类任务的表现。
2024-07-07 16:16:29
838
原创 【技术追踪】MedCLIP-SAM：桥接文本和图像实现通用医学图像分割（MICCAI-2024）
MedCLIP-SAM：一种通用医学图像分割新框架，将 CLIP 和 SAM 基础模型相结合，以获得基于文本提示的通用医学图像分割，并提出 DHN-NCE 新损失函数，性能表现出色~
2024-07-04 15:55:36
821
原创 【技术追踪】SegGuidedDiff：基于分割引导扩散模型实现解剖学可控的医学图像生成（MICCAI-2024）
扩散模型能够实现高质量的医学图像生成，但在生成的图像中实现解剖约束具有挑战性。为此，本文提出了一种基于扩散模型的方法，通过支持解剖可控的医学图像生成，在每个采样步骤中遵循多类解剖分割 mask。此外，还引入了一种随机 mask 消融训练算法，以实现对选定的解剖约束组合的调节，同时允许其他解剖区域的灵活性。本文将所提出的方法 SegGuidedDiff 与乳腺MRI和腹部/颈部到骨盆CT数据集的现有方法进行了比较，这些数据集具有广泛的解剖目标。
2024-07-01 21:20:23
949
原创 【技术追踪】UNest：一种用于非配对医学图像合成的新框架（MICCAI-2024）
非配对医学图像合成的目的是为准确的临床诊断提供补充信息，并解决获得对齐的多模态医学扫描的挑战。由于Transformer能够捕获长期依赖关系，他们在图像转换任务中表现非常出色，但只是在监督训练中有效，在非配对图像转换中性能下降，特别是在合成结构细节方面。本文的经验证明，在缺乏成对数据和强归纳偏差的情况下，Transformer会收敛到非最优解。
2024-06-29 10:05:31
785
原创 【技术追踪】SDSeg：医学图像的 Stable Diffusion 分割（MICCAI-2024）
扩散模型已经证明了它们在各种生成任务中的有效性。然而，当应用于医学图像分割时，这些模型遇到了一些挑战，包括大量的资源和时间需求。他们还需要一个多步骤的反向过程和多个样本来产生可靠的预测。为了解决这些挑战，本文引入了第一个 latent diffusion 分割模型 SDSeg，建立在 stable diffusion（SD）上。SDSeg 采用了一个简单的 latent 估计策略，以促进单步反向过程，并利用潜在融合连接来消除对多个样本的必要性。
2024-06-27 20:33:18
1550
原创 【Diffusion实战】基于Stable Diffusion实现文本到图像的生成（Pytorch代码详解）
来试试强大的Stable Diffusion吧，基于Stable Diffusion的pipeline，进一步了解Stable Diffusion的结构~
2024-05-16 19:42:26
1662
原创 【Diffusion实战】训练一个类别引导diffusion模型（Pytorch代码详解）
又学习了一种方法，类别引导diffusion模型，使用mnist数据集，记录一下它的用法吧。
2024-05-07 20:50:15
826
3
原创 【Diffusion实战】引导一个diffusion模型根据文字生成图像（Pytorch代码详解）
之前的Diffusion实战老老实实按照最基本的diffusion过程完成的，最近学习了一种新的方法，利用文字提示，来引导Diffusion模型生成想要的图像。
2024-05-01 21:31:36
1023
原创 【数据处理】使用pymic库裁剪nii.gz文件
我有一个图像文件为nii.gz格式，做了一个分割，得到了一个mask，格式也为nii.gz，我需要根据mask，设定一个box框，裁剪对应的图像文件。对应到一个临床问题上就是，心脏核磁数据，我需要裁剪关于心脏的感兴趣区域，其他部分舍弃掉。
2024-04-29 16:19:27
541
原创 【SAM导出】使用torch.onnx.export将pth格式导出为onnx格式（Pytorch代码详解）
一般情况下，我们保存模型的格式都是pth的，最近根据一个项目需求，需要把pth格式转换为onnx格式，方便后面的调取，故此学习理解了一下，记录将SAM模型导出为onnx的过程。
2024-04-29 16:18:02
1008
原创 【报错解决】ImportError: DLL load failed while importing MPI: 找不到指定的模块
本机电脑未安装msmpisetup.exe
2024-04-23 15:00:48
300
原创 【Diffusion实战】训练一个diffusion模型生成蝴蝶图像（Pytorch代码详解）
上一篇Diffusion实战是确确实实一步一步走的公式，这回采用一个更方便的库：diffusers，来实现Diffusion模型训练。
2024-04-23 14:50:17
1942
1
原创 【Diffusion实战】训练一个diffusion模型生成S曲线（Pytorch代码详解）
看了不少资料，终于大概理解diffusion每一步的流程与推导了，搞一个案例实践一下，把代码跟公式对一对加深理解。
2024-04-15 11:28:19
1324
1
原创 【报错解决】RuntimeError: Distributed package doesn‘t have NCCL built in
windows系统不支持nccl，采用gloo；
2024-04-15 11:27:16
987
原创 【报错解决】AttributeError: module ‘radiomics‘ has no attribute ‘featureextractor‘
提取放射组学特征时，使用radiomics库报错
2024-04-08 20:59:12
292
原创 【Diffusion综述】医学图像分析中的扩散模型（二）
表1将综述的扩散模型论文根据其直接使用或受启发于 (1) DDPMs，(2)NCSNs，(3) SDEs的算法进行了分类。此外，表1突出了每个算法的关键概念和目标，并代表了在未来基于回顾论文的研究中可以调查和使用的实际用例。显然，调节反向扩散过程以获得期望输出是研究最多的方法之一。这个引导过程可以使用不同的约束类型来完成。
2024-04-02 10:11:15
1934
原创 【图像分割】nnUnetV1与V2的Linux部署与应用命令
以前觉得麻烦，一直没用过nnunet，虽然知道它很火，最近一个契机，部署使用了一下nnunet，记录一下其V1和V2版本的部署和使用的方法与命令。
2024-04-02 10:06:33
1238
原创 【Diffusion综述】医学图像分析中的扩散模型（一）
去噪扩散模型（Denoising diffusion models）是一类生成模型，最近在各种深度学习问题中引起了极大的兴趣。扩散概率模型定义了一个正向扩散阶段，在这个阶段中，输入数据通过加入高斯噪声在几个步骤中逐渐受到扰动，然后学习反向扩散过程以从有噪声的数据样本中恢复所需的无噪声数据。扩散模型因其强大的模式覆盖和生成样本的质量而被广泛赞赏，尽管其已知的计算负担。
2024-03-31 16:56:25
2326
原创 【创作纪念日】1024回忆录
不知不觉中，从创作第一篇文章到现在，已经1024天了，两年多的时间里，已经从硕士到博士了，1024，对于程序员来说，是个特别的数字吧，在此回忆与记录一下这些美好的经历吧。
2024-03-24 00:21:18
875
1
原创 【PyCaret】使用PyCaret创建机器学习Pipeline进行多分类任务
PyCaret是一个开源的、不用写很多代码的Python机器学习库，可以自动化机器学习工作流程，是一个端到端的机器学习和模型管理工具，可以成倍地加快实验周期，提高工作效率。PyCaret本质上是几个机器学习库和框架的封装，比如scikit-learn、XGBoost、LightGBM、CatBoost、spaCy、Optuna、Hyperopt、Ray等等。
2024-03-21 16:42:59
1065
原创 【CLIP综述】CLIP在医学影像中的应用（二）
本节中，展示了一些典型的 CLIP 驱动的应用，以展示在CLIP帮助下的性能改进。虽然这些研究侧重于各种任务，但它们通常表明，预训练的 CLIP 的优势在于其解释和传达人类知识的能力。在一些研究中，将描述性文本 prompts 输入到 CLIP 中，实验结果表明 CLIP 能够熟练地理解嵌入在 prompts 中的语义，并有效地将语义传递给框架内的其他模块。
2024-03-11 14:15:42
1941
原创 【CLIP综述】CLIP在医学影像中的应用（一）
CLIP（Contrastive Language-Image Pre-training）是一种简单而有效的预训练范式，它成功地将富含语义的文本监督引入视觉模型，并因其通用性和可解释性在各种任务中显示出良好的效果（连接文本与图像其在医学图像领域大放光彩，不仅可作为医学图像和文本对齐的预训练范式，还可作为各种临床任务的预训练关键部分（鼓掌本文对医学成像领域内的CLIP范式进行深入探索，包括改进的CLIP预训练和基于CLIP的应用。
2024-03-11 14:13:04
2409
2
原创 【SAM综述】医学图像分割的分割一切模型：当前应用和未来方向
鉴于prompt的灵活性，foundation models已成为自然语言处理和计算机视觉领域中的主导力量。最近SAM的兴起，使得prompt-driven范式在图像分割领域显著发展，进而引入了大量以前未开发的功能。但医学图像与自然图像还是存在较大差异，SAM应用于医学图像的可行性尚未可知。在本文中，作者进行了全面综述，介绍医学图像分割任务中SAM的有效性，包括基线测试和方法调整，还探索了SAM在医学图像分割中的潜在研究方向。
2024-02-27 15:14:17
5987
原创 【文本分类】利用bert-base-chinese训练自己的模型完成中文文本分类任务（pytorch实现）
【文本分类】利用bert-base-chinese训练自己的模型完成中文文本分类任务（pytorch实现）
2024-02-18 11:44:43
5912
86
原创 【KL散度】stats.entropy、special.rel_entr、special.kl_div、F.kl_div与nn.KLDivLoss用法解析
偶然学习KL散度，突然发现python里面KL散度的实现有很多种耶，一时就地懵圈，各处查阅资料，终于理解了，主要从代码实现和公式的角度，整理记录一下神奇的stats.entropy、special.rel_entr、special.kl_div、F.kl_div与nn.KLDivLoss吧。
2024-01-03 15:51:47
1384
原创 【数据处理】Python解析多类别分割标签的json文件
之前数据处理也解析过json文件，不过那会是一张图只有一个mask，一个标签，近期接触多类别分割标签的json文件，进一步理解了以前写的解析代码，考虑了多类别标签的各种情况，特此记录。
2024-01-03 15:48:22
734
原创 【神行百里】python开启多线程（threading）与多进程（multiprocessing）运行
由于处理数据过多，程序运行很慢，就学习了一下python开启多线程与多进程的方法，虽然最后也没用上，但还是记录总结一下，以备不时之需。简言之，进程为资源分配的最小单元，线程为程序执行的最小单元。
2023-12-11 19:58:37
2444
原创 【神行百里】pandas查询加速之行索引篇
最近进行大数据处理的时候，发现我以前常用的pandas查询方法太慢了，太慢了，真是太慢了，查阅资料，遂发现了一种新的加速方法，能助力我飞上天，和太阳肩并肩，所以记录下来。
2023-12-11 19:53:29
2153
原创 【可视化】图像分割中标签label与预测mask的两种可视化方法
前两天进行一个分割项目，模型训练完成后需要对分割效果可视化，特此记录两种方法。
2023-12-02 15:31:25
1181
原创 【中文编码】利用bert-base-chinese中的Tokenizer实现中文编码嵌入
按我通俗的理解，就是文本要进入模型，得编码成数字的形式，那么，怎么给定数字的形式呢，不能随便给一个数字吧，此时就需要一个词表，该表中有很多很多的字，每个字都有在该表中唯一的位置，每个字编码时，采用其在词表中的位置。
2023-12-02 15:28:13
6059
2
原创 【技术追踪】SAM（Segment Anything Model）代码解析与结构绘制之Mask Decoder
在【segment_anything/predictor.py --> SamPredictor类 -->predict_torch函数】中调用了mask_decoder实现mask预测，如下所示
2023-11-18 19:08:26
1797
2
原创 【python函数】内置函数slice()用法解析
slice函数，功能如其名字，切片用的。参数有仨，slice(start, stop, step)，分别为起始点 start ，终止点 stop 和步长 step ，默认情况下，start 和 step 为None，意味着从0索引开始取，步长为1。
2023-10-17 23:36:37
726
原创 【技术追踪】SAM（Segment Anything Model）代码解析与结构绘制之Prompt Encoder
SAM中Prompt Encoder的代码详细解析与结构绘制~
2023-10-11 19:29:09
2176
5
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人