- 博客(7)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 （多模态）CoDi：Any-to-Any Generation via Composable Diffusion
我们提出了可组合扩散(CoDi)，这是一种新的生成模型，能够从任何输入模式组合生成任何输出模式组合，如语言、图像、视频或音频。与现有的生成式人工智能系统不同，CoDi可以并行生成多种模式，其输入不限于文本或图像等模式的子集。尽管缺乏许多模式组合的训练数据集，但我们建议在输入和输出空间中对齐模式。这使得CoDi可以自由地对任何输入组合进行条件处理，并生成任何一组模态，即使它们不存在于训练数据中。
2024-09-02 16:15:59
957
原创 （多模态）Versatile Diffusion: Text, Images and Variations All in One Diffusion Model
扩散模型的最新进展在许多生成任务中都取得了令人印象深刻的里程碑，而DALL-E2、Imagen和Stable diffusion等趋势作品引起了人们的极大兴趣。尽管形势变化很快，但最近的新方法关注的是扩展和性能，而不是容量，因此需要为单独的任务使用单独的模型。在这项工作中，我们将现有的单流扩散管道扩展为一个多任务多模态网络，称为通用扩散(VD)，该网络在一个统一的模型中处理文本到图像、图像到文本和变体的多个流。VD的pipeline设计实例化了一个。
2024-09-02 15:09:18
553
原创 （多模态）MedM2G: Unifying Medical Multi-Modal Generation via CrossGuided Diffusion with Visual Invariant
医学生成模型以其高质量的样本生成能力而闻名，加速了医学应用的快速增长。然而，目前的研究主要集中在针对不同医疗任务的单独医学生成模型上，受限于医学多模态知识的不足，制约了医学的综合诊断。在本文中，我们提出MedM2G，即医学多模态生成框架，其关键创新是在统一模型内对齐、提取和生成医学多模态。超越单一或两种医疗模式，我们通过统一空间中的中心对齐方法有效地对齐医疗多模式。值得注意的是，我们的框架通过保留每个成像模态的医学视觉不变性来提取有价值的临床知识，从而增强了多模态生成的特定医学信息。通过将。
2024-08-29 11:46:42
666
原创 CUDA编程（二）--基础关键字及函数说明
_host__定义了主机端的函数，在主机端调用，主机端执行的函数，也就是我们正常的c/c++的函数，如果不加任何的修饰符，默认就是__host__ 函数，这些函数只为主机端编译；__global__和 __host__不能同时使用；但是__device__和__host__可以同时使用，这个函数会同时为主机端和设备端编译。代码中可以用__CUDA_ARCH__这个宏来区分主机和设备端以及不同架构的代码。global（GPU，主机调用GPU执行）
2024-08-20 10:23:14
614
原创 CUDA 编程（一）--grid、block、thread
正常程序执行在host（CPU）端，当需要到device（GPU）执行时，启动kernel（核函数，一个kernel对应一个线程）调用GPU。（K-G-B-T）
2024-08-20 09:55:05
583
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人