- 博客(19)
- 收藏
- 关注
原创 【3】FSL MRI 脑部图像功能与使用
Li‘s 核磁共振影像数据处理-19-FSL界面可视化操作介绍_有Li的博客-CSDN博客_fsl界面FSL course introductory practical_哔哩哔哩_bilibili
2022-03-15 17:15:31
593
原创 先验信息于后验信息
从原因到结果的论证称为“先验的”,而从结果到原因的论证称为“后验的”。先验概率是指根据以往经验和分析得到的概率,如全概率公式 中的,它往往作为“由因求果”问题中的“因”出现。后验概率是指在得到“结果”的信息后重新修正的概率,是“执果寻因”问题中的“因” 。后验概率是基于新的信息,修正原来的先验概率后所获得的更接近实际情况的概率估计。先验概率和后验概率是相对的。如果以后还有新的信息引入,更新了现在所谓的后验概率,得到了新的概率值,那么这个新的概率值被称为后验概率。先验概率的分类:利用过去历史资料计
2022-03-10 17:04:37
334
原创 Representation Learning - 表征学习
机器学习算法的work与否不仅仅取决于算法的正确选用,也取决于数据的质量和有效的表示(representation)。针对不同类型的数据(text,image,video),不同的表示可能会导致有效信息的缺失或是暴露,这决定了算法能否有效地解决问题。表征学习的目的是对复杂的原始数据化繁为简,把原始数据的无效的或者冗余的信息提出,把有效信息进行提炼,形成特征(feature)。特征提取可以人为地手工处理,也可以借助特定地算法自动提取。如果数据量较小,我们可以根据自身地经验和先验知识,人为地设计出合适地特征
2022-02-25 10:40:59
2327
原创 VAE、GAN和流模型的区别和联系:对生成模型家族的分析
References:VAE、GAN和流模型的区别和联系:对生成模型家族的分析 - 知乎[1]VAE原始论文::https://arxiv.org/abs/1312.6114[2]GAN原始论文:https://papers.nips.cc/paper/5423-generative-adversarial-nets[3]流模型原始论文:https://arxiv.org/abs/1410.8516...
2022-02-24 15:19:59
2437
原创 变分自编码器 - Variational Autoencoders 【1】
隐变量 (latent variable) 是指不能直接observe的变量,比如economics里面的utility,要通过别的observed variables (price, feature, etc.) 来推算。隐变量主要是指 ”不能被直接观察到,但是对系统的状态和能观察到的输出存在影响的一种东西“,很多人在研究隐变量。以及设计出各种更优(比如可解释,可计算距离,可定义运算等性质)的隐变量的表示。
2022-02-23 19:19:09
1268
原创 计算机视觉CV中的Transformer
在计算机视觉领域,CNN自2012年以来已经成为视觉任务的主导模型。随着出现了越来越高效的结构,计算机视觉和自然语言处理越来越收敛到一起,使用Transformer来完成视觉任务成为了一个新的研究方向,以降低结构的复杂性,探索可扩展性和训练效率。视觉应用虽然Transformer结构在NLP领域得到了广泛的应用,但是在视觉领域的应用仍然有限。在视觉领域,attention或者是和CNN网络共同使用或者是代替CNN中特定的组件。想要将 Transformer应用到视觉任务中,我们首先需要构建一些类..
2022-02-22 17:51:58
1913
原创 【无标题】
一. 计算方法不同1. 前馈神经网络:一种最简单的神经网络,各神经元分层排列。每个神经元只与前一层的神经元相连。接收前一层的输出,并输出给下一层。各层间没有反馈。2. BP神经网络是一种按照误差逆向传播算法训练的多层前馈神经网络。3. 卷积神经网络包含卷积计算且具有深度结构的前馈神经网络二. 计算方法不同...
2022-02-21 18:53:42
276
原创 Normalizing Flows (NFs)- 理解
Normalizing Flows (NFs)是一个生成模型系列,具有可操作的分布,其采样和密度评估都是有效和精确的。被探索的大部分Flows是三角流triangular flows(coupling耦合或autoregressive自回归架构),Residual networks和Neural ODEs也正在积极研究和应用。NORMALIZING FLOWSCoupling and Autoregressive Layers Affine Coupling
2022-02-21 18:23:37
666
原创 归纳偏置 - Inductive Bias
解释1:让算法优先某种解决方案,这种偏好是独立于观测的数据的。常见的归纳偏置:- 贝叶斯算法中的先验分布- 使用某些正则项来惩罚模型- 设计某种特殊的网络结构等等好的归纳偏置,会提升算法搜索解的效率(同时不会怎么降低性能),而不好的归纳偏置则会让算法陷入次优解,因为它对算法带来了太强的限制。归纳偏置,一般是对样本的产生过程,或者最终解的空间的一种假设。例如我们设计某种模型结构/形式,就是对解的空间上的假设。解释2:归纳偏置在机器学习中是一种很微妙的概念:在机器学习中,
2022-02-21 13:50:20
326
原创 Normalizing Flows (NF) - 流模型 - 研究方向
Normalizing Flows: An Introduction and Review of Current Methods (2020 TPAMI)Open problems and possible research directions1. Inductive biases (归纳性偏差)1.1role of the base measure (基准测量的作用)一般来说,normalizing flow的基本度量被认为是一个简单的分布(例如,uniform或高斯)。然而,这并不需.
2022-02-21 13:43:37
2111
原创 互信息 - Mutual Information
表示两个变量X与Y是否有关系,以及关系的强弱。在概率论和信息论中,两个随机变量的互信息(Mutual Information,简称MI)或转移信息(transinformation)是变量间相互依赖性的量度。不同于相关系数,互信息并不局限于实值随机变量,它更加一般且决定着联合分布 p(X,Y) 和分解的边缘分布的乘积 p(X)p(Y) 的相似程度。互信息(Mutual Information)是度量两个事件集合之间的相关性(mutual dependence)。互信息是点间互信息(PMI)的期望值。
2022-02-21 13:06:43
226
原创 变分推断 - Variational Inference
通俗易懂版本解释首先,我们的原始目标是,需要根据已有数据推断需要的分布p;当p不容易表达,不能直接求解时,可以尝试用变分推断 Variational Inference 的方法,即,寻找容易表达和求解的分布q,当p和q的距离很小的时候,q就可以作为p的近似分布,称为输出结果了。在这个过程中,我们的关键点转变了,从 ”求分布“ 的推断问题,变成了 ”缩小距离“ 的优化问题。黄色的分布时我们的原始目标p,不好求。它看上去有点像高斯,那我们尝试从高斯分布中找一个红q和一个绿q,分布计算一下p和他们重叠
2022-02-19 17:45:27
391
原创 多视图学习 - Multi-view learning
多视图的含义里包含了多模态,多视图可以表示更广泛的实际问题reference:多视图学习(multiview learning) - 刘岩-- - 博客园
2022-02-19 16:33:33
514
原创 Information Bottleneck 信息瓶颈
信息瓶颈(Information Bottleneck,IB),是一个比较朴素的思想:当面对一个任务,应用试图用最少的信息来完成。这和 “最小熵系列”类似,因为信息对应着学习成本,我们用最少的信息来完成一个任务,就意味着用最低的成本来完成这个任务,这意味着得到泛化性能更好的模型。信息瓶颈的原理为什么更低的成本/更少的信息就能得到更好的泛化能力?比如在公司中,如果要为每个客户都制定一个解决方案,派专人去跟进,那么成本是很大的;如果能找到一套普适的方案来,以后只需要在这个方案基础上进行微调,那么成本
2022-02-19 16:23:57
6437
原创 【4】 脑部MRI图像肿瘤分类级别
高级别(间变性星形细胞瘤和多形性胶质母细胞瘤)胶质瘤 (HGG) 和 54 个低级别胶质瘤 (LGG) MRI(组织学诊断:星形细胞瘤或少突星形细胞瘤)组成 肿瘤组别 肿瘤类型 Ⅰ级 Ⅱ级 Ⅲ级 Ⅳ级 星形细胞肿瘤 室管膜下巨细胞型 √ 毛细胞型 ...
2022-01-18 12:10:32
2821
原创 医学图像配准基本概念及方法
1. 基本概念标准空间:大家公认的一个空间,比如你有很多脑图或者模板,都是基于某一种标准空间。结构空间:通常指个体结构空间,e.g. 有时候你会拿T2模态图像作为一个结构像,T2所在的空间,就是结构空间。功能空间:个体的某一个功能像它所在的空间。-----1.1 空间变换(SpatialTransformations)从一个空间到另一个空间类比:在中国,你叫李明(身份证上的名字),大家给你起了个可爱的昵称叫‘明明’在美国,大家叫你‘Ming' 或‘Li’ ,或者你有一个英文名
2022-01-17 17:57:09
4470
原创 【2】FSL MRI 脑部图像安装教程与流程
FLS 官网 FMRIB's Software LibraryFSL - FslWiki全名是:FMRIB'sSoftwareLibrary - FMRIB 是 英国牛津大学脑功能磁共振成像中心,FSL 则是他们开发的一个软件库。 - 由 Stephen Smith 教授开发,发布于 2000年 - 适用于所有操作系统 - 用于结构 MRI、功能 MRI(任务、静息)、扩散 MRI的分析 - MRI, CT数据的预处理和分析 - MRI, CT数据的查看FSL 的应用举例1. 分割之...
2021-12-30 10:40:39
2369
原创 线性回归相关总结
1. 基本思想: 用梯度下降法对最小二乘法形式的误差函数进行优化2. 五大假设:2.1 特征和标签呈线性关系2.2 误差之间相互独立2.3误差项的方差为常数2.4误差项的方差为常数2.5误差呈正态分布...
2021-12-29 10:37:53
323
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人