- 博客(19)
- 收藏
- 关注
RSS订阅原创 【3】FSL MRI 脑部图像功能与使用
Li‘s 核磁共振影像数据处理-19-FSL界面可视化操作介绍_有Li的博客-CSDN博客_fsl界面FSL course introductory practical_哔哩哔哩_bilibili
2022-03-15 17:15:31
593
原创 先验信息于后验信息
从原因到结果的论证称为“先验的”，而从结果到原因的论证称为“后验的”。先验概率是指根据以往经验和分析得到的概率，如全概率公式 中的，它往往作为“由因求果”问题中的“因”出现。后验概率是指在得到“结果”的信息后重新修正的概率，是“执果寻因”问题中的“因” 。后验概率是基于新的信息，修正原来的先验概率后所获得的更接近实际情况的概率估计。先验概率和后验概率是相对的。如果以后还有新的信息引入，更新了现在所谓的后验概率，得到了新的概率值，那么这个新的概率值被称为后验概率。先验概率的分类：利用过去历史资料计
2022-03-10 17:04:37
334
原创 Representation Learning - 表征学习
机器学习算法的work与否不仅仅取决于算法的正确选用，也取决于数据的质量和有效的表示（representation）。针对不同类型的数据（text，image，video），不同的表示可能会导致有效信息的缺失或是暴露，这决定了算法能否有效地解决问题。表征学习的目的是对复杂的原始数据化繁为简，把原始数据的无效的或者冗余的信息提出，把有效信息进行提炼，形成特征（feature）。特征提取可以人为地手工处理，也可以借助特定地算法自动提取。如果数据量较小，我们可以根据自身地经验和先验知识，人为地设计出合适地特征
2022-02-25 10:40:59
2327
原创 VAE、GAN和流模型的区别和联系：对生成模型家族的分析
References：VAE、GAN和流模型的区别和联系：对生成模型家族的分析 - 知乎[1]VAE原始论文：:https://arxiv.org/abs/1312.6114[2]GAN原始论文:https://papers.nips.cc/paper/5423-generative-adversarial-nets[3]流模型原始论文:https://arxiv.org/abs/1410.8516...
2022-02-24 15:19:59
2437
原创 变分自编码器 - Variational Autoencoders 【1】
隐变量 (latent variable) 是指不能直接observe的变量，比如economics里面的utility，要通过别的observed variables (price, feature, etc.) 来推算。隐变量主要是指 ”不能被直接观察到，但是对系统的状态和能观察到的输出存在影响的一种东西“，很多人在研究隐变量。以及设计出各种更优（比如可解释，可计算距离，可定义运算等性质）的隐变量的表示。
2022-02-23 19:19:09
1268
原创 计算机视觉CV中的Transformer
在计算机视觉领域，CNN自2012年以来已经成为视觉任务的主导模型。随着出现了越来越高效的结构，计算机视觉和自然语言处理越来越收敛到一起，使用Transformer来完成视觉任务成为了一个新的研究方向，以降低结构的复杂性，探索可扩展性和训练效率。视觉应用虽然Transformer结构在NLP领域得到了广泛的应用，但是在视觉领域的应用仍然有限。在视觉领域，attention或者是和CNN网络共同使用或者是代替CNN中特定的组件。想要将 Transformer应用到视觉任务中，我们首先需要构建一些类..
2022-02-22 17:51:58
1913
原创 【无标题】
一. 计算方法不同1. 前馈神经网络：一种最简单的神经网络，各神经元分层排列。每个神经元只与前一层的神经元相连。接收前一层的输出，并输出给下一层。各层间没有反馈。2. BP神经网络是一种按照误差逆向传播算法训练的多层前馈神经网络。3. 卷积神经网络包含卷积计算且具有深度结构的前馈神经网络二. 计算方法不同...
2022-02-21 18:53:42
276
原创 Normalizing Flows （NFs）- 理解
Normalizing Flows （NFs）是一个生成模型系列，具有可操作的分布，其采样和密度评估都是有效和精确的。被探索的大部分Flows是三角流triangular flows（coupling耦合或autoregressive自回归架构），Residual networks和Neural ODEs也正在积极研究和应用。NORMALIZING FLOWSCoupling and Autoregressive Layers Affine Coupling
2022-02-21 18:23:37
666
原创 归纳偏置 - Inductive Bias
解释1：让算法优先某种解决方案，这种偏好是独立于观测的数据的。常见的归纳偏置：- 贝叶斯算法中的先验分布- 使用某些正则项来惩罚模型- 设计某种特殊的网络结构等等好的归纳偏置，会提升算法搜索解的效率（同时不会怎么降低性能），而不好的归纳偏置则会让算法陷入次优解，因为它对算法带来了太强的限制。归纳偏置，一般是对样本的产生过程，或者最终解的空间的一种假设。例如我们设计某种模型结构/形式，就是对解的空间上的假设。解释2：归纳偏置在机器学习中是一种很微妙的概念：在机器学习中，
2022-02-21 13:50:20
326
原创 Normalizing Flows （NF) - 流模型 - 研究方向
Normalizing Flows: An Introduction and Review of Current Methods (2020 TPAMI)Open problems and possible research directions1. Inductive biases (归纳性偏差)1.1role of the base measure （基准测量的作用）一般来说，normalizing flow的基本度量被认为是一个简单的分布（例如，uniform或高斯）。然而，这并不需.
2022-02-21 13:43:37
2111
原创 互信息 - Mutual Information
表示两个变量X与Y是否有关系，以及关系的强弱。在概率论和信息论中，两个随机变量的互信息（Mutual Information，简称MI）或转移信息（transinformation）是变量间相互依赖性的量度。不同于相关系数，互信息并不局限于实值随机变量，它更加一般且决定着联合分布 p(X,Y) 和分解的边缘分布的乘积 p(X)p(Y) 的相似程度。互信息(Mutual Information)是度量两个事件集合之间的相关性(mutual dependence)。互信息是点间互信息（PMI）的期望值。
2022-02-21 13:06:43
226
原创 变分推断 - Variational Inference
通俗易懂版本解释首先，我们的原始目标是，需要根据已有数据推断需要的分布p；当p不容易表达，不能直接求解时，可以尝试用变分推断 Variational Inference 的方法，即，寻找容易表达和求解的分布q，当p和q的距离很小的时候，q就可以作为p的近似分布，称为输出结果了。在这个过程中，我们的关键点转变了，从 ”求分布“ 的推断问题，变成了 ”缩小距离“ 的优化问题。黄色的分布时我们的原始目标p，不好求。它看上去有点像高斯，那我们尝试从高斯分布中找一个红q和一个绿q，分布计算一下p和他们重叠
2022-02-19 17:45:27
391
原创 多视图学习 - Multi-view learning
多视图的含义里包含了多模态,多视图可以表示更广泛的实际问题reference：多视图学习（multiview learning） - 刘岩-- - 博客园
2022-02-19 16:33:33
514
原创 Information Bottleneck 信息瓶颈
信息瓶颈（Information Bottleneck，IB），是一个比较朴素的思想：当面对一个任务，应用试图用最少的信息来完成。这和 “最小熵系列”类似，因为信息对应着学习成本，我们用最少的信息来完成一个任务，就意味着用最低的成本来完成这个任务，这意味着得到泛化性能更好的模型。信息瓶颈的原理为什么更低的成本/更少的信息就能得到更好的泛化能力？比如在公司中，如果要为每个客户都制定一个解决方案，派专人去跟进，那么成本是很大的；如果能找到一套普适的方案来，以后只需要在这个方案基础上进行微调，那么成本
2022-02-19 16:23:57
6437
原创 【4】 脑部MRI图像肿瘤分类级别
高级别（间变性星形细胞瘤和多形性胶质母细胞瘤）胶质瘤 (HGG) 和 54 个低级别胶质瘤 (LGG) MRI（组织学诊断：星形细胞瘤或少突星形细胞瘤）组成 肿瘤组别 肿瘤类型 Ⅰ级 Ⅱ级 Ⅲ级 Ⅳ级 星形细胞肿瘤 室管膜下巨细胞型 √ 毛细胞型 ...
2022-01-18 12:10:32
2821
原创 医学图像配准基本概念及方法
1. 基本概念标准空间：大家公认的一个空间，比如你有很多脑图或者模板，都是基于某一种标准空间。结构空间：通常指个体结构空间，e.g. 有时候你会拿T2模态图像作为一个结构像，T2所在的空间，就是结构空间。功能空间：个体的某一个功能像它所在的空间。-----1.1 空间变换（SpatialTransformations）从一个空间到另一个空间类比：在中国，你叫李明（身份证上的名字），大家给你起了个可爱的昵称叫‘明明’在美国，大家叫你‘Ming' 或‘Li’ ，或者你有一个英文名
2022-01-17 17:57:09
4470
原创 【2】FSL MRI 脑部图像安装教程与流程
FLS 官网 FMRIB's Software LibraryFSL - FslWiki全名是：FMRIB'sSoftwareLibrary - FMRIB 是 英国牛津大学脑功能磁共振成像中心，FSL 则是他们开发的一个软件库。 - 由 Stephen Smith 教授开发，发布于 2000年 - 适用于所有操作系统 - 用于结构 MRI、功能 MRI（任务、静息）、扩散 MRI的分析 - MRI, CT数据的预处理和分析 - MRI, CT数据的查看FSL 的应用举例1. 分割之...
2021-12-30 10:40:39
2369
原创 线性回归相关总结
1. 基本思想： 用梯度下降法对最小二乘法形式的误差函数进行优化2. 五大假设：2.1 特征和标签呈线性关系2.2 误差之间相互独立2.3误差项的方差为常数2.4误差项的方差为常数2.5误差呈正态分布...
2021-12-29 10:37:53
323
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人