2023.11.6-2023.11.12 MRI论文笔记 Fourth Title: End-to-End Variational Networks

论文

论文题目：End-to-End Variational Networks for Accelerated MRI Reconstruction
论文作者：Sriram Anuroop, Zbontar Jure, Murrell Tullie, Defazio Aaron, Zitnick C. Lawrence, Yakubova Nafissa, Knoll Florian, Johnson Patricia
论文期刊：Medical Image Computing and Computer Assisted Intervention--MICCAI 2020: 23rd International Conference
年份：2020

论文贡献

1. 作者想解决SENSE模型加正则化函数这种优化模型，其将优化模型对应的梯度下降迭代求解公式放在神经网络中求解。
2. 作者整个网络处理的数据是K空间数据，其目标迭代公式如下所示：$${\mathbf{k}}^{t+1}={\mathbf{k}}^t-{\eta }^{t}M({\mathbf{k}}^t-\tilde{\mathbf{k}})+G({\mathbf{k}}^t)，\text{\hspace{1em}(1)}$$
   其中$$G({\mathbf{k}}^t)=\mathcal{F}\circ \mathcal{E}\circ \mathrm{CNN}(\mathcal{R}\circ {\mathcal{F}}^{-1}({\mathbf{k}}^t)).\text{\hspace{1em}(2)}$$
   公式(1)中${\mathbf{k}}^t$代表第$t$轮的K空间数据，$\tilde{\mathbf{k}}$代表初始下采样得到的K空间数据，$M$代表采样模式，${\eta }^t$代表第$t$轮的参数（由数据自动学习得到），$\mathcal{F}$代表傅里叶变换（${\mathcal{F}}^{-1}$代表逆傅里叶变换），$\mathcal{E}$代表将图像变成多线圈图像操作，$\mathcal{R}$代表将多线圈图像左乘灵敏度矩阵的共轭转置矩阵后再求和得到单张图像的操作，$\mathrm{CNN}$作者论文中使用的是U-Net模型。作者将整个模型称为端到端变分网络（End-to-End Variational Network or E2E-VarNet）。
3. 公式(1)中的${\eta }^{t}M({\mathbf{k}}^t-\tilde{\mathbf{k}})$这一项作者用一个叫数据一致性(Data Consistency)模块实现，$G({\mathbf{k}}^t)$这一项是用一个叫改进(Refinement)模块实现。由于$G({\mathbf{k}}^t)$中包含灵敏度矩阵，常规的灵敏度矩阵直接用ACS数据直接估计，这通常不准，所以论文中作者提出灵敏度矩阵可以用一个叫灵敏度估计(Sensitivity Map Estimation)模块得到。灵敏度估计模块原理是取出ACS数据，放入一个U-Net模型，再归一化。
4. 模型的惩罚函数是最小化结果相似性损失（structural similarity loss，即SSIM）的相反数。

个人疑惑

1. 本篇阅读笔记的公式(1)，即对应论文公式(10)，其由论文中的公式(7)左右两边进行$\mathcal{F}\circ \mathcal{E}$操作得到。注意，论文中公式(7)其中出现$A^{\ast }A{\mathbf{x}}^t$（其中$A=M\circ \mathcal{F}\circ \mathcal{E}$， $A^{\ast }=\mathcal{R}\circ {\mathcal{F}}^{-1}\circ M$），那这一项左边进行$\mathcal{F}\circ \mathcal{E}$操作，应该得到$\mathcal{F}\circ \mathcal{E}\circ \mathcal{R}\circ {\mathcal{F}}^{-1}\circ M\circ M\circ \mathcal{F}\circ \mathcal{E}({\mathbf{x}}^t)$，这一项会等于论文公式(10)中的$M{\mathbf{k}}^t$吗（其中${\mathbf{x}}^t=\mathcal{R}\circ {\mathcal{F}}^{-1}\left({\mathbf{k}}^t\right)$）？
   问题归根结底在于，若$\mathcal{R}$作用在不是线圈图像上，即下采样之后逆傅里叶变换得到的图像，仍然有$\mathcal{E}\circ \mathcal{R}$等于单位阵这样的性质？
2. 论文公式(3)右侧应该写成单位阵，而不是数字1。