回答关于“全部微调SAM收益不大”的问题

问题描述

原问题：专栏【Segment Anything Model】三，有提及“全部微调收益不大”，请问有没有参考文献。

原问题链接 问题

答

首先这是个好问题，感谢提问。我谨慎思考之后，决定后续的文章字字句句都严格考察能给到出处的都附上链接。
其次，“收益”是个实验科学，和数据集有很大关系。我们如下列举收益不大的和收益大的文章和实验。

收益不大的

收益大的

总结

根据我的经验，无出处，大致总结，一般情况：数据分布属于自然图像的或者Distribution不同但是样本边界简单的，预估收益不大，因为SAM的训练集有包括类似分布的样本或者样本较为容易被正确分割。当OOD情况或者样本困难的，全部微调是个提点好办法。

还有就是有些文章我找不到了，，，。

同时马上更新peft lora微调sam案例 上手即用！

再次感谢网友提问和监督！