<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[wm199的博客]]></title><description><![CDATA[]]></description><link>https://blog.csdn.net/wm199</link><language>zh-cn</language><generator>https://blog.csdn.net/</generator><copyright><![CDATA[Copyright &copy; wm199]]></copyright><item><title><![CDATA[切换git账户]]></title><link>https://blog.csdn.net/wm199/article/details/153283499</link><guid>https://blog.csdn.net/wm199/article/details/153283499</guid><author>wm199</author><pubDate>Wed, 15 Oct 2025 00:13:29 +0800</pubDate><description><![CDATA[将本地代码从仓库切换到仓库。]]></description><category></category></item><item><title><![CDATA[本地部署大模型（带工具调用格式）]]></title><link>https://blog.csdn.net/wm199/article/details/151993070</link><guid>https://blog.csdn.net/wm199/article/details/151993070</guid><author>wm199</author><pubDate>Tue, 23 Sep 2025 11:29:43 +0800</pubDate><description><![CDATA[本文围绕基于 vLLM 的大模型部署展开，详细介绍了从模型获取、本地化部署到功能测试的完整流程，并针对部署中可能出现的问题提供了对应解决方案。]]></description><category></category></item><item><title><![CDATA[AdapterBias]]></title><link>https://blog.csdn.net/wm199/article/details/145840632</link><guid>https://blog.csdn.net/wm199/article/details/145840632</guid><author>wm199</author><pubDate>Mon, 24 Feb 2025 22:58:46 +0800</pubDate><description><![CDATA[AdapterBias 通过在变换器层的隐藏输出上加一个 token-specific 的偏移（用向量和线性层生成），实现了高效微调。它结合了 BitFit 的轻量思想，又增加了灵活性，参数量比 Bottleneck Adapter 少 40 倍，却能保持竞争力。这是个聪明且实用的设计，尤其适合资源有限或快速适配的场景。如果你想更深入，比如具体实验结果或代码实现，我可以再帮你找找相关资料！你觉得这个解释够清楚吗？有什么想补充的吗？]]></description><category></category></item><item><title><![CDATA[在Transformer中kvcache的使用]]></title><link>https://blog.csdn.net/wm199/article/details/145676826</link><guid>https://blog.csdn.net/wm199/article/details/145676826</guid><author>wm199</author><pubDate>Mon, 17 Feb 2025 11:23:03 +0800</pubDate><description><![CDATA[在Q、K、V的计算过程中，我们都是会保存K,V矩阵，而query作为一个向量，在计算的过程中K,V矩阵用来存储以前的信息，而Q做的事情就是与以前的信息交互注意以前的信息。注意：在计算过程中，首token的速度也是非常重要的，因为输入提示后由于没有KV缓存，需要对提示词进行计算KV缓存，导致加载的速度变慢。举例说明 30B大模型。]]></description><category></category></item><item><title><![CDATA[AdaMix]]></title><link>https://blog.csdn.net/wm199/article/details/145671919</link><guid>https://blog.csdn.net/wm199/article/details/145671919</guid><author>wm199</author><pubDate>Sun, 16 Feb 2025 23:06:41 +0800</pubDate><description><![CDATA[在 Adapter Fusion 中，每个任务都有自己的一组适配器，之后会有一个融合模块，来组合这些适配器的输出。在 Adapter Fusion 中，每个任务都有自己的一组适配器，之后会有一个融合模块，来组合这些适配器的输出。门控网络通常是一个小的神经网络，它的作用是学习输入特征与专家的关系，决定输入应该送到哪些专家，并分配相应的权重。门控网络通常是一个小的神经网络，它的作用是学习输入特征与专家的关系，决定输入应该送到哪些专家，并分配相应的权重。AdaMix 的主要贡献在于，它。]]></description><category></category></item><item><title><![CDATA[北京冬季出游计划]]></title><link>https://blog.csdn.net/wm199/article/details/145435380</link><guid>https://blog.csdn.net/wm199/article/details/145435380</guid><author>wm199</author><pubDate>Tue, 04 Feb 2025 23:02:16 +0800</pubDate><description><![CDATA[北京出游计划]]></description><category></category></item><item><title><![CDATA[Recondreamer模型]]></title><link>https://blog.csdn.net/wm199/article/details/144686318</link><guid>https://blog.csdn.net/wm199/article/details/144686318</guid><author>wm199</author><pubDate>Tue, 24 Dec 2024 10:51:48 +0800</pubDate><description><![CDATA[Recondreamer模型]]></description><category></category></item><item><title><![CDATA[激活函数-swiGLU]]></title><link>https://blog.csdn.net/wm199/article/details/144476653</link><guid>https://blog.csdn.net/wm199/article/details/144476653</guid><author>wm199</author><pubDate>Sat, 14 Dec 2024 21:23:45 +0800</pubDate><description><![CDATA[swiGLU是一种改进的激活函数模块，主要用于深度学习中的 Transformer 模型和其他神经网络架构。它在的基础上进行了修改，以提升模型的表现和训练效率。swiGLU是对 GLU 的改进，通过引入 Swish 激活函数来提供更平滑的非线性映射，有助于提升深度学习模型的表现，尤其是在 Transformer 架构中。]]></description><category></category></item><item><title><![CDATA[旋转位置编码的理解]]></title><link>https://blog.csdn.net/wm199/article/details/144474497</link><guid>https://blog.csdn.net/wm199/article/details/144474497</guid><author>wm199</author><pubDate>Sat, 14 Dec 2024 18:48:37 +0800</pubDate><description><![CDATA[高维向量可以分成多个二维组，每组进行旋转。旋转公式xi′xi⋅cos⁡θ−yi⋅sin⁡θyi′xi⋅sin⁡θyi⋅cos⁡θxi′​yi′​​xi​⋅cosθ−yi​⋅sinθxi​⋅sinθyi​⋅cosθ​旋转角度θ\thetaθ由词的位置和向量的维度共同决定。优点：适合高维、灵活、效果好。这样，模型就能在高维空间中更好地理解词的顺序信息。]]></description><category></category></item><item><title><![CDATA[VLA模型]]></title><link>https://blog.csdn.net/wm199/article/details/144275859</link><guid>https://blog.csdn.net/wm199/article/details/144275859</guid><author>wm199</author><pubDate>Mon, 09 Dec 2024 10:05:15 +0800</pubDate><description><![CDATA[主要介绍了目前的VLA大模型]]></description><category></category></item><item><title><![CDATA[多模态大语言模型的对比]]></title><link>https://blog.csdn.net/wm199/article/details/144249567</link><guid>https://blog.csdn.net/wm199/article/details/144249567</guid><author>wm199</author><pubDate>Wed, 04 Dec 2024 23:25:29 +0800</pubDate><description><![CDATA[常见的多模态视觉问答模型]]></description><category></category></item><item><title><![CDATA[Goat详解——具身智能大模型]]></title><link>https://blog.csdn.net/wm199/article/details/143837056</link><guid>https://blog.csdn.net/wm199/article/details/143837056</guid><author>wm199</author><pubDate>Sun, 17 Nov 2024 19:41:56 +0800</pubDate><description><![CDATA[对于训练集中的每个batch B，定义了一个掩码函数mblm(b, l)mbl如果Tokensls_lsl​是文本Token或是Agent的动作，则mbl1m(b,l)=1mbl1。否则mbl0m(b,l)=0mbl0。损失函数计算为：LθB−∑b1∣B∣∑l1Lmbllog⁡pθslb∣s1bsl−1bLθB==−b1∑∣B∣​l1∑L​mbl。]]></description><category></category></item><item><title><![CDATA[GAN网络详解析]]></title><link>https://blog.csdn.net/wm199/article/details/137873062</link><guid>https://blog.csdn.net/wm199/article/details/137873062</guid><author>wm199</author><pubDate>Wed, 17 Apr 2024 15:41:21 +0800</pubDate><description><![CDATA[介绍目前常见的GAN网络，以及GAN网络的基本组成]]></description><category></category></item><item><title><![CDATA[什么是范数——一文轻松理解]]></title><link>https://blog.csdn.net/wm199/article/details/137694193</link><guid>https://blog.csdn.net/wm199/article/details/137694193</guid><author>wm199</author><pubDate>Fri, 12 Apr 2024 20:42:27 +0800</pubDate><description><![CDATA[通过例子说明什么是范数，理解清晰，拒绝晦涩难懂的数据符号]]></description><category></category></item><item><title><![CDATA[关于Transformer的面试题]]></title><link>https://blog.csdn.net/wm199/article/details/137647974</link><guid>https://blog.csdn.net/wm199/article/details/137647974</guid><author>wm199</author><pubDate>Thu, 11 Apr 2024 23:18:38 +0800</pubDate><description><![CDATA[Transformer大模型的一些问题。]]></description><category></category></item><item><title><![CDATA[一文读懂Batch_Normalization和Layer_normalization]]></title><link>https://blog.csdn.net/wm199/article/details/137229826</link><guid>https://blog.csdn.net/wm199/article/details/137229826</guid><author>wm199</author><pubDate>Mon, 01 Apr 2024 13:48:38 +0800</pubDate><description><![CDATA[文章使用简单的例子直接可通过手动计算理解batch_normalization和layer_normalization的计算方式]]></description><category></category></item><item><title><![CDATA[局部关系网络]]></title><link>https://blog.csdn.net/wm199/article/details/136807677</link><guid>https://blog.csdn.net/wm199/article/details/136807677</guid><author>wm199</author><pubDate>Mon, 18 Mar 2024 14:11:04 +0800</pubDate><description><![CDATA[局部关系网络]]></description><category></category></item><item><title><![CDATA[链表的递归算法-leetcode 21题]]></title><link>https://blog.csdn.net/wm199/article/details/136722503</link><guid>https://blog.csdn.net/wm199/article/details/136722503</guid><author>wm199</author><pubDate>Thu, 14 Mar 2024 21:35:33 +0800</pubDate><description><![CDATA[使用python语言进行递归算法，主要知识点链表递归算法。]]></description><category></category></item><item><title><![CDATA[DTD(Deep Tyalor Decomposition)深度taylor分解]]></title><link>https://blog.csdn.net/wm199/article/details/136451436</link><guid>https://blog.csdn.net/wm199/article/details/136451436</guid><author>wm199</author><pubDate>Mon, 04 Mar 2024 14:39:56 +0800</pubDate><description><![CDATA[DTD分解，可解释性工作的基本原理]]></description><category></category></item><item><title><![CDATA[Linux系统----WSL安装anconda、cuda创建pytorch学习环境]]></title><link>https://blog.csdn.net/wm199/article/details/136330597</link><guid>https://blog.csdn.net/wm199/article/details/136330597</guid><author>wm199</author><pubDate>Tue, 27 Feb 2024 20:49:27 +0800</pubDate><description><![CDATA[WSL安装anconda、cuda创建pytorch学习环境]]></description><category></category></item></channel></rss>