自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(8)
  • 收藏
  • 关注

原创 LLaMA-Factory微调

在LLaMA-Factory可以添加自定义的数据集,首先下载自己想要微调的数据集,此次使用知名的甄嬛数据集进行训练。前往,下载训练数据集,该数据集通过预览可以发现是Alpaca格式,下载完毕后找到​这个数据集注册文件# 数据目录结构LLaMA - Factory / └── data / ├── medical_qa . json # 自定义数据集└── dataset_info . json # 注册文件将huanhuan.json添加至dataset_info.json文件。

2025-06-08 17:27:57 917

原创 《中庸》笔记(四)

因此君子接纳但不随波逐流、同流一派,独立而不偏不倚,这才是真正的强大,国家政治清明有道,但不改初心志向,这才是真正的强大,国家无道政治阴暗,但是却不变节,这才是真正的强大。中立而不倚,强哉矫!”,君子接受别人的观点,接钠别人的优点,就是“合”,但是却不“同流”,比如40年前伟人关于计划和市场的思考,可以有市场也可以有计划,但是并不代表要走对方的路、举对方的旗,因此又有后来的“邪路不能走、老路也不能走”的提法,也就是后面所说的“中立而不倚”,也就是前面几章节中反复强调的就是自身的独立性、主体性和创造性。

2025-06-07 14:41:07 259

原创 《中庸》笔记(三)

联系前面的几章,天命章中的“天命谓之性,率性谓之道,修道谓之教”是核心,强调了“道心”,也就是天赋予人的本性的自然发用,是天理在个体中的体现,同样也是通过礼乐刑政等制度规范的“教”的依据和基础,是“性”的外化,这样的阐述形成了“天命—性—道—教”的逻辑闭环,反映出的古代“天人合一”的思想。而“道”不明的原因,与此类似,“贤者”要求过高,所谓“自视清高”正是如此,过分强调道的高度,反而让普通人难以企及,而不贤的人,无法达到道的高度,无法理解道的平衡态,自然不能明道。人皆曰‘予知’,择乎中庸,而不能期月守也。

2025-06-02 14:09:55 261

原创 《中庸》笔记(二)

从这章开始,孔子提到了君子和小人的概念,要知道,在春秋战国时期,一个人的身份高低贵贱几乎都是从血统认同而来,君王的血统即为贵族即为公子,奴隶的血统就是贱民,通过血统认同来建立身份认同是春秋战国时期之前的一以贯之。而孔子确从人格上树立了君子和小人的形象,君子小人不是天生的,人人想成为的君子可以通过修身立命得到(坦白说,个人理解这个概念有点像佛教中佛的概念,佛就“觉者”,且是人人可修之成佛),重要的事情说三遍,修身以立命,这正是天命章所提到的观点。仲尼曰:“君子中庸,小人反中庸,君子之中庸也,君子而时中;

2025-05-26 18:32:59 225

原创 《中庸》笔记(一)

以下内容都是个人学习思考,每个人世界观不同价值观不同,方法论也不同。如有不同,请诸君留情,无须多言。

2025-05-25 15:30:38 686

原创 transformer模型(三)

接上篇,最后是一些transformer模型中值得关注的细节。

2025-05-18 16:58:03 948

原创 transformer模型(二)

接上一篇,本篇重点理解多头注意力机制。

2025-05-11 17:17:10 537

原创 transformer模型(一)

Transformer 模型是 2017 年谷歌的著名论文《attention is all you need》中所提到的模型,原本的计划是用于解决机器翻译问题,也就是解决的是文本生成的 seq2seq 问题,因此下面都以文本信息为例阐述。该模型的主要结构图如下:​模型主要结构分为两部分,左侧是是 encoder,即为编码器,右侧是 decoder,也就是解码器,实际操作中它们都可以有很多层,图中显示为 Nx。‍。

2025-05-10 21:12:46 981

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除