甄知科技-CSDN博客

原创 MaxKB 权限与鉴权系统深度解读

文件路径（约 2000 行）role_list=[RoleConstants.ADMIN, RoleConstants.USER], # 内置角色resource_permission_group_list=[ResourcePermissionConst.KNOWLEDGE_VIEW], # 资源级parent_group=[WorkspaceGroup.KNOWLEDGE, UserGroup.KNOWLEDGE] # 菜单归属。

2026-04-17 09:39:28 393

原创 MaxKB 高价值模块逐文件详解

价值文件复用方式省时估算⭐⭐⭐⭐⭐tools.py直接复用3-6 个月⭐⭐⭐⭐⭐直接复用1-2 个月⭐⭐⭐⭐⭐直接复用1-2 个月⭐⭐⭐⭐直接复用2-4 个月⭐⭐⭐⭐参考改写2-4 周⭐⭐⭐直接复用1-2 周⭐⭐⭐（缓存设计）参考改写1-2 周⭐⭐⭐（Celery 模板）直接复用1-2 周。

2026-04-16 22:17:13 379

原创【无标题】

这篇文章深入解析了MaxKB企业知识库软件的架构设计。文章分为三个主要部分：1)代码结构全景解析，展示了前后端技术栈和模块划分，包括Vue3前端、Django后端、AI编排等核心组件；2)核心设计模式识别，重点介绍了策略模式、模板方法模式、责任链模式和观察者模式在系统中的实现；3)企业知识库架构设计，包括限界上下文划分和系统架构图。整个系统采用模块化设计，通过清晰的接口定义和事件驱动机制实现各组件解耦，支持多种模型厂商和文档类型的灵活扩展。知识管理、AI能力和应用发布三个核心领域协同工作，构成了一个完整的企

2026-04-16 22:15:57 432

原创 Ubuntu 服务器上挂载大容量硬盘

dev/sdb/dev/sdX/dev/sdb使用fdisknw必须使用parted在parted。

2025-02-05 22:52:13 1395

原创 load_dataset本地数据集构建

支持 wav 和 mp3 等音频扩展（aiff,au,avr,caf,flac,htk,svx,mat4,mat5,mpc2k,ogg,paf,pvf,raw,rf64,sd2,sds,ircam,voc,w64,wav,nist,wavex,wve,xi,mp3,opus）。由于 generator 的迭代行为，from_generator（）方法是从生成器创建数据集的最节省内存的方法。当您处理可能无法放入内存的非常大的数据集时，这尤其有用，因为数据集是在磁盘上逐步生成的，然后进行内存映射。

2024-09-03 21:16:49 2254

原创 datasets中load_dataset函数学习

path（str）：数据集的路径或名称。例如，“glue”、“squad”、“‘username/dataset_name’”，HF hub上的一个数据集存储库，其中包含一个数据集脚本“dataset_name.py”。-> 根据目录内容加载一个通用的数据集构建器（csv、json、text等），例如“”/路径/to/directory/带/my/csv/data“”。-> 从数据集脚本中加载数据集构建器，例如，‘./dataset/squad’ 或 ‘./dataset/squad/squad.py’。

2024-09-03 20:28:12 3631

原创 XTuner 微调 Llama3 数据格式处理

每条数据，结构由三部分组成：system 、input ( 输入 ) 和 output ( 输出 ) ，我们可以根据这个格式准备自己的数据集。input（输入）：这部分提供了执行指令所需的具体信息或上下文。在某些情况下，这个部分可能为空，表示指令本身已经包含了执行任务所需的所有信息。output（输出）：这部分是 AI 根据给定的指令和输入生成的答案或结果。system ：这部分定义了要求 AI 执行的任务或问题。学习了机智流组织的llama3五一课堂，本文重点针对微调用的数据格式进行理解。

2024-05-05 00:12:39 809 2

原创 selenium 操作浏览器

【代码】selenium 操作浏览器。

2024-05-04 23:11:55 325 2

原创 ES:存储空间不足的时候，提示marked read-only

cluster.routing.allocation.disk.watermark.low，默认85%，用于控制磁盘的最小使用率；cluster.routing.allocation.disk.watermark.high，默认90%，用于控制磁盘的最大使用率；cluster.routing.allocation.disk.watermark.flood_stage，默认95%，超过此值时，Elasticsearch 变成只读模式，无法写入数据。注：上述配置必须同时设为百分比，或具体字节值，不能混用。

2024-03-20 16:11:22 886 1

不止学习