1.知识图谱的评估方法
“网络安全知识图谱的评估标准虽然尚处于起步阶段,但CSGG在大多数网络安全功能的防御和攻击场景中都有潜在的应用。目前,幼儿园并没有既定的评估标准。准确度、精确度和F1值经常被研究者用来评估信息抽取模型。Hits@n、平均秩(MR)和平均倒数秩(MRR)用于评估三重预测模型的推理能力,并使用基于查询的案例来展示KG的查询和可视化能力。这些对于知识图谱的全面分析来说并不理想。例如,我们不能声称KG可以在某些情况下使用来证明它比其他KG更上级。因此,未来的研究提出了评估标准的CSGG建议。”
构建一个能够评价现有的知识图谱的评估体系,面向网络安全领域,因为特定领域知识图谱,本身能够量化比较的指标就比较多,因此尽量从多方面来评估这些KG。
2.KG对于消除LLM幻觉的作用
RAG(检索增强生成)添加文本来通过补充 LLM 的内部表示来提高质量