Building Guardrails for Large Language Models

515 篇文章 3 订阅

已下架不支持订阅

本文关注大型语言模型(LLM)的风险管理,强调护栏技术在过滤LLM输入和输出中的关键作用。文章探讨了现有开源解决方案,如Llama Guard、Nvidia NeMo和Guardrails AI,并指出构建全面护栏的复杂性和挑战。提倡采用系统方法,结合社会技术视角,以多学科团队合作,确保护栏设计的质量和适应性。
摘要由CSDN通过智能技术生成

本文是LLM系列文章,针对《Building Guardrails for Large Language Models》的翻译。

摘要

随着大型语言模型(LLM)越来越融入我们的日常生活,识别和减轻其风险至关重要,尤其是当风险可能对人类用户和社会产生深远影响时。护栏过滤LLM的输入或输出,已成为一种核心防护技术。本文深入探讨了当前的开源解决方案(Llama Guard、Nvidia NeMo、Guardrails AI),并讨论了构建更完整解决方案的挑战和道路。根据先前研究的有力证据,我们主张采用系统的方法,在全面考虑各种LLM应用程序的不同背景的基础上,为LLM构建护栏。我们建议通过与多学科团队合作,采用社会技术方法来确定精确的技术要求,探索先进的神经符号实现来满足需求的复杂性,并开发验证和测试来确保最终产品的最高质量。

1 引言

2 现有实现方案

3 实现个人需求的技术挑战

4 护栏设计面临的挑战

5 结论

这篇立场文件主张采用系统的方法来构建护栏,而不是目前只提供最简单的机制来描述规则并连接学习和符号组件的解决方案。护栏由于其管理LLM与人类之间互动的作用而

已下架不支持订阅

Guardrails框架是一个用于构建安全软件产品和服务的框架。它可以帮助保证设计、实现和交付的安全性。Guardrails框架的目标是提供自动化的安全保护措施,以确保软件在构建时就具备安全性,并能够与云基础设施供应商差异竞争。该框架提供了代码库和自服务功能,使开发人员可以无需与安全团队交互即可使用。此外,它还提供了工具和自服务功能,使应急响应团队可以自动处理流程,并整合到基础设施、应用环境和检测响应体系中。通过Guardrails框架,安全团队可以在适当的位置提供安全护栏模板集成,以实现广泛的自动采用。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [Note-Sharing-for-Peddie:peddie school的笔记共享网站](https://download.csdn.net/download/weixin_42112658/18348722)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [相信技术的力量 - RSAC 2020 (2)](https://blog.csdn.net/weixin_47208161/article/details/106066805)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

UnknownBody

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值