自然语言三兄弟NLP、NLU、NLG傻傻分不清？一文搞懂它们的区别

Python学研大本营

已于 2022-07-07 09:34:34 修改

阅读量9.3k

点赞数 2

文章标签：自然语言处理人工智能机器学习

于 2022-07-04 14:33:06 首次发布

本文链接：https://blog.csdn.net/weixin_39915649/article/details/125599523

版权

自然语言（Natural Language）中有NLP（‍Natural Language Processing）、NLU（Natural Language Understanding）和NLG（Natural Language Generation），它们的区别是什么呢？

关注《Python学研大本营》

本文旨在快速涵盖NLP、NLU和NLG之间的异同，并谈论NLP的未来。文章作者是Nahla Davies, 今年6月份发表在KDnuggets上。

你有没有使用过像Siri或Alexa那样的智能助手来为你回答问题？答案很可能是 "是"，这意味着你在某种程度上已经熟悉了所谓的自然语言处理（NLP）。

NLP是来自不同学科的方法的组合，像Siri和Alexa这样的智能助手使用这些方法来理解我们向它们提出的问题。它结合了人工智能和计算机科学等学科，使人类更容易与计算机进行对话，就像我们与另一个人一样。这种与机器进行模拟人类对话的想法可以追溯到阿兰-图灵写的一篇开创性的论文--这篇论文构成了我们今天使用的NLP技术的基础。

NLP采用非结构化数据集的方式，以将上述数据结构化为格式，这其中有不同的组成部分。

具体来说，这些组件被称为自然语言理解（NLU）和自然语言生成（NLG）。本文旨在快速涵盖NLP、NLU和NLG之间的异同，并谈论NLP的未来。

NLU和NGL是如何融入NLP的

数据科学家和人工智能专家可以利用NLP将非结构化数据集转化为计算机可以转换为语音和文本的格式--他们甚至可以创造出与你问的问题相关的上下文的回应，再回想一下Siri和Alexa等虚拟助手。但是，NLU和NLG到底是如何融入NLP的？

这三门学科的一个共同点是，它们都与自然语言有关，尽管它们都扮演着不同的角色。那么，这三者之间有什么区别呢？

这样想吧：NLU试图理解我们人类所说的语言，而NLP则追踪最重要的数据位，将其结构化为数字和文本等东西；它甚至可以帮助处理恶意的加密流量。同时，NLG利用非结构化数据集来创建我们可以理解为有意义的叙述。

定义自然语言理解（NLU）

自然语言理解依靠人工智能来理解它从语音或文本中获取的信息。它这样做是为了创造一些我们可以从书面文字中发现有意义的东西。一旦数据科学家使用语音识别将口语变成书面语，NLU就会从文本中解析出可理解的意义，无论该文本是否包含错误和发音错误。

NLU对数据科学家很重要，因为没有它，他们就没有办法从语音和聊天机器人等工具中解析出意义。作为人类，我们毕竟习惯于与支持语音的机器人进行对话--然而，机器却没有这种奢侈的便利。除此之外，NLU还能像你一样从语音中识别出情绪和污言秽语。这意味着，借助NLU的力量，数据科学家可以对文本进行分类，并对不同格式的内容进行有意义的分析。

自然语言理解旨在解析和理解非结构化信息，将其转化为可用的数据，而NLG的作用恰恰相反。为此，接下来让我们来定义NLG，并了解数据科学家如何将其应用于现实世界的用例。