NLP基本任务

基本四类任务

1. 序列标注：分词/POS Tag/NER/语义标注
2. 分类任务：文本分类/情感计算
3. 句子关系判断：Entailment/QA/自然语言推理
4. 生成式任务：机器翻译/文本摘要

 

NLP的基本任务分类

词法分析（Lexical Analysis）：对自然语言进行词汇层面的分析，是NLP基础性工作
        分词（Word Segmentation/Tokenization）：对没有明显边界的文本进行切分，得到词序列
        新词发现（New Words Identification）：找出文本中具有新形势、新意义或是新用法的词
        形态分析（Morphological Analysis）：分析单词的形态组成，包括词干（Sterms）、词根（Roots）、词缀（Prefixes and Suffixes）等
        词性标注（Part-of-speech Tagging）：确定文本中每个词的词性。词性包括动词（Verb）、名词（Noun）、代词（pronoun）等
        拼写校正（Spelling Correction）：找出拼写错误的词并进行纠正
    </