text mining and analysis 学习笔记week1

一、 一些现实存在的事物在经过人的观察思考后通过语言表达就形成了文本数据，通过对文本的挖掘可以得到以下四个方面的内容： 1. 挖掘文本中关于语言的东西，一个文本它所运用的语言可能是多种混合的。
2. 挖掘文本中的内容
3. 得到观察者的思想或观点等
4. 推断预测现实生活里的变量
此外，文本挖掘并不局限于文本数据，一些相关的数值数据也能给该文本挖掘提供一些有帮助的背景信息。

二、 本课程所涵盖的内容包括：NLP简述及如何展示文本数据，单词联想的挖掘分析，话题挖掘分析，观点情感的挖掘分析以及基于文本的对现实生活里相关可变因素的预测

三、自然语言处理中的一些概念介绍

lexical analysis: 词法分析，又称词性标注，即标注为名词动词介词等。
syntactic analysis:句法分析，指句子中的主谓宾结构。
semantic analysis:语义分析，用计算机的语言来表示这个句子要表达的意思，由图可知再加上scare这个条件的话，可推断出boy害怕被狗追。
pragmatic analysis：说话动作分析或实务分析，由上面的语义分析可让人去提醒狗主人带回他的狗

四、NLP难点
我们为了高效表达经常会在不同语境中使用同一个词来表达意思，并没有作过多解释。但这种模棱两