文本情感分析(也称为意见挖掘)是指用自然语言处理文本挖掘以及计算机语言学等方法来识别和提取原素材中的主观讯息。

通常来说,情感分析的目的是为了找出说话者/作者在某些话题上或者针对一个文本两极的观点的态度。这个态度或许是他或她的个人判断或是评估,也许是他当时的情感状态(就是说,作者在做出这个言论时的情绪状态),或是作者有意向的情感交流(就是作者想要读者所体验的情绪)。

研究领域

文本情感分析的一个基本步骤是对文本中的某段已知文字的两极性进行分类,这个分类可能是在不同的层级下进行。分类的作用就是判断出此文字中表述的观点是积极的、消极的、还是中性的情感(sentiment)。更高级的“超出两极性”的情感分析还会寻找更复杂的情绪状态(emotion),比如“生气”、“悲伤”、“快乐” 等等。

在文本情感分析领域,早期做出研究贡献的有 Turney[1] 和 Pang[2] 他们运用了多种方法探测商品评论和电影影评的两极观点。此研究是建立在文档级所进行的分析。另一种文档意见的分类方式可以是多重等级的,Pang[3] 和 Snyder[4] (among others):[3] 延伸了早先的基础两极意见研究,将电影影评分类并预测为3至4星的多重级别,而 Snyder[4] 就餐馆评论做了个深度分析,从多种不同方面预测餐馆的评分,比如食物、气氛等等 (在一个5星的等级制度上)。尽管在大多数统计方面的分类方式中,“中性” 类是经常被忽略的,因为“中性”类的文本经常是处于一个两极分类的边缘地带,但是很多研究者指出,在每个两极化问题当中,都应该识别出三个不同的类别。进一步的说,一些现有的分类方式 例如 Max Entropy[5] 和 SVMs[6] 可以证明,在分类过程中区分出“中性”类可以帮助提高分类算法的整体准确率。实际上,之前的一些研究发现,在某些场合,例如 YouTube,中性语气占多数。约53.84%的观众对北京建筑遗产旅游视频持中立态度,约36.79%的观众对北京建筑遗产旅游视频持正面或强烈正面情感态度。[7]

另一种判定文本情绪的方法是利用比例换算系统。当一个词普遍被认为跟消极、中性或是积极的情感有关联时,将这个词赋予一个-10到+10之中的数字级别(最消极到最正向情感),在使用自然语言处理来分析一个非结构化文本数据后,余下的的概念也可以被分析来得出词与概念的相关性。[来源请求] 接下来,每一个概念都可以被赋予一个分数,这个分数是基于情感词汇和这个概念的关联度,以及他们本身的分数而得出的。这个方法让文本情感的理解晋升到一个更加智能的层面,并且是基于一个11分的等级范围的。另外一种方法是,计算出文本正向的和消极的情感力度分数, 如果研究的目的是要判定一个文本的感情,而不是总体文本集的两极分布或文字的力度。[8]

另一个研究方向是“主观/客观 识别”。这个研究 [9] 通常被定义为将一个已知文本(一般是句子)分类成两个类:主观和客观。这个问题有些时候比两极化分类问题更难解决。 [10] 主观词汇和短语可能是基于前后文语意联系,而一个客观文档有可能包含主观语句(e.g. 一篇新闻引用了某人的观点)。此外, Su[11] 也曾提到过,得到的结论在很大程度上依赖于注释文本时对“主观”的定义。不过, Pang[12] 证实了如果两极分类前去除文件中的客观语句,会提高算法的表现。

方法

现有的文本情感分析的途径大致可以集合成四类:关键词识别、词汇关联、统计方法和概念级技术。[13] 关键词识别是利用文本中出现的清楚定义的影响词(affect words),例如“开心”、“难过”、“伤心”、“害怕”、“无聊”等等,来影响分类。[14]词汇关联除了侦查影响词以外,还附于词汇一个和某项情绪的“关联”值。[15] 统计方法通过调控机器学习中的元素,比如潜在语意分析(latent semantic analysis),SVM(support vector machines),词袋(bag of words),等等。(参见Peter Turney[1]在相关领域的研究成果。)一些更智能的方法意在探测出情感持有者(保持情绪状态的那个人)和情感目标(让情感持有者产生情绪的实体)。[16]要想挖掘在某语境下的意见,或是获取被给予意见的某项功能,需要使用到语法之间的关系。语法之间互相的关联性经常需要通过深度解析文本来获取。[17]与单纯的语义技术不同的是,概念级的算法思路权衡了知识表达(knowledge representation)的元素,比如知识本体 (ontologies)、语义网络(semantic networks),因此这种算法也可以探查到文字间比较微妙的情绪表达。例如, 分析一些没有明确表达相关信息的概念,但是通过他们对于明确概念的不明显联系来获取所求信息。[18]

有很多开源软件使用机器学习(machine learning)、统计、自然语言处理的技术来计算大型文本集的情感分析, 这些大型文本集合包括网页、网络新闻、网上讨论群、网络评论、博客和社交媒介。[19] Yao et al 使用机器学习发现,英语推文的情绪越积极,它就越有可能被转发。然而,法国推文的负面情绪越多,推文被转发的可能性就越大。因此,在法语推文中,负面职业安全推文比正面推文具有更强的影响,但在英文推文中则不然。虽然法语推文的情绪分析结果表明,大多数推特用户以中立的语气讨论职业安全问题,但法语推文中极端负面的数量远多于英语。这反映了语言文化差异影响用户的行为。[20]

分析层级与基于面向的情感分析

情感分析可以分为三种分析层级,分别为文件层级(document level)、句子层级(sentence level)以及面向层级(aspect level)。

在文件层级中,一则文件只会被萃取出一个情感。在句子层级中,情感分析方法将文件中的每一则句子皆萃取出一个对应情感。

面向层级与上面两者差别较大。在面向层级中,情感分析的单位为一个实体(entity)的不同面向,而一个面向会萃取出一个情感。一个实体可能是一个手机,或一个相机等。一个面向则是一个实体的某个属性或者组成部分。以一则句子“这台电脑的性能很优秀”为例,“电脑”为一个实体,“性能”则为该实体的一个面向,在面向层级的情感分析中即会得到类似于“性能具有积极情感”的结果。[21]

面向层级的情感分析目的在于取得粒度更细的分析结果,技术上的难度也较其他两者困难,因此发展出独立的研究领域,一般称作基于面向的情感分析(aspect-based sentiment analysis, ABSA)。ABSA的子任务包含了意见目标萃取(opinion target extractio, OTE)、面向类别侦测(aspect category detection)、情感极性分类(sentiment polarity)等。[22]

参见

参考

Wikiwand in your browser!

Seamless Wikipedia browsing. On steroids.

Every time you click a link to Wikipedia, Wiktionary or Wikiquote in your browser's search results, it will show the modern Wikiwand interface.

Wikiwand extension is a five stars, simple, with minimum permission required to keep your browsing private, safe and transparent.