你是否曾經(jīng)想過(guò)，你的產(chǎn)品或服務(wù)是否真正滿足了客戶的需求？你是否想知道客戶對(duì)你的公司、品牌和員工的態(tài)度？如果你想要了解這些信息，就需要進(jìn)行客戶情感分析。

 

01 什么是情感分析

情感分析（或觀點(diǎn)挖掘）是一種自然語(yǔ)言處理 （NLP） 技術(shù)，用于確定數(shù)據(jù)是正面、負(fù)面還是中立。情感分析通常對(duì)文本數(shù)據(jù)進(jìn)行分析，以幫助企業(yè)監(jiān)控客戶反饋中的品牌和產(chǎn)品情緒，并了解客戶需求。

• 情感分析的類型

情感分析側(cè)重于文本的極性（積極的、消極的、中立的），但它也超越了極性來(lái)檢測(cè)特定的感受和情緒（憤怒、快樂(lè)、悲傷等）、緊迫性（緊急、不緊急）甚至意圖（感興趣與不感興趣）。

根據(jù)您希望如何解釋客戶反饋和咨詢，您可以定義和定制類別以滿足您情感分析需求。以下是一些最常用的情感分析類型：

1）分級(jí)情感分析

如果極性精度對(duì)您的業(yè)務(wù)很重要，您可以考慮擴(kuò)展極性類別以包括不同級(jí)別的正負(fù)向：

2）情緒檢測(cè)

情緒檢測(cè)情感分析允許您超越極性來(lái)檢測(cè)情緒，如快樂(lè)、沮喪、憤怒和悲傷。許多情緒檢測(cè)系統(tǒng)使用詞典（即單詞列表及其傳達(dá)的情感）或復(fù)雜的機(jī)器學(xué)習(xí)算法。

使用詞典的缺點(diǎn)之一是人們表達(dá)情感的方式各不相同。一些通常表達(dá)憤怒的詞，如 "壞"（bad）或 "殺"（kill）（例如，你的產(chǎn)品太糟糕了，或者你的客戶支持簡(jiǎn)直要了我的命！）也可能表達(dá)快樂(lè)（如 "這真是個(gè)大壞蛋 "或 "你們真是太棒了"）。

 

3）基礎(chǔ)情感分析

通常，在對(duì)文本進(jìn)行情感分析時(shí)，您會(huì)想知道人們以積極、中立或消極的方式提及哪些特定方面或特征。

這就是基礎(chǔ)情感分析可以提供幫助的地方，例如在產(chǎn)品評(píng)論中：“這款相機(jī)的電池壽命太短”，基礎(chǔ)分類將能夠確定該句子表達(dá)了對(duì)相關(guān)產(chǎn)品的電池壽命的負(fù)面意見(jiàn)。

 

4）多語(yǔ)言情感分析

多語(yǔ)言情感分析可能很困難，它涉及大量的預(yù)處理和資源。這些資源中的大部分都可以在網(wǎng)上找到（例如情感詞典），而其他資源則需要?jiǎng)?chuàng)建（例如翻譯的語(yǔ)料庫(kù)或噪聲檢測(cè)算法），但您需要知道如何編寫(xiě)代碼才能使用它們。

或者，您可以使用語(yǔ)言分類器自動(dòng)檢測(cè)文本中的語(yǔ)言，然后訓(xùn)練自定義情感分析模型，用您選擇的語(yǔ)言對(duì)文本進(jìn)行分類。

 

02 為什么情感分析很重要

由于人們?cè)絹?lái)越傾向于在公開(kāi)渠道表達(dá)自己的想法和感受，情感分析正迅速成為監(jiān)控和理解各類數(shù)據(jù)情感的重要工具。

自動(dòng)分析客戶反饋，例如調(diào)查回復(fù)社交媒體對(duì)話中的意見(jiàn)，使品牌能夠了解什么讓客戶滿意或沮喪，以便他們可以定制產(chǎn)品和服務(wù)以滿足客戶的需求。

例如，使用情感分析自動(dòng)分析客戶滿意度調(diào)查中的 4000+ 個(gè)開(kāi)放式回復(fù)，可以幫助您發(fā)現(xiàn)客戶在客戶旅程的每個(gè)階段滿意或不滿意的原因。

也許您想跟蹤品牌情感，以便您可以立即發(fā)現(xiàn)不滿的客戶并盡快做出回應(yīng)。也許您想比較這個(gè)季度和下一個(gè)季度的情緒，看看是否需要采取行動(dòng)。然后，您可以更深入地挖掘定性數(shù)據(jù)，以了解情感下降或上升的原因。

• 情感分析的總體趨勢(shì)

1）大規(guī)模數(shù)據(jù)整理

您能想象手動(dòng)整理成千上萬(wàn)條的推文、客服對(duì)話或調(diào)查報(bào)告嗎？情感分析可幫助企業(yè)以高效、經(jīng)濟(jì)的方式處理大量非結(jié)構(gòu)化數(shù)據(jù)。

 

2）實(shí)時(shí)分析

情感分析可以實(shí)時(shí)識(shí)別關(guān)鍵問(wèn)題，例如社交媒體上的公關(guān)危機(jī)是否正在升級(jí)？憤怒的客戶是否即將流失？情感分析模型可以幫助您立即識(shí)別這類情況，以便您可以快速采取行動(dòng)。

 

3）一致的標(biāo)準(zhǔn)

據(jù)估計(jì)，在判斷特定文本情感時(shí)，只有大約 60-65% 的時(shí)間會(huì)達(dá)成一致。情感標(biāo)記文本具有很強(qiáng)的主觀性，會(huì)受到個(gè)人經(jīng)歷、思想和信念的影響。

通過(guò)使用集中式情感分析系統(tǒng)，企業(yè)可以對(duì)其所有的數(shù)據(jù)應(yīng)用相同的標(biāo)準(zhǔn)，從而幫助他們提高準(zhǔn)確性并獲得更好的洞察力。

 

03 情感分析如何工作

情感分析，也稱為意見(jiàn)挖掘，得益于自然語(yǔ)言處理 （NLP） 和機(jī)器學(xué)習(xí)算法，可以自動(dòng)確定在線對(duì)話背后的情感基調(diào)。

情感分析模型可以采用不同的算法，具體取決于需要分析的數(shù)據(jù)量以及模型準(zhǔn)確性的要求。下面我們將詳細(xì)介紹其中的一些算法。

1）基于規(guī)則的方法

通常情況下，基于規(guī)則的系統(tǒng)使用一套人為制定的規(guī)則來(lái)幫助識(shí)別主觀性、極性或觀點(diǎn)的主體。

這些規(guī)則可能包括在計(jì)算語(yǔ)言學(xué)中開(kāi)發(fā)的各種NLP技術(shù)，例如：詞干提取、標(biāo)記化、詞性標(biāo)記和解析、詞典（即單詞和表達(dá)式列表）。

下面是基于規(guī)則的系統(tǒng)如何工作的基本示例：

1.定義兩個(gè)極化詞表（負(fù)面詞表，如壞、最差、丑等和正面詞表，如好、最好、美麗等）。

2.計(jì)算給定文本中出現(xiàn)的正面和負(fù)面詞語(yǔ)的數(shù)量。

3.如果正面詞語(yǔ)出現(xiàn)的次數(shù)大于負(fù)面詞語(yǔ)出現(xiàn)次數(shù)，系統(tǒng)就會(huì)返回正面情感，反之亦然。如果兩者相等，系統(tǒng)將返回中性情感。

基于規(guī)則的系統(tǒng)非常基礎(chǔ)，因?yàn)樗鼈儧](méi)有考慮單詞在序列是如何中組合的。當(dāng)然，可以使用更先進(jìn)的處理技術(shù)，并添加新規(guī)則以支持新的表達(dá)和詞匯。但是，添加新規(guī)則可能會(huì)影響以前的結(jié)果，整個(gè)系統(tǒng)可能會(huì)變得非常復(fù)雜。由于基于規(guī)則的系統(tǒng)通常需要微調(diào)和維護(hù)，因此也需要定期投資。

 

2）自動(dòng)方法

與基于規(guī)則的系統(tǒng)相反，自動(dòng)方法不依賴于人工制定的規(guī)則，而是依賴于機(jī)器學(xué)習(xí)技術(shù)。情感分析任務(wù)通常被建模為一個(gè)分類問(wèn)題，分類器收到文本后會(huì)返回一個(gè)類別，例如正面、負(fù)面或中性。

下面介紹機(jī)器學(xué)習(xí)分類器的實(shí)現(xiàn)方式：

• 訓(xùn)練和預(yù)測(cè)過(guò)程

在訓(xùn)練過(guò)程（a）中，我們的模型會(huì)根據(jù)用于訓(xùn)練的測(cè)試樣本，學(xué)習(xí)將特定輸入（即文本）與相應(yīng)的輸出（標(biāo)簽）相關(guān)聯(lián)。特征提取器將文本輸入轉(zhuǎn)化為特征向量。特征向量和標(biāo)簽對(duì)（例如正面、負(fù)面或中性）被輸入到機(jī)器學(xué)習(xí)算法中以生成模型。

在預(yù)測(cè)過(guò)程（b）中，特征提取器用于將看不見(jiàn)的文本輸入轉(zhuǎn)換為特征向量。然后將這些特征向量輸入模型，由模型生成預(yù)測(cè)標(biāo)簽（同樣是正面、負(fù)面或中性）。

 

• 從文本中提取特征

機(jī)器學(xué)習(xí)文本分類器的第一步是轉(zhuǎn)換文本提取或文本矢量化，經(jīng)典方法是帶有詞頻的詞袋（bag-of-words）或詞組袋（bag-of-ngrams）。

如今，基于詞嵌入（也稱為詞向量）應(yīng)用了新的特征提取技術(shù)。這種表示使具有相似含義的詞可以具有相似的表示，從而提高分類器的性能。

 

• 分類算法

分類步驟通常涉及如樸素貝葉斯、線性回歸、支持向量機(jī)或神經(jīng)網(wǎng)絡(luò)等統(tǒng)計(jì)模型：

  樸素貝葉斯： 一系列概率算法，使用貝葉斯定理來(lái)預(yù)測(cè)文本的類別。

  線性回歸： 統(tǒng)計(jì)學(xué)中一種非常著名的算法，用于在給定一組特征 （X） 的情況下預(yù)測(cè)某個(gè)值 （Y）。

  支持向量機(jī)：一種非概率模型，它將文本示例表示為多維空間中的點(diǎn)。不同類別（情感）的示例被映射到該空間內(nèi)的不同區(qū)域。然后，根據(jù)與現(xiàn)有文本的相似性及其映射到的區(qū)域?yàn)樾挛谋痉峙湟粋€(gè)類別。

  深度學(xué)習(xí)： 一組多樣化的算法，試圖通過(guò)采用人工神經(jīng)網(wǎng)絡(luò)來(lái)處理數(shù)據(jù)的方法來(lái)模仿人腦。

 

3）混合方法

混合系統(tǒng)將基于規(guī)則和自動(dòng)技術(shù)的理想元素組合到一個(gè)系統(tǒng)中。這些系統(tǒng)的一個(gè)巨大優(yōu)勢(shì)是結(jié)果往往更加準(zhǔn)確。

 

04 情感分析的挑戰(zhàn)

情感分析是自然語(yǔ)言處理中最難的任務(wù)之一，因?yàn)榧词故侨祟愐埠茈y準(zhǔn)確分析情感。

數(shù)據(jù)科學(xué)家在創(chuàng)建更準(zhǔn)確的情感分類器方面正在取得進(jìn)步，但還有很長(zhǎng)的路要走。

• 主觀性和語(yǔ)氣

文本分為兩類：主觀文本和客觀文本。客觀文本不包含明確的情感，而主觀文本則包含。

大多數(shù)人會(huì)說(shuō)，第一個(gè)情緒是積極的，第二個(gè)是中性的，對(duì)嗎？所有謂語(yǔ)（形容詞、動(dòng)詞和一些名詞）在如何創(chuàng)造情感方面都不應(yīng)該一視同仁。在上面的例子中，好看比紅色更主觀。

 

• 語(yǔ)境和極性

所有的話語(yǔ)都是在某個(gè)時(shí)間、某個(gè)地方、對(duì)某些人說(shuō)出來(lái)的。所有話語(yǔ)都在語(yǔ)境中說(shuō)出的，在沒(méi)有上下文的情況下分析情感相當(dāng)困難。如果沒(méi)有明確提及上下文，機(jī)器就無(wú)法了解語(yǔ)境，語(yǔ)境引起的問(wèn)題之一是極性的變化。查看以下回復(fù)：

關(guān)于它的一切。

絕對(duì)沒(méi)有！

想象一下，上面的回答來(lái)自問(wèn)題“你喜歡這個(gè)活動(dòng)的哪些方面？”第一個(gè)反應(yīng)是積極的，第二個(gè)反應(yīng)是消極的，對(duì)嗎？現(xiàn)在，設(shè)想這些回答來(lái)自對(duì)問(wèn)題“你不喜歡這次活動(dòng)的哪些方面？”問(wèn)題中的否定會(huì)讓情感分析完全改變。

如果我們要至少考慮到產(chǎn)生文本的部分背景，就需要進(jìn)行大量的預(yù)處理或后處理。然而，如何對(duì)數(shù)據(jù)預(yù)處理或后處理，以捕獲有助于情感分析的上下文信息，并不是一件簡(jiǎn)單的事。

 

• 諷刺和挖苦

說(shuō)到諷刺和挖苦，人們會(huì)用正面的詞語(yǔ)來(lái)表達(dá)自己的負(fù)面情緒，如果不全面了解表達(dá)情緒的情境，機(jī)器就很難察覺(jué)。

例如，查看以下問(wèn)題的一些可能答案：

你會(huì)為上述回答賦予什么情感？第一個(gè)帶感嘆號(hào)的回答可能是負(fù)面的，對(duì)嗎？問(wèn)題是沒(méi)有文本線索可以幫助機(jī)器學(xué)習(xí)，或者至少可以質(zhì)疑這種情感，因?yàn)?"是的 "和 "當(dāng)然 "通常屬于正面或中性文本。

那么第二個(gè)回答呢？在這種情況下，情緒是積極的，但我們相信你可以想出很多不同的情況，在這些情況下，同樣的回答可以表達(dá)負(fù)面情緒。

 

• 比較

如何在情感分析中處理比較是另一個(gè)值得解決的難題。

第一次比較不需要任何上下文線索即可正確分類。很明顯，這是正面的。

不過(guò)，第二和第三文本有點(diǎn)難以分類。你會(huì)將它們歸類為中性、正面甚至負(fù)面嗎？同樣，語(yǔ)境也會(huì)產(chǎn)生影響。例如，如果第二個(gè)文本中的“舊工具”被認(rèn)為是無(wú)用的，那么第二個(gè)文本與第三個(gè)文本非常相似。

 

• 表情符號(hào)

據(jù)研究，有兩種類型的表情符號(hào)。西方表情符號(hào)（例如:D）只用一兩個(gè)字符編碼，而東方表情符號(hào)（例如 ? \ （ツ） / ?）則是一個(gè)較長(zhǎng)的豎排字符組合。表情符號(hào)在文本的情感表達(dá)中起著重要作用，尤其是在推文中。

在對(duì)推文進(jìn)行情感分析時(shí)，需要特別注意字符級(jí)以及單詞級(jí)，可能還需要大量的預(yù)處理。例如，您可能希望預(yù)處理社交媒體內(nèi)容，將西方和東方表情符號(hào)轉(zhuǎn)化為標(biāo)記并將其列入白名單（即始終將它們作為分類目的的特征），以幫助提高情感分析性能。

 

• 定義中性

為了進(jìn)行準(zhǔn)確的情感分析，定義中性的含義是另一個(gè)需要解決的難題。與所有分類問(wèn)題一樣，定義類別-在本例中定義中性標(biāo)簽，是問(wèn)題最重要的部分之一。在訓(xùn)練情感分析模型時(shí)，中性、正面或負(fù)面的含義確實(shí)很重要。由于標(biāo)記數(shù)據(jù)要求標(biāo)記標(biāo)準(zhǔn)保持一致，因此必須對(duì)問(wèn)題進(jìn)行良好的定義。

以下是一些可幫助您識(shí)別和定義中性文本的想法：

1）客觀文本

所謂的客觀文本不包含明確的情緒，因此您應(yīng)該將這些文本歸入中性類別。

 

2）無(wú)關(guān)信息

如果您尚未對(duì)數(shù)據(jù)預(yù)處理以過(guò)濾掉無(wú)關(guān)信息，則可以將其標(biāo)記為中性。但要注意的是，只有當(dāng)您知道這樣做會(huì)如何影響整體性能時(shí)，才能執(zhí)行此操作。有時(shí)，您會(huì)給分類器添加噪音，導(dǎo)致性能變差。

 

3）包含愿望的文本

比如，“我希望產(chǎn)品有更多的集成”這種愿望通常是中性的。但是，像 "我希望產(chǎn)品更好 "這樣包含比較的愿望就很難歸類了。

 

• 人工注釋器準(zhǔn)確性

平均而言，在情感分析方面，標(biāo)注者之間的一致性（衡量?jī)蓚€(gè)或更多人工標(biāo)記者做出相同注釋決策的能力）非常低。由于機(jī)器是從標(biāo)記的數(shù)據(jù)中學(xué)習(xí)的，情感分析分類器可能不如其他類型的分類器精確。

盡管情感分析預(yù)測(cè)并不那么準(zhǔn)確，但情感分析依然值得我們付出努力。靈驗(yàn)喵CEM的情感分析模型，可以讓您在提交文本進(jìn)行分類時(shí)，大大提升情感分析預(yù)測(cè)的準(zhǔn)確性。對(duì)于典型的使用案例，例如工單流轉(zhuǎn)、品牌監(jiān)控和VoC分析，您將在繁瑣的人工上節(jié)省大量時(shí)間和資金。

內(nèi)容參考：MonkeyLearn,Sentiment Analysis: A Definitive Guide