作者 | CDA数据分析师
情感分析是文本的语义挖掘,可识别和提取原始文本材料中的主观信息,并帮助企业在监控在线对话的同时了解其品牌,产品或服务的社会情绪。但是,对社交媒体流的分析通常仅限于基本的情绪分析和基于计数的指标。这就好比仅仅是在表面划过,而错过了那些等待被发现的高价值见解。那么,一个品牌应该怎么做才能抓住那些容易获得的,同时价值比较高的见解呢?
随着深度学习的发展,算法分析文本的能力已经有了很大的提高。创造性地运用先进的人工智能技术是进行深入研究的有效工具。我们相信,根据以下内容对客户关于品牌的讨论进行分类非常重要:
这些基本概念在结合使用时,就成为一个非常重要的工具,可以准确地分析数百万次品牌讨论信息。在帖子中,我们以Uber为例,演示其工作原理。请继续阅读!
情绪分析
情绪分析是最常见的文本分类工具,它可以分析传入的消息并判断潜在的情绪是正面的,还是负面的,还是中立的。您可以在此处输入一个您选择的句子,并通过演示来判断潜在的情绪。
意图分析
意图分析通过分析消息背后的用户意图,并确定其是否涉及意见,新闻,营销,投诉,建议,欣赏或查询,从而来提升客户服务的质量。
上下文语义搜索(CSS)
现在事情变得很有趣了。想要获得可行的结论见解,了解用户在讨论品牌的哪个方面是很重要的。例如:亚马逊希望隔离与以下内容相关的消息:延迟交货,账单问题,促销相关的查询,产品评论等。另一方面,星巴克希望基于信息是否与员工行为,新咖啡口味,卫生反馈,在线订单,商店名称和位置相关等进行分类。但是,如何做到这一点呢?
我们介绍了一种智能搜索算法,称为 上下文语义搜索(CSS)。CSS的工作方式是将数千条消息和一个概念(例如 Price)作为输入,并过滤与给定概念紧密匹配的所有消息。下面所示的图形展示了CSS如何对业界所使用的现有方法的改进。
过滤所有与Price相关的消息的常规方法是对Price和其他紧密相关的单词(例如:price,change,$,paid)进行关键字搜索 。但是,这种方法不是很有效,因为几乎不可能想到所有相关的关键字,以及表示特定概念的变体。另一方面,CSS只是将概念名称(Price)作为输入,即使未提及概念关键字的明显变体,也可以过滤所有上下文相似的内容。
对于好奇的读者,我们想看看这是如何工作的。AI技术用于将每个单词转换为超空间中的特定点,这些点之间的距离用于识别上下文与我们正在探索的概念相似的信息。下面的图片展示了它的可视化效果:
下面来看一下CSS的实际应用,以及它是如何在以下示例中处理与Uber相关的评论的:
同样的,请看下面这条博文:
Flat rate was the best thing that happened this year. @uberbring it back!!!! #MakeUberGreatAgain
— A Boogie (@Finessenomics) March 3, 2017
在以上两种情况下, 即使这些消息中未提及Price一词 ,该算法也将这些消息分类为与Price相关的上下文。
优步是全球市值最高的初创企业,一直是共享经济的先驱。Uber在全球500多个城市开展业务,并为庞大的用户群提供服务,因此得到了用户的大量反馈,建议和投诉。通常,社交媒体是记录此类问题的首选。大量的输入数据使分析,分类和产生结论性见解成为一项具有挑战性的任务。
我们分析了数字媒体上有关几个产品主题的在线评论: 取消,付款,价格,安全和服务。
为了广泛覆盖数据源,我们从Uber官方Facebook页面上的最新评论中收集了数据,这些推文中提到了Uber和有关Uber的最新新闻。以下是所有渠道上的数据点分布:
分析用户评论的情绪可以使您对整体品牌的认知有一个了解。但是,要进行更深入的研究,借助上下文语义搜索对数据进行进一步分类是很重要的。
我们在同一个数据集上运行了上下文语义搜索算法,并考虑了上述的类别(取消,付款,价格,安全性和服务)。
情绪分析
值得注意的是,只有Price相关的正面评论数量超过负面评论 ,与其他所有类别相关的评论主要是负面情绪。为了深入研究,我们分析了这些评论的意图。Facebook是一个社交平台,评论充斥着随机内容,新闻分享,营销和促销内容以及垃圾邮件/无关内容。我们来看一下Facebook评论上的意图分析:
因此,我们删除了所有这些不相关的意图类别,并重新生成了结果:
每个类别的情感都有明显的变化。特别是在Price相关评论中,正面评论的数量从46%下降到了29%。
这使我们了解了CSS如何从数字媒体中产生深入的见解。因此,一个品牌可以分析这样的推文并从它们的积极点上或者从消极方面获得产品或业务的反馈。
情绪分析
对获得的推文也进行了类似的分析。 在最初的分析中, 与Payment和 Safety相关的推文情绪比较复杂。
要了解真实的用户意见,投诉和建议,我们必须再次过滤不相关的Tweets(垃圾邮件,垃圾邮件,市场营销,新闻和随机信息):
与 Payment 相关的正面推文数量显着减少 。此外, Safety 类别(以及相关关键字)的正面推文数量也大幅下降 。
此外,Cancel,Payment和Service(以及相关词)是Twitter评论中谈论最多的话题。似乎人们谈论最多的是司机取消乘车以及向他们收取的取消费。看看这个推文:
I still haven’t heard from you about you charging me a cancellation fee for the driver cancelling my ride!
— Anagh Padmanabhan (@anagh) March 2, 2017
像Uber这样的品牌可以依靠这种分析方法,并根据最关键的话题采取行动。例如, 与 Service 相关的推文所载的正向推文所占的百分比最低,而负向的推文所占的百分比最高。因此,Uber可以分析此类推文并对其采取行动以提高服务质量。
可以理解,安全一直是新闻中谈论最多的话题。有趣的是,在每个类别中,新闻情绪总体上都是正面的,个体上都是积极的。
我们也根据新闻的受欢迎程度对新闻进行分类。受欢迎程度的得分归因于该文章在不同社交媒体渠道上的占有率。以下是最热门的新闻列表:
随着技术的进步,从社交媒体数据中获取有意义的反馈的时代已经到来。Uber案例研究让我们了解了上下文语义搜索算法的功能。现在该是您的组织超越总体情绪和基于计数的指标的时候了。许多公司一直在利用数据去获取一些业务信息,但是想要获得最深入的信息,您必须利用AI,深度学习和智能分类器(如上下文语义搜索和情感分析)的力量。
数据分析咨询请扫描二维码
数据分析师的工作内容涉及多个方面,主要包括数据的收集、整理、分析和可视化,以支持商业决策和问题解决。以下是数据分析师的一 ...
2024-11-21数据分析师必须掌握的技能可以从多个方面进行归纳和总结。以下是数据分析师需要具备的主要技能: 统计学基础:数据分析师需要 ...
2024-11-21数据分析入门的难易程度因人而异,总体来看,入门并不算特别困难,但需要一定的学习和实践积累。 入门难度:数据分析入门相对 ...
2024-11-21数据分析是一项通过收集、整理和解释数据来发现有用信息的过程,它在现代社会中具有广泛的应用和重要性。数据分析能够帮助人们更 ...
2024-11-21数据分析行业正在迅速发展,随着技术的不断进步和数据量的爆炸式增长,企业对数据分析人才的需求也与日俱增。本文将探讨数据分析 ...
2024-11-21数据分析的常用方法包括多种技术,每种方法都有其特定的应用场景和优势。以下是几种常见的数据分析方法: 对比分析法:通过比 ...
2024-11-21企业数字化转型是指企业利用数字技术对其业务进行改造和升级,以实现提高效率、降低成本、创新业务模式等目标的过程。这一过程不 ...
2024-11-21数据分析作为一个备受追捧的职业领域,吸引着越来越多的女性加入其中。对于女生而言,在选择成为一名数据分析师时,行业选择至关 ...
2024-11-21大数据技术专业主要学习计算机科学、数学、统计学和信息技术等领域的基础理论和技能,旨在培养具备大数据处理、分析和应用能力的 ...
2024-11-21《Python数据分析极简入门》 第2节 3 Pandas数据查看 这里我们创建一个DataFrame命名为df: importnumpyasnpi ...
2024-11-21越老越吃香的行业主要集中在需要长时间经验积累和专业知识的领域。这些行业通常知识更新换代较慢,因此随着年龄的增长,从业者能 ...
2024-11-20数据导入 使用pandas库的read_csv()函数读取CSV文件或使用read_excel()函数读取Excel文件。 支持处理不同格式数据,可指定分隔 ...
2024-11-20大数据与会计专业是一门结合了大数据分析技术和会计财务理论知识的新型复合型学科,旨在培养能够适应现代会计业务新特征的高层次 ...
2024-11-20要成为一名数据分析师,需要掌握一系列硬技能和软技能。以下是成为数据分析师所需的关键技能: 统计学基础 理解基本的统计概念 ...
2024-11-20是的,Python可以用于数据分析。Python在数据分析领域非常流行,因为它拥有丰富的库和工具,能够高效地处理从数据清洗到可视化的 ...
2024-11-20在这个数据驱动的时代,数据分析师的角色变得愈发不可或缺。他们承担着帮助企业从数据中提取有价值信息的责任,而这些信息可以大 ...
2024-11-20数据分析作为现代信息时代的支柱之一,已经成为各行业不可或缺的工具。无论是在商业、科研还是日常决策中,数据分析都扮演着至关 ...
2024-11-20数字化转型已成为当今商业世界的热点话题。它不仅代表着技术的提升,还涉及企业业务流程、组织结构和文化的深层次变革。理解数字 ...
2024-11-20在现代社会的快速变迁中,选择一个具有长期增长潜力的行业显得至关重要。了解未来发展前景好的行业不仅能帮助我们进行职业选择, ...
2024-11-20统计学专业的就业方向和前景非常广泛且充满机遇。随着大数据、人工智能等技术的快速发展,统计学的重要性进一步凸显,相关人才的 ...
2024-11-20