作者 | CDA数据分析师
情感分析是文本的语义挖掘,可识别和提取原始文本材料中的主观信息,并帮助企业在监控在线对话的同时了解其品牌,产品或服务的社会情绪。但是,对社交媒体流的分析通常仅限于基本的情绪分析和基于计数的指标。这就好比仅仅是在表面划过,而错过了那些等待被发现的高价值见解。那么,一个品牌应该怎么做才能抓住那些容易获得的,同时价值比较高的见解呢?
随着深度学习的发展,算法分析文本的能力已经有了很大的提高。创造性地运用先进的人工智能技术是进行深入研究的有效工具。我们相信,根据以下内容对客户关于品牌的讨论进行分类非常重要:
这些基本概念在结合使用时,就成为一个非常重要的工具,可以准确地分析数百万次品牌讨论信息。在帖子中,我们以Uber为例,演示其工作原理。请继续阅读!
情绪分析
情绪分析是最常见的文本分类工具,它可以分析传入的消息并判断潜在的情绪是正面的,还是负面的,还是中立的。您可以在此处输入一个您选择的句子,并通过演示来判断潜在的情绪。
意图分析
意图分析通过分析消息背后的用户意图,并确定其是否涉及意见,新闻,营销,投诉,建议,欣赏或查询,从而来提升客户服务的质量。
上下文语义搜索(CSS)
现在事情变得很有趣了。想要获得可行的结论见解,了解用户在讨论品牌的哪个方面是很重要的。例如:亚马逊希望隔离与以下内容相关的消息:延迟交货,账单问题,促销相关的查询,产品评论等。另一方面,星巴克希望基于信息是否与员工行为,新咖啡口味,卫生反馈,在线订单,商店名称和位置相关等进行分类。但是,如何做到这一点呢?
我们介绍了一种智能搜索算法,称为 上下文语义搜索(CSS)。CSS的工作方式是将数千条消息和一个概念(例如 Price)作为输入,并过滤与给定概念紧密匹配的所有消息。下面所示的图形展示了CSS如何对业界所使用的现有方法的改进。
过滤所有与Price相关的消息的常规方法是对Price和其他紧密相关的单词(例如:price,change,$,paid)进行关键字搜索 。但是,这种方法不是很有效,因为几乎不可能想到所有相关的关键字,以及表示特定概念的变体。另一方面,CSS只是将概念名称(Price)作为输入,即使未提及概念关键字的明显变体,也可以过滤所有上下文相似的内容。
对于好奇的读者,我们想看看这是如何工作的。AI技术用于将每个单词转换为超空间中的特定点,这些点之间的距离用于识别上下文与我们正在探索的概念相似的信息。下面的图片展示了它的可视化效果:
下面来看一下CSS的实际应用,以及它是如何在以下示例中处理与Uber相关的评论的:
同样的,请看下面这条博文:
Flat rate was the best thing that happened this year. @uberbring it back!!!! #MakeUberGreatAgain
— A Boogie (@Finessenomics) March 3, 2017
在以上两种情况下, 即使这些消息中未提及Price一词 ,该算法也将这些消息分类为与Price相关的上下文。
优步是全球市值最高的初创企业,一直是共享经济的先驱。Uber在全球500多个城市开展业务,并为庞大的用户群提供服务,因此得到了用户的大量反馈,建议和投诉。通常,社交媒体是记录此类问题的首选。大量的输入数据使分析,分类和产生结论性见解成为一项具有挑战性的任务。
我们分析了数字媒体上有关几个产品主题的在线评论: 取消,付款,价格,安全和服务。
为了广泛覆盖数据源,我们从Uber官方Facebook页面上的最新评论中收集了数据,这些推文中提到了Uber和有关Uber的最新新闻。以下是所有渠道上的数据点分布:
分析用户评论的情绪可以使您对整体品牌的认知有一个了解。但是,要进行更深入的研究,借助上下文语义搜索对数据进行进一步分类是很重要的。
我们在同一个数据集上运行了上下文语义搜索算法,并考虑了上述的类别(取消,付款,价格,安全性和服务)。
情绪分析
值得注意的是,只有Price相关的正面评论数量超过负面评论 ,与其他所有类别相关的评论主要是负面情绪。为了深入研究,我们分析了这些评论的意图。Facebook是一个社交平台,评论充斥着随机内容,新闻分享,营销和促销内容以及垃圾邮件/无关内容。我们来看一下Facebook评论上的意图分析:
因此,我们删除了所有这些不相关的意图类别,并重新生成了结果:
每个类别的情感都有明显的变化。特别是在Price相关评论中,正面评论的数量从46%下降到了29%。
这使我们了解了CSS如何从数字媒体中产生深入的见解。因此,一个品牌可以分析这样的推文并从它们的积极点上或者从消极方面获得产品或业务的反馈。
情绪分析
对获得的推文也进行了类似的分析。 在最初的分析中, 与Payment和 Safety相关的推文情绪比较复杂。
要了解真实的用户意见,投诉和建议,我们必须再次过滤不相关的Tweets(垃圾邮件,垃圾邮件,市场营销,新闻和随机信息):
与 Payment 相关的正面推文数量显着减少 。此外, Safety 类别(以及相关关键字)的正面推文数量也大幅下降 。
此外,Cancel,Payment和Service(以及相关词)是Twitter评论中谈论最多的话题。似乎人们谈论最多的是司机取消乘车以及向他们收取的取消费。看看这个推文:
I still haven’t heard from you about you charging me a cancellation fee for the driver cancelling my ride!
— Anagh Padmanabhan (@anagh) March 2, 2017
像Uber这样的品牌可以依靠这种分析方法,并根据最关键的话题采取行动。例如, 与 Service 相关的推文所载的正向推文所占的百分比最低,而负向的推文所占的百分比最高。因此,Uber可以分析此类推文并对其采取行动以提高服务质量。
可以理解,安全一直是新闻中谈论最多的话题。有趣的是,在每个类别中,新闻情绪总体上都是正面的,个体上都是积极的。
我们也根据新闻的受欢迎程度对新闻进行分类。受欢迎程度的得分归因于该文章在不同社交媒体渠道上的占有率。以下是最热门的新闻列表:
随着技术的进步,从社交媒体数据中获取有意义的反馈的时代已经到来。Uber案例研究让我们了解了上下文语义搜索算法的功能。现在该是您的组织超越总体情绪和基于计数的指标的时候了。许多公司一直在利用数据去获取一些业务信息,但是想要获得最深入的信息,您必须利用AI,深度学习和智能分类器(如上下文语义搜索和情感分析)的力量。
数据分析咨询请扫描二维码
自学数据分析可能是一条充满挑战却又令人兴奋的道路。随着数据在现代社会中的重要性日益增长,掌握数据分析技能不仅能提升你的就 ...
2024-11-14数据分析相关职业选择 数据分析领域正在蓬勃发展,为各种专业背景的人才提供了丰富的职业机会。从初学者到有经验的专家,每个人 ...
2024-11-14数据挖掘与分析在金融行业的使用 在当今快速发展的金融行业中,数据挖掘与分析的应用愈发重要,成为驱动行业变革和提升竞争力的 ...
2024-11-14学习数据挖掘需要掌握哪些技能 数据挖掘是一个不断发展的领域,它结合了统计学、计算机科学和领域专业知识,旨在从数据中提取有 ...
2024-11-14统计学作为一门基于数据的学科,其广泛的应用领域和多样的职业选择,使得毕业生拥有丰厚的就业前景。无论是在政府还是企业,统计 ...
2024-11-14在当今高速发展的技术环境下,企业正在面临前所未有的机遇和挑战。数字化转型已成为企业保持竞争力和应对市场变化的必由之路。要 ...
2024-11-13爬虫技术在数据分析中扮演着至关重要的角色,其主要作用体现在以下几个方面: 数据收集:爬虫能够自动化地从互联网上抓取大量数 ...
2024-11-13在数据分析中,数据可视化是一种将复杂数据转化为图表、图形或其他可视形式的技术,旨在通过直观的方式帮助人们理解数据的含义与 ...
2024-11-13在现代银行业中,数字化用户行为分析已成为优化产品和服务、提升客户体验和提高业务效率的重要工具。通过全面的数据采集、深入的 ...
2024-11-13在这个数据飞速增长的时代,企业若想在竞争中占据优势,必须充分利用数据分析优化其营销策略。数据不仅有助于理解市场趋势,还可 ...
2024-11-13数据分析行业的就业趋势显示出多个积极的发展方向。随着大数据和人工智能技术的不断进步,数据分析在各行各业中的应用变得越来越 ...
2024-11-13市场数据分析是一门涉及多种技能和工具的学科,对企业在竞争激烈的市场中保持竞争力至关重要。通过数据分析,企业不仅可以了解当 ...
2024-11-13数据分析与数据挖掘是数据科学领域中两个关键的组成部分,它们各有独特的目标、方法和应用场景。尽管它们经常在实际应用中结合使 ...
2024-11-13在如今这个数据驱动的时代,数据分析能力已经成为许多行业的重要技能。无论是为工作需要,还是为了职业转型,掌握数据分析都能够 ...
2024-11-13在如今这个数据驱动的时代,数据分析能力已经成为许多行业的重要技能。无论是为工作需要,还是为了职业转型,掌握数据分析都能够 ...
2024-11-13作为一名业务分析师,你肩负着将业务需求转化为技术解决方案的重任。面试这一角色时,涉及的问题多种多样,涵盖技术技能、分析能 ...
2024-11-13自学数据分析可能看似一项艰巨的任务,尤其在开始时。但是,通过一些策略和方法,你可以系统地学习和掌握数据分析的相关知识和技 ...
2024-11-10Excel是数据分析领域中的一款强大工具,它凭借其灵活的功能和易用的界面,成为了许多数据分析师和从业者的首选。无论是简单的数 ...
2024-11-10在快速发展的商业环境中,数据分析能力已经成为许多行业的核心竞争力。无论是初学者还是经验丰富的专家,搭建一个有效的数据分析 ...
2024-11-10在如今的数据驱动世界,数据分析师在各行各业中扮演着至关重要的角色。随着企业越来越依赖数据决策,数据分析职位的需求不断增加 ...
2024-11-10