作者 | CDA数据分析师
情感分析是文本的语义挖掘,可识别和提取原始文本材料中的主观信息,并帮助企业在监控在线对话的同时了解其品牌,产品或服务的社会情绪。但是,对社交媒体流的分析通常仅限于基本的情绪分析和基于计数的指标。这就好比仅仅是在表面划过,而错过了那些等待被发现的高价值见解。那么,一个品牌应该怎么做才能抓住那些容易获得的,同时价值比较高的见解呢?
随着深度学习的发展,算法分析文本的能力已经有了很大的提高。创造性地运用先进的人工智能技术是进行深入研究的有效工具。我们相信,根据以下内容对客户关于品牌的讨论进行分类非常重要:
这些基本概念在结合使用时,就成为一个非常重要的工具,可以准确地分析数百万次品牌讨论信息。在帖子中,我们以Uber为例,演示其工作原理。请继续阅读!
情绪分析
情绪分析是最常见的文本分类工具,它可以分析传入的消息并判断潜在的情绪是正面的,还是负面的,还是中立的。您可以在此处输入一个您选择的句子,并通过演示来判断潜在的情绪。
意图分析
意图分析通过分析消息背后的用户意图,并确定其是否涉及意见,新闻,营销,投诉,建议,欣赏或查询,从而来提升客户服务的质量。
上下文语义搜索(CSS)
现在事情变得很有趣了。想要获得可行的结论见解,了解用户在讨论品牌的哪个方面是很重要的。例如:亚马逊希望隔离与以下内容相关的消息:延迟交货,账单问题,促销相关的查询,产品评论等。另一方面,星巴克希望基于信息是否与员工行为,新咖啡口味,卫生反馈,在线订单,商店名称和位置相关等进行分类。但是,如何做到这一点呢?
我们介绍了一种智能搜索算法,称为 上下文语义搜索(CSS)。CSS的工作方式是将数千条消息和一个概念(例如 Price)作为输入,并过滤与给定概念紧密匹配的所有消息。下面所示的图形展示了CSS如何对业界所使用的现有方法的改进。
过滤所有与Price相关的消息的常规方法是对Price和其他紧密相关的单词(例如:price,change,$,paid)进行关键字搜索 。但是,这种方法不是很有效,因为几乎不可能想到所有相关的关键字,以及表示特定概念的变体。另一方面,CSS只是将概念名称(Price)作为输入,即使未提及概念关键字的明显变体,也可以过滤所有上下文相似的内容。
对于好奇的读者,我们想看看这是如何工作的。AI技术用于将每个单词转换为超空间中的特定点,这些点之间的距离用于识别上下文与我们正在探索的概念相似的信息。下面的图片展示了它的可视化效果:
下面来看一下CSS的实际应用,以及它是如何在以下示例中处理与Uber相关的评论的:
同样的,请看下面这条博文:
Flat rate was the best thing that happened this year. @uberbring it back!!!! #MakeUberGreatAgain
— A Boogie (@Finessenomics) March 3, 2017
在以上两种情况下, 即使这些消息中未提及Price一词 ,该算法也将这些消息分类为与Price相关的上下文。
优步是全球市值最高的初创企业,一直是共享经济的先驱。Uber在全球500多个城市开展业务,并为庞大的用户群提供服务,因此得到了用户的大量反馈,建议和投诉。通常,社交媒体是记录此类问题的首选。大量的输入数据使分析,分类和产生结论性见解成为一项具有挑战性的任务。
我们分析了数字媒体上有关几个产品主题的在线评论: 取消,付款,价格,安全和服务。
为了广泛覆盖数据源,我们从Uber官方Facebook页面上的最新评论中收集了数据,这些推文中提到了Uber和有关Uber的最新新闻。以下是所有渠道上的数据点分布:
分析用户评论的情绪可以使您对整体品牌的认知有一个了解。但是,要进行更深入的研究,借助上下文语义搜索对数据进行进一步分类是很重要的。
我们在同一个数据集上运行了上下文语义搜索算法,并考虑了上述的类别(取消,付款,价格,安全性和服务)。
情绪分析
值得注意的是,只有Price相关的正面评论数量超过负面评论 ,与其他所有类别相关的评论主要是负面情绪。为了深入研究,我们分析了这些评论的意图。Facebook是一个社交平台,评论充斥着随机内容,新闻分享,营销和促销内容以及垃圾邮件/无关内容。我们来看一下Facebook评论上的意图分析:
因此,我们删除了所有这些不相关的意图类别,并重新生成了结果:
每个类别的情感都有明显的变化。特别是在Price相关评论中,正面评论的数量从46%下降到了29%。
这使我们了解了CSS如何从数字媒体中产生深入的见解。因此,一个品牌可以分析这样的推文并从它们的积极点上或者从消极方面获得产品或业务的反馈。
情绪分析
对获得的推文也进行了类似的分析。 在最初的分析中, 与Payment和 Safety相关的推文情绪比较复杂。
要了解真实的用户意见,投诉和建议,我们必须再次过滤不相关的Tweets(垃圾邮件,垃圾邮件,市场营销,新闻和随机信息):
与 Payment 相关的正面推文数量显着减少 。此外, Safety 类别(以及相关关键字)的正面推文数量也大幅下降 。
此外,Cancel,Payment和Service(以及相关词)是Twitter评论中谈论最多的话题。似乎人们谈论最多的是司机取消乘车以及向他们收取的取消费。看看这个推文:
I still haven’t heard from you about you charging me a cancellation fee for the driver cancelling my ride!
— Anagh Padmanabhan (@anagh) March 2, 2017
像Uber这样的品牌可以依靠这种分析方法,并根据最关键的话题采取行动。例如, 与 Service 相关的推文所载的正向推文所占的百分比最低,而负向的推文所占的百分比最高。因此,Uber可以分析此类推文并对其采取行动以提高服务质量。
可以理解,安全一直是新闻中谈论最多的话题。有趣的是,在每个类别中,新闻情绪总体上都是正面的,个体上都是积极的。
我们也根据新闻的受欢迎程度对新闻进行分类。受欢迎程度的得分归因于该文章在不同社交媒体渠道上的占有率。以下是最热门的新闻列表:
随着技术的进步,从社交媒体数据中获取有意义的反馈的时代已经到来。Uber案例研究让我们了解了上下文语义搜索算法的功能。现在该是您的组织超越总体情绪和基于计数的指标的时候了。许多公司一直在利用数据去获取一些业务信息,但是想要获得最深入的信息,您必须利用AI,深度学习和智能分类器(如上下文语义搜索和情感分析)的力量。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
最近我发现一个绝招,用DeepSeek AI处理Excel数据简直太爽了!处理速度嘎嘎快! 平常一整天的表格处理工作,现在只要三步就能搞 ...
2025-04-01你是否被统计学复杂的理论和晦涩的公式劝退过?别担心,“山有木兮:统计学极简入门(Python)” 将为你一一化解这些难题。课程 ...
2025-03-31在电商、零售、甚至内容付费业务中,你真的了解你的客户吗? 有些客户下了一两次单就消失了,有些人每个月都回购,有些人曾经是 ...
2025-03-31在数字化浪潮中,数据驱动决策已成为企业发展的核心竞争力,数据分析人才的需求持续飙升。世界经济论坛发布的《未来就业报告》, ...
2025-03-28你有没有遇到过这样的情况?流量进来了,转化率却不高,辛辛苦苦拉来的用户,最后大部分都悄无声息地离开了,这时候漏斗分析就非 ...
2025-03-27TensorFlow Datasets(TFDS)是一个用于下载、管理和预处理机器学习数据集的库。它提供了易于使用的API,允许用户从现有集合中 ...
2025-03-26"不谋全局者,不足谋一域。"在数据驱动的商业时代,战略级数据分析能力已成为职场核心竞争力。《CDA二级教材:商业策略数据分析 ...
2025-03-26当你在某宝刷到【猜你喜欢】时,当抖音精准推来你的梦中情猫时,当美团外卖弹窗刚好是你想吃的火锅店…… 恭喜你,你正在被用户 ...
2025-03-26当面试官问起随机森林时,他到底在考察什么? ""请解释随机森林的原理""——这是数据分析岗位面试中的经典问题。但你可能不知道 ...
2025-03-25在数字化浪潮席卷的当下,数据俨然成为企业的命脉,贯穿于业务运作的各个环节。从线上到线下,从平台的交易数据,到门店的运营 ...
2025-03-25在互联网和移动应用领域,DAU(日活跃用户数)是一个耳熟能详的指标。无论是产品经理、运营,还是数据分析师,DAU都是衡量产品 ...
2025-03-24ABtest做的好,产品优化效果差不了!可见ABtest在评估优化策略的效果方面地位还是很高的,那么如何在业务中应用ABtest? 结合企业 ...
2025-03-21在企业数据分析中,指标体系是至关重要的工具。不仅帮助企业统一数据标准、提升数据质量,还能为业务决策提供有力支持。本文将围 ...
2025-03-20解锁数据分析师高薪密码,CDA 脱产就业班助你逆袭! 在数字化浪潮中,数据驱动决策已成为企业发展的核心竞争力,数据分析人才的 ...
2025-03-19在 MySQL 数据库中,查询一张表但是不包含某个字段可以通过以下两种方法实现:使用 SELECT 子句以明确指定想要的字段,或者使 ...
2025-03-17在当今数字化时代,数据成为企业发展的关键驱动力,而用户画像作为数据分析的重要成果,改变了企业理解用户、开展业务的方式。无 ...
2025-03-172025年是智能体(AI Agent)的元年,大模型和智能体的发展比较迅猛。感觉年初的deepseek刚火没多久,这几天Manus又成为媒体头条 ...
2025-03-14以下的文章内容来源于柯家媛老师的专栏,如果您想阅读专栏《小白必备的数据思维课》,点击下方链接 https://edu.cda.cn/goods/sh ...
2025-03-13以下的文章内容来源于刘静老师的专栏,如果您想阅读专栏《10大业务分析模型突破业务瓶颈》,点击下方链接 https://edu.cda.cn/go ...
2025-03-12以下的文章内容来源于柯家媛老师的专栏,如果您想阅读专栏《小白必备的数据思维课》,点击下方链接 https://edu.cda.cn/goods/sh ...
2025-03-11