前向传播之-损失函数
损失函数：在前面一节咱们介绍了得分函数，就是给定一个输入，对于所有类别都要给出这个输入属于该类别的一个分值，如上图所示，对于每一个输入咱们都有了它属于三个类别的得分，但是咱们光有这个得分却不知道如何来评判现在的一个分类效果，这节课咱们就要用损失函数来评估分类效果的好坏，而且不光是好坏还要表现出来有多好有多坏！
我们接下来就拿SVM的损失函数来说事吧。什么？你不知道SVM是啥？没关系，我会用很简单的语言来说这个损失函数的。对于SVM来说它的损失函数如上图的公式所示，我们要算的就是对于一个输入样本，这个样本的正确分类的分值和其他所有错误分类的分值的差值，再把这些所有的差值进行求和。我们拿这个小猫来举例吧，就是用它正确分类的分3.2与其它错误分类的得分5.1和-1.7求差值，再把求得的差值和0进行对比，如果大于0就加在最终的LOSS值上。细心的同学可能发现了上面的公式还加了一个数值1，那么这个数值代表着什么呢？它的意思啊就是说咱们求出的得分差异值还要去和咱们的满意程度进行比较，这个1就代表了咱们的满意程度有多大，这个值越大呢就说明咱们的要求越高。
图中红色的区域就是咱们的满意程度，一旦错误分类的得分（绿色区域）超过了红色值，就是说没达到咱们设定的满意程度值，LOSS值就要开始增加了。
正则化：假设有一个样本x=[1,1,1,1]，现在咱们有两组权重参数W1和W2如上图所示，这样对于得分值WX，两组权重参数得出的结果都一样，但是分值一样能说明这两个参数模型的分类效果一模一样吗？接下来就引入了咱们的正则化项来解决这个问题，正则化就是对权重参数进行惩罚，目的就是找到一组更平滑的参数项。正则化项的结果就是对于不同权重参数W进行不同力度的惩罚，惩罚也就是增加其LOSS值。正则化对于整个分类模型来说非常重要，可以很有效的抑制了过拟合现象。
LOSS终极版：由LOSS最终版的公式可以看到。LOSS是由两部分组成的，一部分是得分函数对应的LOSS值另一个部分是正则化惩罚项的LOSS值。
数据分析咨询请扫描二维码
若不方便扫码，搜微信号：CDAshujufenxi
关于数据分析师是否会成为失业高危职业，近年来的讨论层出不穷。在这个快速变化的时代，技术进步让人既兴奋又不安。今天，我们从 ...
2024-12-30数据分析师在现代企业中扮演着关键角色，他们的工作内容不仅丰富多样，还对企业的决策和发展起着重要的作用。正如一个经验丰富的 ...
2024-12-29数据分析师的能力要求 在当今的数据主导时代，数据分析师的角色变得尤为重要。他们不仅需要具备深厚的技术背景，还需要拥有业务 ...
2024-12-29随着技术的飞速发展与行业的持续变革，不少人心中都存有疑问：到了 2025 年，数据分析师还有前途吗？给你分享一篇阿里P8大佬最近 ...
2024-12-29如何构建数据分析整体框架？ 要让数据分析发挥其最大效能，建立一个清晰、完善的整体框架至关重要。今天，就让我们一同深入探讨 ...
2024-12-27AI来了，数分人也可以很省力，今天给大家介绍7个AI+数据分析工具，建议收藏。 01酷表 EXCEL 网址：https://chatexcel.com/ 这是 ...
2024-12-26一个好的数据分析模型不仅能使分析具备条理性和逻辑性，而且还更具备结构化和体系化，并保证分析结果的有效性和准确性。好的数据 ...
2024-12-26当下，AI 的发展堪称狂飙猛进。从 ChatGPT 横空出世到各种大语言模型（LLM）接连上线，似乎每个人的朋友圈都在讨论 AI 会不会“ ...
2024-12-26数据分析师这个职业已经成为了职场中的“香饽饽”，无论是互联网公司还是传统行业，都离不开数据支持。想成为一名优秀的数据分析 ...
2024-12-26在数据驱动决策成为商业常态的今天，数据分析师这一职业正迎来前所未有的机遇与挑战。很多希望转行或初入职场的人士不禁询问：数 ...
2024-12-25数据分析师，这一近年来炙手可热的职业，吸引了大量求职者的注意。凭借在大数据时代中的关键作用，数据分析师不仅需要具备处理数 ...
2024-12-25在当今数字化变革的浪潮中，数据分析师这一职业正迎来前所未有的发展机遇。回想我自己初入数据分析行业时，那种既兴奋又略显谨慎 ...
2024-12-25在当今信息爆炸的时代，数据已经像空气一样无处不在，而数据分析则是解锁这些信息宝藏的钥匙。数据分析的过程就像是一次探险，从 ...
2024-12-25在职场上，拍脑袋做决策的时代早已过去。数据分析正在成为每个职场人的核心竞争力，不仅能帮你找到问题，还能提供解决方案，提升 ...
2024-12-24Excel是数据分析的重要工具，强大的内置功能使其成为许多分析师的首选。在日常工作中，启用Excel的数据分析工具库能够显著提升数 ...
2024-12-23在当今信息爆炸的时代，数据分析师如同一位现代社会的侦探，肩负着从海量数据中提炼出有价值信息的重任。在这个过程中，掌握一系 ...
2024-12-23在现代的职场中，制作吸引人的PPT已经成为展示信息的重要手段，而其中数据对比的有效呈现尤为关键。为了让数据在幻灯片上不仅准 ...
2024-12-23在信息泛滥的现代社会，数据分析师已成为企业决策过程中不可或缺的角色。他们的任务是从海量数据中提取有价值的洞察，帮助组织制 ...
2024-12-23在数据驱动时代，数据分析已成为各行各业的必需技能。无论是提升个人能力还是推动职业发展，选择一条适合自己的学习路线至关重要 ...
2024-12-23在准备数据分析师面试时，掌握高频考题及其解答是应对面试的关键。为了帮助大家轻松上岸，以下是10个高频考题及其详细解析，外加 ...
2024-12-20
