信息发布→ 登录 注册 退出

可以采用哪些KPI来衡量人工智能项目的成功?

发布时间:2023-04-10

点击量:

调研机构IDC公司在2025年6月发布的一项研究报告表明,大约28%的人工智能计划遭遇失败。报告给出的理由是缺乏专业知识、缺乏相关数据以及缺乏足够集成的开发环境。为了建立一个持续改进机器学习的过程并避免陷入困境,确定关键绩效指标(KPI)现在是当务之急。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

而在行业上游,可以由数据科学家来定义模型的技术性能指标。它们将根据所使用的算法类型而有所不同。在旨在预测某人的身高作为其年龄函数的回归的情况下,例如,可以求助于线性确定系数。

可以采用一个衡量预测质量的方程:如果相关系数的平方为零,回归线确定0%的点分布。反之,如果该系数为100%,则该数字等于1。因此,这表明预测的质量非常好。

预测与现实的偏差

评估回归的另一个指标是最小二乘法,它指的是损失函数。它包括通过计算实际值与预测线之间偏差的平方和来量化误差,然后通过最小化平方误差来拟合模型。在相同的逻辑中,可以利用平均绝对误差方法,该方法包括计算偏差的基本值的平均值。

法国咨询机构凯捷公司负责战略、数据和人工智能服务的CharlottePierron-Perlès总结说:“无论如何,这相当于衡量与我们试图预测的差距。”

例如,在用于垃圾邮件检测的分类算法中,有必要查找误报和漏报的垃圾邮件。PierronPerlès解释说:“例如,我们为一家化妆品集团开发了一种机器学习解决方案,可以优化生产线的效率。目的是在生产线开始时识别可能导致生产中断的有缺陷的化妆品。我们在与工厂经营者讨论之后与他们一起寻求一个模型来完成检测,即使这意味着检测到误报,也就是说,合格的化妆品可能被误认为是有缺陷的。”

基于误报和漏报的概念,其他三个指标允许评估分类模型:

(1)召回率(R)是指模型敏感度的测量值。它是正确识别的真实阳性(以新冠病毒检测呈阳性为例)与所有应检测的真实阳性(冠状病毒检测呈阳性+冠状病毒检测呈阴性实际是阳性)的比例:R=真阳性/真阳性+假阴性。

(2)精度(P)是指准确度的度量。它是正确的真阳性(新冠病毒检测呈阳性)与所有确定为阳性的结果(新冠病毒检测呈阳性+新冠病毒检测呈阴性)的比例:P=真阳性/真阳性+假阳性。

(3)调和平均值(F-score)衡量模型给出正确预测和拒绝其他预测的能力:F=2×精度×召回率/精度+召回率

模型的推广

法国ESNKeyrus公司首席高级数据科学家DavidTsangHinSun强调说:“一旦构建成模型,其泛化能力将成为关键指标。”

那么如何估计它?通过测量预测和预期结果之间的差异,然后了解这种差异随时间的演变。他解释说,“在一段时间之后,我们可能会遇到分歧。这可能是由于数据集在质量和数量方面的训练不足而导致的学习不足(或过度拟合)。”

那么其解决方案是什么?例如,在图像识别模型的情况下,可以使用对抗性生成网络通过旋转或扭曲来增加图片学习的数量。另一种技术(适用于分类算法):合成少数过采样,它包括通过过采样增加数据集中低发生率示例的数量。

在过度学习的情况下也会出现分歧。在这种配置中,模型在训练后将不会局限于预期的相关性,但是由于过于专业化,它会捕获现场数据产生的噪声并产生不一致的结果。DavidTsangHinSun指出,“然后有必要检查训练数据集的质量,并可能调整变量的权重。”

而经济的关键绩效指标(KPI)依然存在。法国咨询机构AIBuilders公司首席执行官StéphaneRoder认为:“我们必须扪心自问,错误率是否与业务挑战相符。例如,保险商Lemonade公司开发了一种机器学习模块,可以在客户提出索赔后3分钟内根据所传达的信息(包括照片)向客户赔付保险金。考虑到节省的费用,一定的错误率会产生成本。在模型的整个生命周期中,特别是与总体拥有成本(TCO)相比,从开发到维护,检查这一测量值是非常重要。”

采用水平

即使在同一家公司内,预期的关键绩效指标(KPI)也可能有所不同。凯捷公司的CharlottePierronPerlès指出:“我们为一家具有国际地位的法国零售商开发了一个消费预测引擎。结果证明该模型的精确目标在百货商店销售的产品和新产品之间是不同的。后者的销售动态取决于因素,尤其是与市场反应相关的因素,从定义上来说,这些因素不太可控。”

最后一个关键绩效指标是采用水平。CharlottePierron-Perlès说:“即使一个模型质量很好,仅靠它自己是不够的。这需要开发具有面向用户体验的人工智能产品,既可用于业务,又可实现机器的承诺学习。”

StéphaneRoder总结说:“这个用户体验还将允许用户提供反馈,这将有助于在日常生产数据流之外提供人工智能知识。”​


相关文章: AI赋能金融安全,反欺风险模型技术创新,乔欣 ai换脸造梦  AI赋能教育,课本插画新模型下载,开启智能教学新时代,ai给文字加上渐变  AI与大数据驱动的股票市场交易模型,机遇与并存的未来,ai白描设计  打造专属虚拟萌友,AI可爱女孩模型下载与安装全攻略,ai海纹理  AI大模型参数数量计算揭秘,深度解析与实用技巧分享,ai养生馆  风险警示,揭秘文心一言观看非法内容之隐患,AI编程软件推荐手机  AI赋能,开启未来沟通新艺术,20款英文ai智能写作工具  绝悟AI,深度解析模型融合与植入新,线性故事ai  字节跳动AI豆包,开启全新智能生验之旅,猫上学ai  如何识别文章是否由AI写作:技巧与方法解析  AI时代浪潮下,大模型定制化崛起之路,AI 码字  AI大模型,引领产业变革的未来引擎,ai字体定义  谷歌推出性通才AI模型,开启智能时代新,ai中取消编组是干嘛的  文心一言Plus,智能创作新潮流的引领者,开启写作新时代,英ai  人工智能助力三维模型填色艺术,揭秘AI在建模中的应用创新,ai怎么画出炫酷路径  全I模型全览,国外热门深度解析,手写信ai  AI声音模型文件轻松解压攻略,实用技巧大揭秘,ai韵尾 成语  怎么用AI生成文章免费版,高效创作从此开始!  AI金融科技领航者,大模型专家预见未来金融智慧之光,AI黑体是什么意思  资源采集API:提升企业数据处理效率的终极利器  Chatwoot安卓版本下载,让客户支持更高效!  人工智能赋能内容创作,重塑产业格局的秘密,鲁路修 卡莲 ai  文心一言,引领电脑端智能写作新时代,ai3高压版  AI浪潮涌动,顶尖AI模型盘点与发展趋势解析,拉萨ai外呼系统业务  360排名优化价格:打造高效网络营销的制胜法宝,ai换脸刘浩存自wei  文心一言版下载,解码语言艺术传承之旅,大娘ai视频  AI模型部署实战攻略,全方位场景应用指南,ai人类婴儿  探索AI人物模型制作,引领虚拟创新之旅,167168169ai  文心新篇章,服务升级暨用户未来关怀发布,AI祝福  嵌入式AI,技术对比与多场景应用解析,ai对战ai的手机拳皇  全方位解读,AI模型在多领域的差异与运用,丝印AI8C  AI智慧精灵Genie,开启未来生活新篇章,ai中文字底色描边  美国域名后缀打造国际化品牌的关键一步  探索未来智能,AI自然进化模型的下载之旅,AI给视频加字幕  南瓜瓜与AI,艺术与科技的跨界融合之旅,拥抱你ai  AI大模型软件命名之谜,解码科技背后的奥秘,ai写作生活助手怎么用  SEO与SEM有什么相同与不同?深入解析搜索引擎优化与搜索引擎营销的区别与联系  颠覆创意的力量:AI官网生成器,轻松打造专业网站!  AI赋能,明星AI训练模型揭秘与未来趋势洞察,高达ai绘图  AI赋能PPT,视觉AI模型创新应用解析,ai里剪切图片缩放不了  文心一言,穿越时空的恋爱奇缘,测ai17  2025年整站SEO排名优化策略:让你的网站脱颖而出,id排版ai  AI算力竞赛背后的核心参数揭秘,全I模型算力大揭秘,茶ai  轻松解锁文心一言创作之旅,邀请码获取攻略大揭秘!,神龙ai绘画  探索文心一言,开水温度与钝角关联之谜,国外ai对话跟国内ai对话  文章创作AI:引领智能写作的新时代  自媒体洗稿神器:助你轻松提升内容生产效率!  AI写作的崛起-“只能AI写作”背后的巨大潜力,舞狮摄影ai  论文写作,文心一言过时后的与转型之路,如何用ai画古代的头冠  AI大模型开启行业合作新时代,共绘未来蓝图,朋友圈ai写作助手文案 

标签:# 人工智能  # perl  # 算法  # 法国  # 是指  # 它是  # 有所不同  # 情况下  # 有必要  # 垃圾邮件  # 开发了  # 平方和  # 这一  
在线客服
服务热线

服务热线

400 8905 500

微信咨询
二维码
返回顶部
×二维码

截屏,微信识别二维码

打开微信

微信号已复制,请打开微信添加咨询详情!