AI 学习笔记

分类、混淆矩阵与 Precision / Recall

可复习 · 待写自己的解释

我卡在哪里

还没有记录。看视频或读重点时哪里不懂,就把原话记到这里,并注明是哪段视频的几分几秒。

我用自己的话解释

  1. 模型的分数和“判为紧急”之间隔着什么?由谁决定?
  2. Precision 和 Recall 分别回答什么问题?
  3. 为什么准确率最高的门槛,不一定是产品上最好的门槛?
自动保存在当前浏览器,不跨设备同步。
写完再展开:参考解释
  1. 中间隔着一个门槛。门槛不是模型学出来的,是人根据误报和漏报的代价定的。
  2. Precision:标为紧急的投诉里,有多少真的紧急。Recall:真正紧急的投诉里,抓到了多少。
  3. 准确率把误报和漏报算成一样的错,但在这个场景里,漏掉一条紧急投诉的代价远比多看一条普通投诉高。门槛 0.25 准确率更低,却一条紧急投诉都不漏。

来源

  • 学习材料:StatQuest《Machine Learning Fundamentals: The Confusion Matrix》《Machine Learning Fundamentals: Sensitivity and Specificity》。
  • 10 条投诉和分数是人工设定的教学数值,与 AI Product Design Lab 仓库自学材料里的例子相同;各门槛下的结果有测试保证(lib/ml-basics.test.ts)。

On this page