跳转至内容
  • 版块
  • 最新
  • 标签
  • 热门
  • 世界
  • 用户
  • 群组
折叠
AI订阅指南

AI订阅指南

秋

秋水吹风

@秋水吹风
取消关注 关注
关于
评论
3
主题
1
分享
0
群组
0
粉丝
0
关注
0

评论

最新 最佳 有争议的

  • 推理模型不会优雅退化——它们会突然崩溃
    秋 秋水吹风

    来源:r/MachineLearning

    社区热议精选评论:

    1. 这完全符合我的使用体验,R1 在不会做的题上会生成几千 token 的废话,然后给出错误答案。 —— rlh_observer

    2. 这其实是一个对齐问题,模型被训练成“必须给出答案”,所以宁可胡说也不愿说不知道。 —— alignment_nerd

    3. 突然崩溃比逐渐退化更危险,因为你很难提前预判它什么时候会失效。 —— safety_researcher

    4. 最新研究把这种现象叫 coverage shrinkage,pass@1 提升的同时 pass@k 反而下降,模型失去了推理多样性。 —— coverage_shrinkage

    5. 问题根源在训练数据的“分叉点”,模型在遇到多条有效推理路径时被迫commit到一条,抑制了其他路径。 —— fork_in_the_road


    本文为海外技术社区热点采集,更多 AI 资讯请关注 AI 订阅指南。

    每日热门
  • 登录

  • 没有帐号? 注册

  • 登录或注册以进行搜索。
Powered by NodeBB Contributors
  • 第一个帖子
    最后一个帖子
0
  • 版块
  • 最新
  • 标签
  • 热门
  • 世界
  • 用户
  • 群组