AI OBSERVER

人工智能资讯

116 篇已发布资讯 / 最新资讯 2026.10.27

全部资讯

116 篇
学术研究10月2日

扩散模型中置信度的局限

离散扩散模型,包括重新掩码和均匀状态采样器,通过在每个步骤中写入多个 token 位置来生成序列:各位置的值来自其自身的分布,待写入的位置也由这些分布决定。在常见的应用领域,如像素、音素或词语,token 之间存在固有依赖。我们证明,只有在给定已固定的 token 后,本步骤写入的位置之间条件独立时,该步骤才与训练分布一致;逐位置分布的乘积无法匹配存在依赖的组;并且……

Apple Machine Learning Research
学术研究10月2日

语言区分能力改善多语言语音模型的语言学习

多语言自监督语音模型能够受益于跨语言的信息共享,但在预训练数据总预算相同的情况下,其表现仍落后于单语言模型。我们表明,在预训练中增强模型区分语言的能力,能够在连续的语音和更高层次的语言指标上缩小这一差距,部分指标上甚至可以消除差距,同时保留大量跨语言共享。在受控的英语/法语 HuBERT 设置中,我们测试了两种增强语言区分能力的干预方法:一种辅助语言……

Apple Machine Learning Research
学术研究10月1日

RLTL;DR:通过内化自身生成的反馈实现自我改进

具有可验证奖励的强化学习(RLVR)的常见范式,是让智能体多次尝试任务,并朝成功的尝试进行优化。但在自我改进场景中,这种范式会遇到问题:任务可能难到智能体成功机会很小甚至为零,同时也没有教师模型或示例解法可供蒸馏。本文提出 RLTL;DR。每次尝试失败后,我们向策略展示验证器输出,让它以一条简短的 TL;DR 洞见写出自己的反馈。下一次运行则以……为条件。

Apple Machine Learning Research
学术研究10月1日

强智能体进行自主机器学习工程,需要多少辅助框架?

近期,自主机器学习工程(MLE)智能体在公开排行榜上取得了显著进展。由于长期运行周期中的进展停滞,以及大语言模型(LLM)基础操作能力受限,现代 MLE 智能体往往运行在越来越复杂的辅助机制之上,包括多智能体编排器、专用检索子智能体等。但在这些框架不断扩大的同时,使用更基础但能力更强的编程智能体——让 LLM 通过读、写和 bash 等基础操作直接访问执行环境——在这一领域受到的关注较少……

Apple Machine Learning Research