跳到正文

内容形态

论文研究 最新动态

值得读的 AI 论文与研究成果:架构创新、训练方法、能力测量与理论进展的精选解读。

2 条精选近 30 天 1 条共收录 2 条

更新

论文研究的精选

10月16日周五第 1–2 条
  1. 机器之心

    苹果与CMU提出SSR框架:把Agent推理从逐token生成改为做选择题

    苹果与卡内基梅隆大学研究团队提出SSR(Selection-based Structured Reasoning)框架,重新设计智能体工作流中的推理环节。ReAct范式下模型每执行动作前需生成自由形式推理,带来推理开销;SSR改为让模型从一组预定义推理选项中选择,而非逐token生成推理。来源称该方式可使Agent推理快约10倍。

    为什么值得看:企业若部署Agent类应用,推理环节的延迟与算力成本是实际支出项。该框架提供了一种降低单步推理开销的思路,值得在评估Agent架构与成本优化时关注。但需注意其效果基于论文实验,预定义选项的构建与场景泛化能力尚不明确,落地前应结合自有任务验证。

7月29日周三
  1. Berkeley AI Research

    伯克利研究:K-Search 将 CUDA 内核经验迁移到 Apple Silicon,prefill 最高提速约 20 倍

    伯克利 AI 研究团队在 K-Search 进化式内核搜索框架上扩展了 MLX 后端,并开发结构化 CUDA-to-MLX 翻译层,使已有 CUDA 内核可作为知识库被自动适配为 Apple Silicon 上的高质量 GPU 内核,而非逐指令复制。研究团队披露,该方法在 Apple Silicon 上达到接近专家水平,相对原生 MLX Attention 内核为 0.97x,prefill 最高约 20x 加速。

    为什么值得看:企业负责人可关注其降低跨硬件内核迁移与重复调优成本的潜力,尤其是在 Apple Silicon 上部署 AI 推理时。但需注意性能为研究团队披露、尚未独立复现,且 0.97x 说明并非全面超越原生内核,生产可用性与部署范围仍待核实。