Amazon SageMaker AI 多轮强化学习实操指南:用 Wordle 训练 gpt-oss-20b
AWS 发布 SageMaker AI 多轮强化学习(MTRL)实操指南,以 Wordle 为例演示从部署 AgentCore 智能体、准备数据集、训练到 MLflow 监控与评测的完整流程。
AWS 发布 SageMaker AI 多轮强化学习(MTRL)实操指南,以 Wordle 为例演示从部署 AgentCore 智能体、准备数据集、训练到 MLflow 监控与评测的完整流程。
Amazon Quick Sight 图层地图新增支持 GeoJSON 的 Point 和 LineString 两种几何类型,可在地图上标出具体地点并绘制地点之间的路线。
Hugging Face 与宾夕法尼亚大学合作开发了 LitPivot,一个围绕研究提案中被编辑部分组织文献、给出带原文摘录的批评与修改建议的系统。在 17 名研究者的实验室研究中,领域专家认为用 LitPivot 打磨的研究想法比用文本编辑器加 AI 聊天工具的想法更有文献依据,参与者自评新颖性与实用性提升更多。该系统面向早期研究构思,将在 UIST 2026 展示。
微软与 Hugging Face 联合发布 ThinkingBox-Training,把 ThinkingBox 对数据库终态的 0/1 可执行校验当作 RL 奖励,对 Qwen3.8-27B 做 50 步 GRPO 全参数微调。
推荐理由:微软与 Hugging Face 把数据库终态校验改造成 RL 奖励,并公开了任务筛选与训练栈,可看可复用的训练数据策展方法。
Amazon SageMaker AI 的 serverless 模型自定义训练会话正式可用,用户可自行编写训练循环、损失函数和奖励信号,GPU 分配、分布式执行、故障恢复与 checkpoint 存储由平台负责。
AWS 发布 Amazon SageMaker AI 训练会话 API,把 forward_backward、optim_step、sample 等操作变成 API 调用,模型在托管 GPU 上保持加载,用户只需在本地 Python 中编写训练循环。
Google DeepMind 与 Google Research 联合 WRI、IIASA 发布 Forest Typology(ForTy)2020,把全球每一块 10×10 米土地归入六类森林与土地利用类型,作为欧盟无毁林法规的关键基线。
IBM 在 Hugging Face 发布 Granite Timeseries Ensemble,用一套配方组合 PatchTST-FM-r1、PatchTST-FM-r2、FlowState-r1.1 和 TTM-r3 四个预训练 Granite 时序模型,无需重训即可输出中位数与分位数预测。
Revolut 正基于 NVIDIA 加速计算以单一基础模型 PRAGMA 重建技术栈,初期服务 8000 万客户并设计支持 3 倍扩展。Starling Bank 在 Civo 英国云上用自有交易数据训练出智能层 Starling Intelligence,Lloyds 则用 RTX PRO 6000 Blackwell GPU 构建交易基础模型 ATUM。
NVIDIA 扩展 Cosmos 平台,新增训练工具、仿真 checkpoint 和 Cosmos Data Factory 蓝图,用于世界模型的训练、评估与部署。
推荐理由:原文列出 Cosmos 平台新增的训练、仿真与数据蓝图,并给出 Porsche、ANYbotics 等落地案例,可据此判断世界模型开发链路的变化。
NVIDIA 发布预训练关系型基础模型 Kumo Relational,可直接在企业数据库上做预测,无需任务特定训练、特征工程或表展平。
推荐理由:原文给出预训练关系型基础模型在 41 项任务上的对比结果与开源入口,可据此判断免训练预测在现有数据库流程中的位置。
Dharma-AI 在 Hugging Face 博客中预告了即将发布的 VocabX 论文,介绍其按 token 成本而非出现频次重建领域模型词表的方法。
Mistral 与 NVIDIA 宣布合作开发 AI 原生工程工作流,把 Mistral Large 4 与 Mistral 的数据生成、物理建模流程结合 NVIDIA CUDA-X 库和 Warp 加速,用于加快工程仿真并打通仿真、模型开发与设计之间的闭环。
Google Research 发布博客,介绍让 AI 智能体从计算设计走向真实湿实验室实验的三项研究:VERID 实验室语义数字孪生框架、适配体闭环设计原型和 FAP 靶点 de novo 蛋白结合体设计。
推荐理由:Google Research 用三个项目展示智能体如何接入湿实验室的物理状态与闭环实验反馈,读者可了解自动化实验的关键工程环节。
Google DeepMind 展示了生物学家如何用 Google Antigravity 的智能体科学工作台,在一次多轮会话中完成抗菌肽候选的发现、结构评估与优先级排序,把原本分散在多个数据库的检索压缩到单一会话。
Mistral 发布首个时间序列基础模型系列 Timestral,提供 5M、28M、123M 和 209M 四个尺寸。其中 209M 版本在 GIFT-Eval、TIME 和 fev-bench 三项公开基准上均排名第一,参数量约为此前最优模型的三分之二,结果已提交至 GIFT-Eval 和 TIME 榜单。
推荐理由:原文给出四个尺寸的参数量、三项基准排名和 CPU 推理延迟,便于判断时间序列基础模型的选型边界。
Google Research 在 Mountain View 的 Research@ 活动上展示了 10 项研究成果,包括扩大 Google Earth AI 早期访问并开放地理空间推理智能体技能 API。Deep Review 智能体系统已用于审阅逾 16,000 篇投稿论文,现向公众开放。TimesFM 与 TabFM 两款数值基础模型将集成进 Gemini for business。
GitHub 用微调后的 ModernBERT 分类器替换原有 LLM 密钥扫描流程,在推送后扫描中把中位执行时间降低 86%、服务成本降低 98%,告警接受率提升 11.5%。该两阶段流程先用正则生成候选,再由模型结合文件路径、变量名和上下文判断是否为真实凭据,并已把通用密钥检测扩展到推送保护。
微软研究院提出 StudentSim,从公开的去标识化学习记录训练个性化 AI 学生模拟器,用于在接触真实学生前评估和改进 AI 辅导系统。该研究同时发布覆盖国际象棋、英语二语写作和数学的 StudentSimEval 基准,从行为保真度和对辅导引导的响应度两个维度评测模拟器,StudentSim 在这三个领域均优于主流基线。
微软研究院开源 Agent Lightning v1.0,这是一个约 3500 行代码的轻量智能体强化学习框架,提出 Harnessed Agentic RL 范式,让部署时使用的智能体 harness 直接参与训练,无需在训练框架内重新实现智能体。
推荐理由:微软研究院开源了约 3500 行的智能体强化学习框架,并给出用约 6000 条样本训练编码智能体的完整流程与提升数据。
Google Research 以 Google Earth AI 的 Population Dynamics Foundation Model(PDFM)为概念验证,展示无需任务微调的地点嵌入可直接接入现有流行病学模型。
微软研究院实习生 Rohan Kannan 构建了一套机器学习管线,利用 L1 拉格朗日点的太阳风观测和 AE、Dst 指数预报,结合各变电站纬度与地质电导率,为美国本土 66,935 座变电站生成提前 30 至 60 分钟的位置级地磁感应电流风险估计。
伯克利 AI 研究团队提出 ABBEL 框架,将摘要隔离为自然语言"信念状态"并对其内容进行监督评分。在协作编码基准 CollabBench 上,基于重建的信念评分将 ABBEL 与全上下文模型的性能差距缩小约 50%,训练步数从 100 步降至 50 步,峰值上下文 token 数也显著低于全上下文设置。
UC Berkeley 的 Aditya G. Parameswaran 等人提出,推理成本已从 GPT-4 级约 $30/百万 token 降至不足 $1,部分厂商低于 $0.10,中位年降幅约 50x,数据系统需围绕智能体重构。
Berkeley AI Research 提出 GRASP,一种面向学习型世界模型的梯度规划器,通过将轨迹提升到虚拟状态实现跨时间并行优化、在状态迭代中注入随机性以探索,并重塑梯度让动作获得清晰信号。该方法针对长时程规划中梯度爆炸/消失、非贪心结构导致局部极小值以及高维视觉模型“状态-输入”梯度脆弱等问题。
Berkeley AI Research 提出一种直接以互信息评估和优化成像系统的框架,仅用带噪测量和噪声模型即可量化测量对物体的区分能力。该信息指标在彩色摄影、射电天文、无透镜成像和显微镜四个领域预测了解码器性能,优化后的设计达到与端到端方法相当的 SOTA 水平,同时所需内存和算力更少,且无需任务专用解码器设计。