微软推出 Agent Lightning:全新 AI 框架助力强化学习训练大规模语言模型
微软近日发布了 Agent Lightning,这是一个开源框架,旨在通过强化学习(RL)优化多代理系统。Agent Lightnin微软g 可以在不改变现有代理架构的情况下,将真实代理行为转化为 RL 过渡,从而提升策略大规模语言模型(LLM)的性能。
Agent Ligh推出tning 将代理建模为一个决策过程,具体来说,它将代理形式化为部分可观测的马尔可夫决策过程。代理的观察为当前输入,行动为模型调用,而奖励 A则可以是终极奖励或中间奖励。该框架提取代理模型的调用记录,以及输入、输出和奖励信息,从而过滤掉多余的噪声,生成用于训练的干净过渡数ge据。
该框架采用 “训练代理解耦” 的方法,由 Lightning Server 进行训练和服务,并提供与 OpenAI 兼容的 API 接口,便于更新后的模nt型调用。而 Lightning Client 则在现有的代理运行时捕获调用记录,并将数据实时传回服务器。这一设计保持了工具、浏览器和其 L他依赖关系的紧密集成,同时将 GPU 训练放在服务器层。
Agent Lightning 支持两种追踪路径。默认路径使用 OpenTelemetrigy 进行数据收集,方便将代理的遥测信息传送至标准收集器。还有一种轻量级的嵌入式追踪器,适合不想部署 OpenTelemetry 的团队。最终,所ht有数据都存储在同一位置以供训练使用。
在实验方面,研究团队评估了三项任务,分别是文本转 SQL、检索增强生成和数学问答。文本转 SQL 使用 Snipider 基准,涵盖超过10,000个问题和200个数据库。检索增强生成利用 MuSiQue 基准,建立在包含2100万文档的维基百ng科规模索引上。而数学问答则使用 Calc X 数据集,通过工具调用进行计算。每项任务的训练均显示出稳定的奖励提升。
论文:https://arx:全iv.org/abs/2508.03680v1
划重点:
Agent Lightning 是一个开源框架,支持在不重新 构现有系统的情况下优化多代理系统。
该框架将代理建模为部分可观测的马尔可夫决策过程,提取干净的训练过渡数据。AI
实验显示,Agent Lightning 在文本转 SQL、检索增强生成和数学问答任务上均取得了显著的性能提升 框。
- ·Prime Intellect 推出开放平台“环境中心”,对抗AI强化学习领域的封闭趋势
- ·云计算开发:Python内置函数-__import__()函数详解
- ·生数科技完成新一轮数亿元规模A轮融资
- ·MIT给激光雕刻机安上AI,自动辨别材料确定雕刻力度,准确率达98%
- ·标签: 宝马集团 MINI 劳斯莱斯 纯电动汽车
- ·OpenAI 重组助推微软市值突破 4 万亿美元
- ·环球音乐转向合作:与 Udio、Stability AI 携手重塑 AI 音乐格
- ·实测阿里版ChatGPT“通义千问” 写《流浪地球3》电影剧本
- ·标签: 鹅票票 腾讯音乐 猫眼 大麦
- ·标签: 百济神州 百悦泽 百泽安 安泰适
- ·标签: 高德车服
- ·标签: 微软 Mustafa Suleyman AI 超级智能
- ·标签: 元戎启行 DeepSeek 阮翀 自动驾驶
- ·美国FTC启动对Meta、OpenAI等AI聊天机器人调查,聚焦青少年安全
- ·iOS26.1Beta3暗示“苹果智能”将集成谷歌Gemini等更多第三方AI模型
- ·从数字人直播到实时推荐,Akamai李文涛解构AI大促背后的算力密码
- ·鑱婂ぉAI閬囧埌涓嶆噦鐨勫彲浠ヤ笂缃戞悳绱�紝缃戝弸锛氬儚鏋佷簡缇よ亰鏃跺伔鍋风櫨搴︾殑鎴�
- ·AutoAI:同步 ModelOps 和 DevOps,推动数字化转型
- ·低代码与无代码:异同点与用例
- ·标签: 腾易科技 本地生态联盟 汽车营销 数据孤岛
- ·沃尔玛宣布与OpenAI达成合作,用户可直接在ChatGPT中购买沃尔玛商品
- ·标签: 影视飓风 无尽冬日 Tim 留几手
- ·云计算核心技术Docker教程:在docker-compose中使用卷
- ·标签: SK海力士 HBM DDR5 NAND闪存
- ·标签: 瑞芯微 RK182X RK3572 智能应用处理器芯片
- ·首次超越自回归模型!蚂蚁集团开源业内首个高性能扩散语言模型推理框架dInfer
- ·https://www.le-trend.com/en/search/=百度蜘蛛池租用【tg:seogoogle987】,7Wl
- ·https://www.wilsonart.com/catalogsearch/result/?action=CHECK&q=百度蜘蛛池租用【tg:seogoogle987】,Rya
- ·https://www.mi.com/search?keyword=百度蜘蛛池租用【tg:seogoogle987】,xpq
- ·https://www.navylookout.com/?ID=nSBR6Ivdu6lZg1yr2SDs30Lo5sTs76yJ&s=百度蜘蛛池租用【tg:seogoogle987】,jkC
- ·https://www.resilienz-akademie.com/?cat=71&s=百度蜘蛛池租用【tg:seogoogle987】,aRV
- ·https://www.wmfe.org/?s=百度蜘蛛池租用【tg:seogoogle987】,NzC
- ·https://www.spicebar.de/catalogsearch/result/?q=百度蜘蛛池租用【tg:seogoogle987】,1jV
- ·https://www.sportbiketracktime.com/index.php?route=product/search&tag=百度蜘蛛池租用【tg:seogoogle987】,0uy
- ·https://www.sonepar.ch/fr/search?q=百度蜘蛛池租用【tg:seogoogle987】,qha
- ·https://www.resopal.de/catalogsearch/result/?action=SEARCH&q=百度蜘蛛池租用【tg:seogoogle987】,pW6
