中山大学联合美团打造X-SAM模型,单次操作可分割多个对象,20项测试全面领先
中山大学、鹏城实验室与美团三方联合研发的X-SAM图像分割模型近期正式发布,这款多模态大模型在图像分割领域实现了重要突破,将传中山统的"分割万物"能力升级为"任意分割",显著提升了模型的适应性和应用范围。
传统的Segment Anything Model(SAM)大学虽然在生成密集分割掩码方面表现出色,但其只能接受单一视觉提示输入的设计局限性明显。针对这一技术瓶颈,研究团队创新性地提出了视觉定位分联合割(Visual Grounded Segmentation, VGS)任务框架,通过交互式视觉提示实现对所有实例对象的精确分割,为多美团模态大语言模型提供了像素级的理解能力。
X-SAM的技术架构采用了多项创新设计。模型支持统一的输入格式和输出表示,能够处理多种类型的视觉打造和文本查询输入。其核心的双编码器架构确保了对图像内容和分割特征的深度理解,而分割连接器则提供多尺度信息融合,大幅提升分割精度。
最X-值得关注的是,X-SAM集成了最新的Mask2Former架构作为分割解码器,这使得模型能够在单次操作中同时分割多个目标对象,彻底突SA破了传统SAM只能处理单一对象的技术限制。这一改进不仅提高了处理效率,也为复杂场景下的批量分割任务提供了可能。
在模型训练方面,研究团队采M模用了三阶段渐进式训练策略,通过逐步增强的学习过程确保模型性能的稳定提升。经过在20多个主流分割数据集上的全面测试,X-SAM在对型,话生成分割任务和图文理解任务中均取得了领先的性能表现,验证了其技术方案的有效性。
X-SAM的发布为图像分割技术发展指明了新方向,也单次为构建更加智能的通用视觉理解系统提供了重要的技术基础。研究团队表示,下一步将重点探索该技术在视频领域的应用拓展,推动图像与视频分割技操作术的统一化发展,进一步提升机器视觉理解能力的边界。
这项研究成果不仅在学术层面具有重要意义,其在自动驾驶、医疗影像、工业检测等实际应用场可分景中的潜力也值得期待。随着模型开源和技术推广,预计将推动整个计算机视觉领域的快速发展。
论文地址:https://arxiv.org割多/pdf/2508.04655
代码地址:https://github.com/wanghao9610/X-SAM
Demo地址: htt个对ps://47.115.200.157:7861
-
直击 Mac 桌面!OpenAI 收购 Sky 团队,ChatGPT 即将深度嵌入 macOS 工作流超过 70% 美国民众对 AI 的未来忧虑:就业与人际关系面临挑战标签: 寒武纪 AI芯片 人工智能 算力标签: 银河通用 Galbot S1 银河星脑 具身智能贝索斯再抛售17亿美元亚马逊股票:本月累计变现约67亿美元谷歌开盘涨超4% 一季度营收、净利润超预期阿里云李飞飞:政企市场是检验云数据库竞争力的黄金标准GPT-5 Pro找回被遗忘的数学答案:埃尔德什问题#339早在2003年已被证明云计算开发:Python练习实例-使用列表[:]标签: SENASIC琻捷 港股上市 车规芯片 PhysicalAI
- ·标签: 字节跳动 火山引擎 人形机器人 具身智能
- ·在云中应用自动化的5种方法
- ·OpenAI修复ChatGPT安全漏洞,用户数据曾面临泄露风险
- ·标签: 餐饮行业
- ·云计算走到十字路口,自动化将成为行业的新常态
- ·标签: IBM 克里希纳 AGI 数据中心
- ·豆包大模型1.6-vision正式发布,对比上一代综合成本降低约50%
- ·标签: 水滴公司 看病保 保小慧 ClawSquare
- ·标签: OpenClaw 比亚迪汽车 刀片电池 工信部
- ·腾讯云于中山成立新公司,经营范围含量子计算技术服务等
- ·标签: 汽车之家 奥迪E5 中央网信办 汽车互联网
- ·标签: 淘宝便利店 淘宝闪购 即时零售 闪电仓
- ·IDC:今年中国新能源汽车销量将达116万辆
- ·标签: 云英谷科技 OLED驱动芯片 AMOLED Micro-OLED
- ·文远知行获Grab数千万美元投资,东南亚将迎来数千辆无人驾驶出租车
- ·这年头,机器翻译都会通过文字脑补画面了
- ·标签: 北京现代 深蓝汽车 重庆工厂
- ·标签: 小米 REDMI K90ProMax Turbo5
- ·翻滚跳跃、集群飞行,MIT新一代类昆虫无人机还能承受人为撞击
- ·以人工智能助力网络安全的 Seemplicity 获得 5000 万美元融资
- ·云计算核心技术Docker教程:将Docker容器映像推送到Docker Hub
- ·重拳出击!滴滴首度公开安全AI模型,顺风车风险防控进入“人机协同”新阶段
- ·标签: Oura 智能戒指 健康穿戴 女性健康AI
- ·云计算开发:Python3集合内置Set clear()方法
- ·标签: 网信北京 清朗京华 北京市网信办 东北雨姐
- ·标签: 芯潮流 光电DSP芯片 高速SerDes 数据中心互连
- ·https://www.lneg.pt/?cat=140&s=谷歌快排操作流程【tg:seogoogle987】,q9c
- ·https://www.varian.com/en-au/search?cat=113&search=谷歌快排操作流程【tg:seogoogle987】,3I6
- ·https://www.remit.co.jp/en/?s=谷歌快排操作流程【tg:seogoogle987】,S7Q
- ·https://www.rotherham.gov.uk/site-search/results/?q=谷歌快排操作流程【tg:seogoogle987】,2Do
- ·https://www.tombow.com/en/search/谷歌快排操作流程【tg:seogoogle987】,lcd
- ·https://www.miamiopenmri.com/?action=CHECK&s=谷歌快排操作流程【tg:seogoogle987】,4RO
- ·https://www.losgatoschamber.com/list/search?action=SEARCH&q=谷歌快排操作流程【tg:seogoogle987】,V5U
- ·https://www.polliwogs.com/search/谷歌快排操作流程【tg:seogoogle987】,Z3K
- ·https://www.totolink.vn/search/谷歌快排操作流程【tg:seogoogle987】,HiY
- ·https://www.tarleton.edu/?s=谷歌快排操作流程【tg:seogoogle987】,tw5
