告别模糊!英伟达发布ViPE引擎 为空间AI提供高精度3D数据
近日,英伟达与多伦多大学、向量研究所及德克萨斯大学奥斯汀分校的研究团队联合发布了一项名为 **ViPE告别(视频姿势引擎)**的突破性技术。ViPE 旨在解决3D几何感知领域的关键挑战,即如何从复杂的自然视频模糊中高效且精准地提取3D信息。
技术核心与应用
3D几何感知是自动驾驶、虚拟现实(VR)和增强现实(AR)等多种现代!英技术的核心。ViPE 创新性地从原始视频中快速获取相机的固有特性、运动信息以及高精度的深度图,为这些空间AI伟达系统提供了可靠的数据基础。
ViPE 具有强大的适应性,能够处理各种场景和相机类型,包括动态自拍视频、电影镜头、行发布车记录仪以及针孔、广角和360°全景相机模型。
工作原理与性能
研究团队采用了一种多重约束的混合方法来确保 ViPViE 的高精度:
束调整:在关键帧上进行密集束调整,以估算相机参数、姿态和深度图。
密集流与稀疏点约束:引入 DRPEOID-SLAM 网络的密集流约束和 cuvslam 库的稀疏点约束,确保稳健性和亚像素精度。
深度正则化:利用单目引擎度量深度网络,解决尺度模糊性和一致性问题,生成高分辨率且时间一致的深度信息。
测试结果显示,ViPE 在多 为个基准测试中的表现均优于现有技术(如 MegaSAM、VGGT 和 MASt3R-SLAM)。它不仅在姿态和内在函数空间精度方面表现出色,还能在单个GPU上以每秒3到5帧的速度稳定运行,并成功生成了尺度一致的轨迹。
为推动空AI间AI领域的进一步研究,该团队还发布了一个包含约9600万帧标注数据的大规模数据集,为未来的技术探索提供了宝贵提供资源。ViPE的发布不仅标志着3D几何感知技术的一次重要进步,也为未来的空间AI应用奠定了坚实的基础。
地高精址:https://research.nvidia.com/labs/toronto-ai/vipe/
-
标签: 逐玉 腾讯视频 收视率造假 电视剧Meta 将 AI 编辑功能直接嵌入 Instagram Stories,一键生成梦幻特效Anthropic 为 Claude Pro/Max 用户推出“记忆”功能,实现个性化与安全升级标签: TVB 无线集团 电视广播 华语内容花蛤属于海鲜还是河鲜微软发布 UserLM-8b:“陪练伙伴”模型以逼真多轮对话精炼 AI 助手云安全日报211008:Cisco模拟电话适配器软件发现命令注入漏洞,需要尽快升级云计算开发:Python3数学函数ceil()方法详解标签: 常熟银行 村镇银行 净息差 不良率月之暗面发布 Kimi K2-0905:支持60-100Token/s,高速 API 全面开放
- ·云计算核心技术Docker教程:Docker 利用构建缓存
- ·Atlassian 6.1亿美元收购浏览器初创公司 押注AI驱动的职场浏览器
- ·京东云联合华为发布数据中心基础设施
- ·SUSE云安全行业趋势报告亚太版:中国市场表现尤为积极
- ·标签: 长安马自达 邓智涛 叶沛 长安汽车
- ·手机也能跑!面壁智能重磅发布MiniCPM-V4.5:4.1亿参数碾压GPT-4.1-mini
- ·标签: 微议HD 固生堂中医i 九元航空 劲浪体育SportsMall
- ·Alphabet Q3营收651亿美元 其中谷歌云部门营收近50亿美元
- ·“马化腾”称用阿里云不如用腾讯云?腾讯云回应:假的
- ·亚马逊裁员计划曝光:内部文件显示,2033年机器人或取代超60万个岗位!
- ·iOS26.1开发者预览版发布:苹果AI支持多语言,AirPods翻译功能升级
- ·标签: 腾易科技 本地生态联盟 汽车营销 数据孤岛
- ·谷歌正式公布 Gemini 使用限制:免费用户每天最多可用五次提示
- ·摩根士丹利:AI 革命将为标准普尔 500 指数企业每年节省近 1 万亿美元
- ·美团LongCat-Flash-Omni 正式发布,开启全模态实时交互新时代
- ·标签: 爱诗科技 PixVerse 拍我AI 视频生成
- ·Google宣布Gemini in Chrome正式向Workspace用户全面开放
- ·标签: 冷酸灵 医研 小童 厨邦
- ·标签: OpenAI Jalapeño 博通 Blackwell
- ·Twitter将于4月30日发布2021年第一季度财报
- ·COVID-19大流行正推动面部识别技术应用
- ·OpenAI考虑建设首个数据中心 减少对微软云服务依赖
- ·标签: 腾讯游戏 代号Craft AIGC游戏平台 SPARK2026
- ·标签: 华为 诺亚方舟实验室 盘古大模型 王云鹤
- ·Meta 政策重大调整:用户与 AI 助手的对话数据将用于全平台广告与内容推送
- ·标签: BOSS直聘 灭蟑行动 AI风控 求职安全
- ·https://www.yr.no/en/search?q=谷歌maps群发程序|软件【tg:seogoogle987】,W5E
- ·https://www.nyif.com/catalogsearch/result/index/?f=sarbanesoxleyU&index=me_cms_pe&lit=20&mode=list&p=1&q=谷歌maps群发程序|软件【tg:seogoogle987】,Qbp
- ·https://www.seforall.org/search?keywords=谷歌maps群发程序|软件【tg:seogoogle987】,XSI
- ·https://www.kissthekangaroo.com.au/index.php?route=product/search&tag=谷歌maps群发程序|软件【tg:seogoogle987】,BPN
- ·https://www.oprny.com/search.php?search_query=谷歌maps群发程序|软件【tg:seogoogle987】,EV7
- ·https://blvdseafood.com/?s=谷歌maps群发程序|软件【tg:seogoogle987】c7B
- ·https://www.olx.ba/pretraga?trazilica=谷歌maps群发程序|软件【tg:seogoogle987】,Qxl
- ·https://www.u-bourgogne.fr/?cat=117&s=谷歌maps群发程序|软件【tg:seogoogle987】,zps
- ·https://www.pacific-lifestyle.co.uk/search?sort=alphabetical&term=谷歌maps群发程序|软件【tg:seogoogle987】,3dj
- ·https://www.nss.nhs.scot/search?q=谷歌maps群发程序|软件【tg:seogoogle987】,FMK
