Grab 自研语言模型解决亚洲语言识别难题
新加坡超级应用程序公司 Grab 近日在其工程博客上分享了其自研语言模型的开发经历,指出现有的大型语言模型在理解东南亚语言Gr时表现不佳。Grab 的超级应用程序提供打车、外卖、购物和金融服务等功能,覆盖新加坡、马来西亚、印尼、菲律宾、越南、泰国、ab柬埔寨和缅甸等国家,这些地区的文档通常使用非拉丁字母的脚本。
图源备注:图片由AI生成
在执行如客户身份验证等合规工作时,Grab 自 需要准确提取身份证、驾照和注册证书等信息。尽管尝试过光学字符识别(OCR)系统,但 Grab 发现这些技术在处理多样化的文档模板研语时效果不理想。
在2025年,Grab 开始探索是否可以利用大型语言模型来解决这一问题。尽管一些强大的商业模型具备能力,但言模在理解东南亚语言时常出现错误和延迟,而开源的视觉大型语言模型虽然更高效,但准确性仍不足。因此,Grab 决定自行构建一个视觉型解大型语言模型,该模型能将图像向量化,方便提取文本。
Grab 选择了阿里巴巴云的 Qwen2-VL2B 模型作为基础,因为它的体积适中决亚,支持东南亚语言,并能动态处理不同分辨率的图像。随后,Grab 从 Common Crawl 中提取了东南亚语言的内容,并建立了内部合成洲语数据管道,以生成各种字体和背景下的文本图像。团队采用低秩适配技术对 Qwen2-VL 进行微调,取得了在印尼文档处理上的良好效言识果。
尽管在泰语和越南语的识别上仍然存在挑战,Grab 最终决定进行完整参数微调。通过训练模型,使其学习东南亚语言的独特视觉模别难式,Grab 成功开发了一个轻量级的视觉大型语言模型,其表现超越了多种 OCR 工具和通用模型。Grab 表示,战略性地使用高Gr质量数据,能够使小型专业模型实现高效与有效的结合。
未来,Grab 计划继续开发更多自有模型,以扩展其文档处理技术。
划重点:
Graabb 发现现有大型语言模型在东南亚语言识别上效果不佳,决定自研模型解决问题。
自研的视觉大型语言模型在处理身 自份证和驾照等文档时取得了显著进展。
Grab 将继续开发更多模型,以满足日益复杂的文档处理需求。&nb研语sp;
- ·标签: 昊铂 昊铂A800 华为乾崑智驾ADS4.1 鸿蒙座舱5
- ·亚马逊云科技季度营收增速创3年来最高,CEO安迪•贾西:非常满意
- ·Anthropic发布Claude Sonnet 4.5:编码能力登顶榜首,实验性功能Imagine预演AI原生界面时代
- ·标签: 豆包
- ·标签: AMI 杨立昆 World Model JEPA
- ·AI技术加入数据中心节能新战场
- ·标签: ST智知 聚安网 燃气安全 分布式智算
- ·用户画像被批“没啥用”!到底咋做才有用?
- ·微软在印度建设第四个数据中心 将继续增加印度员工人数
- ·标签: 摩尔线程 MTTS5000 GPU AI
- ·标签: 京东 A2P2协议 智能体支付 ARI机制
- ·标签: 薇美铺 WeMakePrice 趣天Qoo10 电商平台
- ·标签: 多益网络 高新技术企业 广州
- ·FTC敦促法官拒绝Facebook驳回垄断诉讼的请求
- ·英伟达拟向OpenAI投资1000亿美元,建设AI数据中心
- ·标签: 携程 Ebooking AI生意助手 酒旅行业
- ·https://5gaa.org/?token=6e2l7hjt2i26gzgctgwdrv7v0j6nxorq&s=谷歌快排操作流程【tg:seogoogle987】cqE
- ·https://www.youtube.com/hashtag/谷歌快排操作流程【tg:seogoogle987】,ksT
- ·https://www.stonerealestate.com.au/?cat=100&s=谷歌快排操作流程【tg:seogoogle987】,r25
- ·https://yokohama-oht.com/?action=CHECK&s=谷歌快排操作流程【tg:seogoogle987】,sED
- ·https://www.monroecounty.gov/search/?q=谷歌快排操作流程【tg:seogoogle987】,lEc
- ·https://www.lifesciencesweden.se/search?q=谷歌快排操作流程【tg:seogoogle987】,fHG
- ·https://www.kissthekangaroo.com.au/index.php?route=product/search&tag=谷歌快排操作流程【tg:seogoogle987】,XuA
- ·https://www.vivaraise.fr/catalogsearch/result/?q=谷歌快排操作流程【tg:seogoogle987】,zoW
- ·https://hsmoa.com/search?query=谷歌快排操作流程【tg:seogoogle987】T2f
- ·https://www.duksung.ac.kr/search/front/Search.jsp?qt=谷歌快排操作流程【tg:seogoogle987】rNa
