Grab 自研语言模型解决亚洲语言识别难题
新加坡超级应用程序公司 Grab 近日在其工程博客上分享了其自研语言模型的开发经历,指出现有的大型语言模型在理解东南亚语言Gr时表现不佳。Grab 的超级应用程序提供打车、外卖、购物和金融服务等功能,覆盖新加坡、马来西亚、印尼、菲律宾、越南、泰国、柬埔寨和ab缅甸等国家,这些地区的文档通常使用非拉丁字母的脚本。
图源备注:图片由AI生成
在执行如客户身份验证等合规工作时,Grab 需 自要准确提取身份证、驾照和注册证书等信息。尽管尝试过光学字符识别(OCR)系统,但 Grab 发现这些技术在处理多样化的文档模板研语时效果不理想。
在2025年,Grab 开始探索是否可以利用大型语言模型来解决这一问题。尽管一些强大的商业模型具备能力,但在理解东言模南亚语言时常出现错误和延迟,而开源的视觉大型语言模型虽然更高效,但准确性仍不足。因此,Grab 决定自行构建一个视觉大型语言模型型解,该模型能将图像向量化,方便提取文本。
Grab 选择了阿里巴巴云的 Qwen2-VL2B 模型作为基础,因为它的体积适中,支持东南决亚亚语言,并能动态处理不同分辨率的图像。随后,Grab 从 Common Crawl 中提取了东南亚语言的内容,并建立了内部合成数据管道洲语,以生成各种字体和背景下的文本图像。团队采用低秩适配技术对 Qwen2-VL 进行微调,取得了在印尼文档处理上的良好效果。
尽管在言识泰语和越南语的识别上仍然存在挑战,Grab 最终决定进行完整参数微调。通过训练模型,使其学习东南亚语言的独特视觉模式,Grab 成别难功开发了一个轻量级的视觉大型语言模型,其表现超越了多种 OCR 工具和通用模型。Grab 表示,战略性地使用高质量数据,能够Gr使小型专业模型实现高效与有效的结合。
未来,Grab 计划继续开发更多自有模型,以扩展其文档处理技术。
划重点:
Grab 发现现有大型ab语言模型在东南亚语言识别上效果不佳,决定自研模型解决问题。
自研的视觉大型语言模型在处理身份证和驾照 自等文档时取得了显著进展。
Grab 将继续开发更多模型,以满足日益复杂的文档处理需求。 &研语nbsp;
(责任编辑:手工定制)
- 标签: 尘白禁区 中国邮政 笺定恒约 成人向游戏
- Pandas中的这3个函数,没想到竟成了我数据处理的主力
- 星环科技+英特尔“软硬1+1>2” 展现大数据公司未来合作形态
- 数据中心节能减排迫在眉睫,液冷技术与AI能效管理成两大法宝
- 微软的新玩具:LinkedIn推自由职业平台瞄准Upwork
- 安全问题影响着企业采用云技术的决心
- 苹果新研究揭示LLM对齐新范式:清单式强化学习优于传统奖励模型
- 在线学习的“后浪”:现代学习系统中的人工智能
- 荷花叶有什么功效和作用
- 谷歌遭英国《每日邮报》起诉:垄断广告业务
- 谷歌为美国政府提供 Gemini 人工智能工具,助力数字化转型
- 谷歌确认Gemini赋能新版Siri:苹果情境感知功能定档2026年发布
- 腾讯云成立新公司 经营范围含5G通信技术服务
- 标签: 甲骨文 OracleCloud AI数据库 Cerner
- 云安全日报220426:IBM企业级商业智能报表软件发现执行任意代码漏洞,需要尽快升级
- 云安全日报210816:红帽系统安全服务守护程序发现命令注入漏洞,需要尽快升级
- 标签: 梯瓦制药 duvakitug TL1A单抗 黑石生命科学
- 标签: 宁德时代 巧克力换电 骐骥换电
- 标签: 宏业基 腾讯大铲湾 OPPO滨海湾 京东深圳总部
- 标签: 览锐光电 电致变色 车规级膜片 Furcifer
- Facebook在多家报纸刊登整版广告:抨击苹果调整数据政策 views+
- 标签: 国贵科技 北交所IPO 汽车零配件 高性能悬架 views+
- 玉米直男什么梗 views+
- 标签: 华特迪士尼 戴明哲 罗伯特·艾格 迪士尼体验 views+
- 云计算开发实例:Python3将时间戳转换为指定格式日期 views+
- 中国在5G、AI等领域对美国紧追不舍,但设备工艺依旧落后 views+
- 腾讯启动AI应用繁荣计划,超300家企业抢滩智能体新赛道 views+
- 云计算核心技术Docker教程:Docker使用macvla网络 views+
- 网宿科技2022年报:营收净利润双增长,业绩拐点可期 views+
- 泰勒·斯威夫特新专寻宝游戏引争议:粉丝质疑推广视频系 AI 生成 views+
