NVIDIA Technical Blog 发布于 10/01 13:00

Fine-Tuning NVIDIA Nemotron for Saudi Arabic Dialects, with a Path to Other Languages

(翻译)为沙特阿拉伯方言微调 NVIDIA Nemotron,并探索适用于其他语言的路径

查看原文

资讯摘要

Automatic speech recognition must handle how people actually speak, not only the languages and styles that dominate pretraining data.

AI 摘要

NVIDIA 技术博客介绍如何用 NeMo 框架微调 Nemotron 3.5 ASR,以适配沙特阿拉伯 Najdi 与 Hijazi 方言。流程包括数据筛选、按权重混合回放数据、分桶批处理与独立评测;12,000 步实验在两张 GPU 上约 4.5 小时完成,并报告 WER 变化。

AI 问答

这项工作适合在什么场景下使用?

适合已有足够标注语音可以专门化 ASR 模型、但不足以从零训练的场景,例如方言适配、特定领域转录,以及需要保留已有语言能力的部署。

为什么要在微调时加入回放数据?

仅在目标方言上微调会覆盖预训练学到的能力。加入少量先前学习的数据进行混合训练,可降低灾难性遗忘,例如用 10% FLEURS(7% 英语、3% 阿拉伯语)配合 90% 沙特语音。

实验用了哪些数据和硬件规模?

实验使用 SADA 2022 与 FLEURS 数据集,在两张 NVIDIA RTX PRO 6000 Blackwell Workstation Edition GPU 上运行 12,000 步,耗时约 4.5 小时。

打开原文

更多资讯

未经批准含有“金融控股”等字样 三家企业被要求整改36氪 · 10/10 16:44我国牵头制定的船舶压载水管理系统调试测试国际标准发布36氪 · 10/09 20:21硬件钱包接连出事 审计得交给AI干了金色财经 · 10/10 10:13日本美滨核电站3号机组反应堆重启36氪 · 10/10 09:28早报|供应链回应iPhone 18 Pro砍单传闻/小米、华为手机同日调价/山姆拟限制亲友卡换绑爱范儿 / APPSO · 10/10 08:14加强汽车产品创新设计等方面管理,四部门征求意见36氪 · 10/10 17:09乘联分会:9月1-30日全国乘用车新能源市场零售114.1万辆,同比去年9月同期下降12%36氪 · 10/10 17:22近期海外进出口传闻的政策限制对公司是否有影响? 天孚通信回应36氪 · 10/09 20:45特斯拉在欧洲将 Full Self-Driving 改名为 Tesla Assisted DrivingSolidot · 10/10 16:52商务部欧洲司负责人解读中欧贸易投资磋商机制第二次例会成果36氪 · 10/10 13:35兰博基尼、保密协议 Ledger被盗事件疑点重重金色财经 · 10/10 15:34被字节索赔 800 万的实习生“出道”:20 万符号造 AI 词典,打造世界模型创业公司估值 2 亿美元开源中国 · 10/10 19:09中国人民银行行长潘功胜会见高盛集团总裁兼首席运营官温泽恩36氪 · 10/09 18:48泰国证交所修订卖空和高频交易规则36氪 · 10/10 11:57不输出文本、只输出概率的 Jev —— 上线几周估值飙到 75 亿美元开源中国 · 10/10 11:06Claude、GPT“跨界”做视频,Seedance们的护城河还牢吗?人人都是产品经理 · 10/10 16:42巴西起诉壳牌子公司,索赔上亿美元洪灾损失36氪 · 10/10 16:49特斯拉弃用“自动驾驶”命名,以争取欧洲监管批准36氪 · 10/09 20:35ModStartBlog v11.3.0 安全加固、体验优化,自动化测试更强大开源中国 · 10/10 18:23Sui 难民:华语开发者为什么选择离开?金色财经 · 10/09 21:29MooTool Next 1.3.0 发布!全新重写,带来更现代的界面与多窗口体验开源中国 · 10/10 15:07节后机票价格“跳水”,多条航线低于高铁票价36氪 · 10/10 12:57Telegram钱包全面开放 CFTC将事件合约纳入互换定义金色财经 · 10/10 07:54广东加速推进广韶高速改扩建工作,未来将缓解京港澳高速交通压力36氪 · 10/10 14:07DjangoAdmin 敏捷开发框架 Flask+NaiveVue 版本 v2.8.2 发布开源中国 · 10/10 10:38OpenAI dots全面登陆手机 开口指挥Codex干活了金色财经 · 10/10 10:59Citrini:区块链终于迎来它的时刻 怎么选择投资组合金色财经 · 10/09 18:34多部门:汽车生产企业不得作虚假、夸大或引人误解的宣传36氪 · 10/10 17:25小红书+AI+知识库,我现在无敌了人人都是产品经理 · 10/10 10:45一次模型测评后,我开始重新理解WorkBuddy人人都是产品经理 · 10/10 11:14