9月8日,豆包宣布成为湖北省博物馆官方AI讲解员,支持用包含武汉话在内的12种方言逛展。
豆包博物馆讲解模式是豆包为逛展爱好者开发的专属功能。用户可通过豆包App内对话框中的“博物馆讲解”按钮进入专属场景,将手机对准展品,豆包便会自动识别,针对具体展品进行专业、个性化的趣味讲解,并提示轻声提问、佩戴耳机。
除了广为人知的越王勾践剑、曾侯乙编钟、虎座鸟架鼓等镇馆之宝,湖北省博物馆近期还举办了“克里姆林宫的瑰宝”展,围绕彼得一世、叶卡捷琳娜二世这两位俄罗斯历史上唯二的“大帝”,精选莫斯科克里姆林宫博物馆17至18世纪原生馆藏共129件(组),涵盖王冠、权杖、勋章、宫廷礼服、武器及银器等品类。
在“克里姆林宫的瑰宝”展览期间,游客可直接打开豆包博物馆讲解模式,或者通过豆包App线下扫描该展览的专属二维码进入导览场景,体验这段从17世纪早期罗曼诺夫王朝开创、彼得大帝改革、宫廷政变时期,直至叶卡捷琳娜二世时代一百七十余年的宏大历史。
“此次豆包作为湖北省博物馆的官方AI讲解员,不仅带来了个性化的专业解说,其武汉话等方言能力更让本地观众倍感亲切。”湖北省博物馆馆长张晓云表示,AI技术为文博传播打开了新的想象空间,让文物讲解升级为边走边问的连续对话,也让厚重的历史文化以更年轻、更个性化的方式走近每一位观众。
据豆包逛展项目负责人李若瑄介绍,豆包大模型目前已支持粤语、闽南语、上海话、客家话、武汉话、天津话、陕西话、四川话、河南话、济南话、东北话、北京话等12种方言的对话。比如在湖北省博物馆,本地游客可以打开“博物馆讲解”按钮,用武汉话给豆包提问,要求豆包用武汉话讲解,豆包就会采用方言交流。除了博物馆讲解模式外,用户也可以打开豆包的“视频通话”按钮,直接体验上述12种方言对话。未来,豆包也会支持更多种方言,让更多不同地区的人能和豆包用家乡话交流。
此外,随着豆包视频通话接入原生音视频全双工大模型SeedRealtime,豆包博物馆讲解模式也同步升级,能够在嘈杂环境下有效抗干扰,进一步优化博物馆场景的讲解体验。李若瑄解释:“通过接入SeedRealtime原生音视频全双工模型,豆包真正变成了一位能看、能听、能边走边聊的随身AI讲解员。它能一边看展品、一边听提问、一边组织回答,在嘈杂的展厅里也能分清谁在跟它说话、游客指的是哪件文物,让讲解从一次性看图问答升级成一路走、一路问、一路追的连续对话。”
(来源:中国科技网)