本报记者 田璐
9月29日,在晋中市平遥古城景区,知名导演贾樟柯打开手机上的豆包APP,边走边询问古城的历史渊源、院落典故与打卡路线,豆包均能实时给出讲解。当天,豆包官宣成为山西文旅官方AI讲解员,基于视频通话等功能提供专业的AI讲解服务,覆盖云冈石窟、应县木塔、山西博物院、皇城相府、王家大院、鹳雀楼、小西天等上百个山西热门景区、古建、文博场馆,为游客提供智慧旅游新体验。这也是豆包首次落地省级文旅合作项目。
百家景区随时听讲解
山西素有“中国古代建筑博物馆”之美誉,现存元代及以前木结构古建筑500余处,占全国的80%以上。从世界文化遗产云冈石窟的恢弘造像、晋祠的宋代建筑遗存到应县木塔、佛光寺、小西天等庄严古建,山西文旅资源富集、底蕴深厚。
豆包讲解是基于豆包模型能力开发的专属功能。为保障讲解内容的专业性与准确性,山西省文化和旅游厅统筹开展内容素材归集工作,采集百家景区官方标准讲解词,完成数万条文旅数据的采集、整理与标注,与豆包团队共同打造更规范、更贴合山西本土历史文化的讲解内容。
记者在景区体验时,只需打开豆包APP,通过“视频通话”按钮将镜头对准眼前的景点,豆包便会自动识别,针对具体景观进行专业、生动的讲解,还会提示用户轻声、佩戴耳机。
从千年古建到石窟造像,从古城街巷到名山大川,游客在百余个山西景区里,只需扫描景区内的专属海报二维码,获取更多视频通话时长,便能获得便捷化讲解体验,感受豆包AI讲解的陪伴。
“近年来,山西持续推进数字赋能文旅发展,不断优化游客游览体验。”山西省文化和旅游厅党组成员、副厅长任永福表示,“本次与豆包合作的AI讲解服务是数智文旅的有益探索,一方面,为游客提供多元化讲解选择,有效缓解节假日客流高峰专业讲解员供不应求的压力;另一方面,以年轻化、现代化的传播方式,生动展现山西丰厚的文旅资源,让底蕴深厚的三晋文化可感可及。”
AI讲解助力智慧出游
除了视频通话模式外,基于豆包的模型能力,游客还可拍摄景点照片发送给豆包,获取专业讲解。在平遥古城,游客既可以与豆包实时对话,也可以拍摄古建筑、彩塑、壁画等景观,获得专业的AI解读。
贾樟柯是汾阳人,受邀参与此次体验。在平遥古城,他游览景点时,与豆包进行深度交流,时不时还会说上几句汾阳方言,均能准确识别、给予回应。“对着眼前古城的景观问豆包,它不仅会给我讲古城的历史,还会和我交流创作问题。”贾樟柯说,“有时,能给我提供意想不到的建议,像一个既熟悉当地历史文化,又熟悉我的老朋友。”
该项目负责人李若瑄表示,目前,豆包大模型已具备图片识别与自然语言理解能力,可识别各类自然与人文景观,结合经过审核的专业知识库输出准确、生动的讲解内容。视频通话接入的SeedRealtime原生全双工大模型,可在景区户外复杂噪音环境下有效抗干扰,进一步优化游览场景下的对话体验。
据了解,5月18日,豆包上线博物馆讲解模式,首批覆盖20余家国内头部博物馆,先后成为甘肃省博物馆、河北博物院、首都博物馆、中国美术馆、浦东美术馆相关重磅展览的官方AI讲解员。9月,官宣成为湖北省博物馆官方AI讲解员,支持武汉话等12种方言解说。后续,该项目将持续深耕文旅场景,优化讲解精度,为游客提供更贴合个性化需求的智慧讲解服务。
十一黄金周期间,带上豆包这个旅游搭子,游览云冈石窟、应县木塔、山西博物院、皇城相府等山西景区,体验AI讲解服务,解锁智慧旅游新体验。