
新浪科技讯1月20日晚间消息,字节跳动旗下豆包与上海浦东美术馆达成合作,成为该馆两项国际大展“图案的奇迹:卢浮宫印度、伊朗与奥斯曼的艺术杰作”与“非常毕加索:保罗•史密斯的新视角”的官方AI讲解员。双方通过独家数据合作和定向搜索优化,进一步提升了豆包识别和讲解的准确性。这是AI产品首次成为美术馆的官方讲解工具。
据悉,展览期间,观众可随时通过豆包App的“视频通话”功能或拍照提问方式,获取针对具体展品的专业讲解,即使轻声提问,豆包也能准确识别。同时,豆包还提供通用和亲子两种解说风格。在观展过程中,用户可以让豆包从艺术风格、历史背景、创作技法与文化意义等多个维度,对作品进行解读。
发布会现场,字节跳动副总裁朱骏也就豆包看展体验和媒体人陈鲁豫进行了对谈。朱骏表示,AI和用户的交互本质上是一种对话体验。在观展过程中,希望豆包通过共情式的提问和启发式的对话,把用户已有的感受和经验调动出来,形成更有参与感的理解过程。
此前,豆包就曾与中国国家博物馆、中国钱币博物馆、河南博物院、山东博物馆、安徽博物院、成都博物馆以及洛阳博物馆七家国家一级博物馆达成合作,共同打造数字化看展体验区。
豆包逛展项目负责人表示:“在博物馆场景中运用AI讲解,最大的挑战是保证内容的准确性。模型不仅要能区分外观高度相似的文物、理解小众且缺乏公开资料的展品,还要能在观众移动观展、从不同角度和距离观察同一件展品时,始终保持稳定识别。”她举例说明:“比如这次展览中有一件伊朗15世纪的《牡丹纹盘》,其风格与明代永乐年间的青花牡丹纹盘非常接近,这就要求模型必须从细节入手进行精准区分。”