当人工智能邂逅世界艺术瑰宝,一场跨越时空的精彩对话在上海浦东美术馆悄然拉开帷幕。豆包App近期正式宣布与浦东美术馆达成深度合作,以“官方AI讲解员”的全新身份,全面融入馆内两大国际重磅展览——“图案的奇迹:卢浮宫印度、伊朗与奥斯曼的艺术杰作”以及“非常毕加索:保罗•史密斯的新视角”。这是AI技术首次以官方身份深度融入美术馆导览体系,标志着人工智能在专业文化领域的应用步入新阶段。
此次合作中,豆包不再只是信息的传递者,而是化身为观众身边的“艺术向导”。在展览期间,参观者只需打开豆包App,利用“视频通话”功能对准展品实时查看,或上传展品照片进行询问,便能享受到精准、专业的讲解服务。无论提问的声音多轻柔,或是不断变换角度观看,豆包都能准确识别并持续回应,实现如同真人导览一般自然流畅的互动体验。

技术背后,是字节跳动自研的Seed1.8多模态大模型的强力支撑。该模型在视频理解、流式处理与连续场景感知方面达到业界领先水平(SOTA),能够持续解析观众视野中不断变化的画面,摆脱传统“拍照-发送-等待”的割裂模式,真正实现“所见即所问,所问即所得”的沉浸式观展。
在内容层面,豆包提供通用与亲子两种解说风格,满足不同年龄层和知识背景观众的需求。针对卢浮宫展区中16至19世纪印度、伊朗、奥斯曼帝国的艺术珍品,豆包可从图案象征、工艺技法、宗教文化等维度深入解读;而在毕加索展览中,则能剖析其立体主义的演变、创作背景与艺术影响,帮助观众超越“看图”,走向“读画”。
值得一提的是,展品中不乏外观高度相似的文物,如伊朗15世纪《牡丹纹盘》与中国明代青花瓷风格相近,对识别与解读的准确性提出极高要求。豆包团队通过独家数据合作与定向搜索优化,构建专业艺术知识库,确保模型能从细节入手,精准区分,避免误读。

字节跳动副总裁朱骏表示:“AI的本质是对话,我们希望豆包能通过共情式提问与启发式互动,唤醒观众自身的感受与经验,让艺术欣赏成为一场深度参与的思想旅程。”
此次合作也延续了豆包在文博领域的布局,此前已与国博、河南博物院等七家一级博物馆合作,推动文化场馆的数字化转型。浦东美术馆方面强调,引入AI并非替代人工讲解,而是为观众提供更灵活、更个性、可延展的观展路径。