抖音非遗计划借助扣子平台智能体搭建技术为第九届中国成都国际非物质文化遗产节打造了数字人导览员“非非”,承担导览讲解和非遗知识科普的工作。 扣子平台成熟的技术能力为 “非非” 高效履职提供坚实支撑:知识库系统能够梳理海量非遗资料,确保 “非非” 讲解专业准确;音色功能赋予 “非非” 四川方言特色,拉近与参观者距离;意图识别技术助力 “非非” 快速理解需求并即时响应。
客户介绍
2025年5月28日~6月3日,第九届中国成都国际非物质文化遗产节在成都举办。这场由四川省人民政府、文化和旅游部、联合国教科文组织等共同主办的盛会,是我国唯一由联合国教科文组织参与主办的国家级非遗盛会,以“传承弘扬中华优秀传统文化”为核心,融合国际视野与科技创新。
抖音非遗计划打造的数字人 “非非”,肩负起导览讲解与非遗知识科普的重任,成为连接非遗与大众的 “新使者” 。“非非”能流畅切换普通话、英语和四川方言三语体系。用户可以在抖音非遗嘉年华展区的 3D 屏幕前,能够听取她的专业讲解;扫描展会手册二维码跳转豆包 APP,获取她给出的智能导览;作为“抖音非遗计划”官方账号的 AI 分身和非遗发展共创营主持人,她还能 24 小时在线讲述非遗故事。
业务挑战
项目实施过程中面临三大关键挑战:
时间紧迫:需在三周左右完成多项关键任务,包括多个模型的选型与评估、智能体的构建、大量非结构化的非遗知识处理,以及持续且可观测的版本优化工作。
成本受限:项目预算有限,无法支持全私有化环境下的开发工作,但项目本身定制化程度较高,需要在有限资源下实现高度定制化的开发与部署。
复杂度高:项目要求对多个豆包模型进行组合使用,并且需要调用丰富的第三方插件能力,如联网搜索插件、天气插件等。此外,项目还涉及多端发布(涵盖抖音 APP、豆包 APP、智能硬件屏幕),技术实现和协调难度大。
解决方案
针对上述挑战,抖音非遗计划项目团队围绕形象定制、音色塑造、智能体定义和编排、非遗嘉年华知识库构建等核心环节,依托扣子开发平台快速构建智能体,驱动三维形象完成线下和线上的端到端交付,成功上线豆包 APP 和抖音 AI 分身两个移动端的智能体应用。
其中,扣子平台部分的解决方案如下:
非遗 RAG 知识库:将非遗专题的内容上传至扣子知识库,进行内容存储及提取。扣子知识库能够批量处理非遗知识文本,智能拆分和整理优质的 “问答对”,为 “非非” 提供坚实的知识储备,确保其能准确进行非遗知识科普和讲解。
四川方言 TTS 语音合成:依托扣子平台音色资源,为非遗场景定制四川特色方言合成音色,让 “非非” 的语言表达融入地方文化基因,增强交互亲和力与地域文化沉浸感。
多意图识别:依托扣子平台的意图识别能力,“非非” 能快速捕捉用户交互中的真实需求,无论是导览请求还是非遗知识咨询,都能快速响应,提升交互体验。
专属的工作流编排:通过扣子专属工作流编排功能,深度耦合多模型调用、第三方插件(天气查询、实时资讯等)与非遗业务场景,构建复杂业务逻辑闭环,保障 “非非” 在不同交互场景下的功能流畅落地。
客户收益
数字人 “非非” 成为非遗传播的重要载体,为非遗文化的传承与弘扬注入了新的活力,也为类似数字人 IP 在文化传播领域的应用提供了可借鉴的经验。主要收益如下:
突破时间瓶颈:借助扣子平台高效的多人协作能力,项目团队在短短三周左右的时间内完成了各项关键任务,确保数字人 “非非” 按时投入使用。
以较低成本完成高定制化需求:在项目预算有限的情况下,项目团队充分利用扣子平台成熟的功能模块(如知识库、音色库、工作流等),实现了高度定制化的开发与部署,满足了数字人 “非非” 在形象、音色、多场景功能等方面的定制化需求。
解决了非遗传播在多场景应用中的技术难题:基于扣子平台成功实现多端发布,使 “非非” 能在抖音 APP、豆包 APP 以及智能硬件屏幕等多个场景中发挥作用,突破了非遗传播在技术层面的场景限制,扩大了非遗知识的传播范围和影响力。
客户原声
用扣子来构建智能体,除了高效便捷的优点外,还可以更好的适配多端,可以实现一个稳定的人设在多个场景的下的不同应用。