• • 下一篇
蒋玉茹1,2,那婷婷1,2*,李梦媛1,2,于燕超3
摘要: 针对现有对话生成技术在回忆疗法中因缺乏专用高质量语料导致交互生硬、引导效果不佳的问题,提出一种情景驱动的角色信息生成与角色扮演(SCIGR)多轮对话数据构建方法。首先,为图片生成详细描述以构建回忆情景;其次,融合检索增强生成技术与提示工程,创作贴近老年人生活背景的角色信息;再次,构建图片背后的拍摄故事以丰富对话上下文;最后,基于上述信息采用角色扮演技术生成多轮对话,构建首个中文图片回忆疗法多轮对话数据集IRTDialogues。为验证该数据集的有效性,采用多模态大语言模型(MLLM)进行监督微调(SFT),并构建包含共情性、引导性等5个维度的多维多模态回忆疗法评测基准(MMRT)进行评估。实验结果表明,基于IRTDialogues数据集训练的模型能生成更符合情境、更具情感支持性的回应,为构建更具人文关怀的智能养老技术提供了数据支持和新的实现路径。
中图分类号: