研究LLM模拟咨询客户在培训中的表现对比
原文:Comparing Human Role-Players and LLM-Simulated Clients in Online Counselling Training: An Analysis of Counselling Patterns
本研究探讨了大语言模型在教育角色扮演中模拟咨询来访者的能力,并与人类角色扮演者进行对比。我们首先录制了角色扮演会话,新手咨询师与扮演来访者的人类同伴互动,随后进行了人类与由Mistral的Mixtral 8x7b(4位量化)模拟的来访者之间的角色扮演。这些互动通过句子级咨询沟通模式系统进行分析。我们研究了两个关键问题:(1)LLM生成的回复在多大程度上复现了真实的对话动态;(2)咨询师在与人类来访者和LLM模拟来访者互动时,其沟通行为是否存在差异。研究发现揭示了不同场景下咨询模式应用的相似性和差异性,展示了基于LLM的角色扮演练习在提升咨询胜任力和识别虚拟来访者模拟需进一步改进领域方面的潜力。作者:Eric Rudolph, Philipp Steigerwald, Jens Albrecht 分类:cs.AI,cs.CL