Pandora, 상담 내담자 시뮬레이터의 AI 말투를 7.2%로 낮춘 연구
CLAIN-WHU 연구진이 심리상담 내담자를 흉내 내는 LLM 시뮬레이터 Pandora를 arXiv에 공개했습니다(한국 시각 2026년 11월 4일 09시, 00:00 UTC). 내담자가 무엇을 말할지뿐 아니라 어떤 말투로 말할지를 따로 계획하는 구조입니다. 115개 사례 평가에서 비교 시스템 중 표현 유사도와 전체 공개 정렬 점수가 가장 높았고, 사람 평가에서 AI 같다는 판정 비율은 7.2%였습니다.
1/너무 조리 있게 말하는 가상 내담자
상담 내담자는 괴로움을 느끼면서도 그것을 아직 분명하게 설명하지 못하는 경우가 많고, 감정 상태와 안전감, 치료자에 대한 신뢰에 따라 표현이 달라집니다. 기존 LLM 내담자 시뮬레이터는 임상가가 정리한 사례 설명에 기대는 경우가 많아서, 내담자의 현재 이해 수준보다 더 분명하게 자기 문제를 설명하는 답이 나올 수 있다고 논문은 지적합니다. 논문은 이런 지나치게 말을 잘하는 내담자가 치료자 훈련과 평가에서 어려운 호소를 실제보다 쉽게 파악하게 만든다고 봅니다.
2/내용 계획과 표현 계획을 나눈 구조
Pandora는 치료자의 개입을 평가해 내담자의 심리·관계 상태를 갱신하고, 그 상태에서 내담자가 상황을 어떻게 받아들이고(평가) 어떻게 설명하는지(귀인)를 만듭니다. 이어 답변의 내용, 태도, 대화상 목적을 계획합니다. 별도의 표현 계획기가 이 결정에 내담자 발화에서 미리 뽑아 둔 언어 프로필을 결합해 어휘 선택, 완곡 표현(hedging), 감정 노출 정도, 답변 길이를 정합니다. 예를 들어 치료자가 감정 반영을 놓치면 내담자의 안전감이 떨어지고 방어적이 되어, 'Maybe he's upset with me, or I said something wrong' 같은 짧고 조심스러운 추측으로 답하는 식입니다.
3/115개 사례, 5개 베이스라인과 비교
평가는 상담 및 동기강화면담 데이터셋 4개에서 가져온 115개 사례로 했고, 베이스라인 5개와 표현 계획을 뺀 변형(ablation)을 비교했습니다. Pandora는 비교 시스템 중 표현 유사도와 전체 공개 정렬(disclosure-alignment) 점수가 가장 높았습니다. 상담사 2명과 합성 데이터 연구자 2명이 짝지어진 공개 항목 45개를 판정한 사람 평가에서 AI 같다는 판정은 Pandora가 7.2%, 베이스라인이 43.3~67.2%, 표현 계획이 없는 변형이 35.6%였습니다. 표현 계획을 빼면 표현 유사도도 내려갔습니다.
4/평가된 설정 안에서의 결과
논문은 결론을 '평가된 설정에서' 표현 계획이 개인의 언어 패턴과의 정렬을 높이고 AI 같은 표현을 줄인다는 것으로 한정합니다. 제공된 원문은 실험 절 초반에서 끊겨 있어, 그 이후에 나오는 구체적 한계 항목은 확인할 수 없습니다.