정신건강 고민에 답할 때 AI와 상담사는 어떤 차이를 보였나요?

상세 설명

연구진은 정신건강 고민 937건에 대해 기존 상담사 답변 2,749건과 각 고민에 맞춰 일정한 방식으로 생성한 AI 답변을 비교했어요. 자동화된 평가를 사용하고, 사람이 답변 쌍 120개를 평가하게 했어요. 사람 평가자는 어느 답변이 AI와 상담사에게서 나온 것인지 모르는 상태였어요.

AI 답변은 자동 평가와 사람의 평가 모두에서 공감 점수가 더 높았고, 상대의 감정을 인정해 주는 정도에서도 더 높은 점수를 받았어요. 자동화된 안전성 평가에서도 AI 점수가 더 높았으며, 그 차이는 자해나 자살 관련 고민에서 가장 컸어요. 반면 상담사 답변은 개인의 상황에 구체적으로 맞춘 정도와 도움이 되는 정도에서 더 높게 평가됐어요. 전반적인 품질에서는 뚜렷한 차이가 확인되지 않았지만, 이것이 두 답변의 품질이 같다는 뜻은 아니에요.

핵심은 글로 된 답변에서 서로 다른 강점이 나타났다는 것이지, AI가 더 나은 치료를 제공한다는 증거가 아니에요. 공감이나 안전성 점수가 높다고 해서 실제 치료 결과가 더 좋거나 도움을 구하는 사람의 안전이 더 잘 확보된다고 볼 수는 없어요.