인공지능이 HCI를 바꾼다: LLM의 등장과 CHI 학회 연구 분석

본 연구는 LLM이 HCI 연구에 미치는 영향을 체계적으로 분석한 최초의 시도로, LLM의 적용 분야, 역할, 한계점 등을 제시하며 HCI 연구의 발전 방향을 제시합니다. LLM의 잠재력을 활용하면서 동시에 발생 가능한 문제점들을 해결하는 방향으로 연구가 진행되어야 함을 강조합니다.

2020년부터 2024년까지 발표된 CHI(Computer-Human Interaction) 학회 논문 153편을 분석한 새로운 연구 결과가 발표되었습니다. Rock Yuren Pang을 비롯한 7명의 연구진은 "Understanding the LLM-ification of CHI: Unpacking the Impact of LLMs at CHI through a Systematic Literature Review" 라는 제목의 논문을 통해, 대규모 언어 모델(LLM)이 인간-컴퓨터 상호작용(HCI) 분야에 미치는 영향을 체계적으로 분석했습니다. 이는 LLM이 HCI 연구에 본격적으로 도입된 이후, 그 영향을 종합적으로 분석한 첫 번째 시도라는 점에서 큰 의미를 가집니다.

LLM, HCI 연구의 새로운 지평을 열다:

연구진은 LLM이 HCI의 인터페이스, 디자인 패턴, 사회기술 시스템 뿐 아니라, 연구 방법론까지 변화시키고 있음을 지적합니다. 논문은 LLM이 적용된 10개의 다양한 HCI 분야를 제시하며, 실험적 연구와 인공물(artifact) 기반의 연구가 주를 이루고 있음을 밝혔습니다. 특히, 연구진은 LLM이 연구 도구 또는 시뮬레이션 사용자 등 5가지 독립적인 역할을 수행하고 있음을 밝혀내, LLM이 HCI 연구에 다양한 방식으로 활용되고 있음을 보여주었습니다.

주의해야 할 점들:

하지만 연구는 LLM 활용 연구에서 타당성과 재현성 문제가 자주 제기되고 있으며, 폐쇄형 모델에 대한 의존도가 높다는 점을 지적합니다. 이는 LLM을 활용한 HCI 연구의 한계이자, 앞으로 개선해야 할 부분입니다. 연구진은 HCI 연구에서 LLM의 타당성과 적절성을 평가하기 위한 질문들을 제시하며, LLM 기반 연구의 발전 방향을 제시하고 있습니다. 즉, LLM의 잠재력을 최대한 활용하면서 동시에 발생 가능한 문제점들을 해결하는 방향으로 나아가야 함을 강조하고 있습니다.

결론적으로, 이번 연구는 LLM이 HCI 분야에 가져온 혁신적인 변화와 동시에, LLM 활용 연구의 한계점을 명확히 제시함으로써 보다 견고하고 신뢰할 수 있는 HCI 연구를 위한 중요한 길잡이 역할을 할 것으로 기대됩니다. 앞으로 LLM을 활용한 HCI 연구는 타당성과 재현성 확보에 더욱 집중하고, 개방형 모델의 활용을 확대하며 윤리적인 문제들을 고려해야 할 것입니다.