공유 작업 공간에서의 인간-AI 협업 연구

Searching for Synergy in Shared Workspace Human-AI Collaboration

자동화된 AI 에이전트는 점점 더 많은 능력을 갖추고 있지만, 많은 과학적 및 전문적 작업은 인간의 판단과 맥락적 전문성을 요구한다. 연구에서는 AI 에이전트와 인간 협력자가 최종 답변을 제출하기 전에 책임을 조정해야 하는 공유 작업 공간의 인간-AI 팀을 살펴본다. Collaborative Gym 환경과 DiscoveryBench 작업을 사용하여, 시뮬레이션된 인간 협력자를 추가하는 것이 성능을 향상시키는 경우와 추가 협력자가 조정 오버헤드로 작용하는 경우를 분석한다. 1,482회의 세션을 통해, 팀이 기여를 조정할 구조가 부족할 경우 관련 협력자를 추가하는 것이 성능을 낮출 수 있음을 발견했다. 또한, 공유 그룹 메모리와 시뮬레이션된 인간 참여자(HITL) 게이트를 결합한 스캐폴딩을 평가했으며, 이는 특히 세 사람 팀에서 더 높은 평균 성능을 나타내었다.