AI 안전성 논의와 독립 평가자의 필요성
How the AI apocalypse story escaped containment
OpenAI의 Sam Altman과 xAI의 Elon Musk가 Anthropic CEO Dario Amodei의 제안에 동참하여 AI 연구소에 독립 평가자를 초대하자는 주장을 했다. Amodei는 AI 모델의 위험 수준을 평가하기 위해 체크포인트를 살펴봐야 한다고 제안하며, 모델의 능력에 따라 정렬 속성 인증이 필요하다고 언급했다. 그러나 AI 모델이 인류에 위협이 되기 위해서는 독립적으로 작동하고 비밀리에 학습할 수 있는 수준에 도달해야 하며, 현재의 AI 연구소들은 그러한 시나리오를 구축하고 있지 않다고 강조했다. AI 안전성에 대한 논의가 과장되고 있으며, 이는 신중한 토론을 대체할 위험이 있다.
Amodei는 모델의 위험 평가를 위해 체크포인트를 활용해야 한다고 제안했다.
원문 출처
Semafor Technology