[잡담] 연구자 관점에서 본 AI의 살짝 어두운 이야기

안녕하세요 현재 ICLR 리뷰탈 (리뷰어에 대한 질의 응답 및 토론) 중인 김폭스 입니다.

며칠 째 묵묵부답인 리뷰어 답변을 기다리면서, AI 연구의 좀 어두운 면을 소개해드릴까 합니다.

학술활동이 어떻게 진행되는지 잘 모르시는 분을 위해 간단히 절차부터 소개드리겠습니다.

한 연구팀이 자신이 연구한 내용을 논문으로 작성하면, 학회 또는 학술지에 제출합니다. 이 때, 동료평가 (리뷰)를 거치고 논문에 부족한 내용을 보완, 수정하여 충분한 품질임이 확인이 되면 학회 또는 학술지에 게재 됩니다.

학회 또는 학술지에 따라서는 충분한 공정성을 위해 동료 평가자 (리뷰어) 의 신원과 논문 저자의 신원을 모두 가리는 더블 블라인드 방식을 원칙으로 합니다.

AI 연구 뭐가 문제일까? 사람이 너무 많다

현재 AI 연구의 가장 큰 문제는 사람이 너무 많다는 점입니다. Reddit이나 X (Twitter) 같은 커뮤니티를 보면 모두가 불평하는 내용이 있습니다.

리뷰 퀄리티가 별로다.

좋은 학회에 제출하는 논문 편수가 워낙 늘어나고, 좋은 리뷰어를 찾지 못해 현재 대학원에 재학중인 학생들이 리뷰어를 맡고 있다보니 리뷰 ...