AI가 천체물리학 논문 15만 편을 읽고, 아무도 고치지 않은 오류 872개를 찾아냈다
I had AI read my entire field, Theoretical Astrophysics
Caltech에서 박사 학위를 받은 저자가 Claude를 이용해 TAPIR 연구실의 논문 4,093편과 그 인용 관계를 따라 158,059편, 인용 554,670건을 지도로 만들었다. 전체 텍스트를 확보한 50,269편을 스크리닝하고, 가장 많이 인용된 논문 659편의 계산을 직접 다시 돌려 검증한 결과 오류 872개를 확인했는데, 그중 367편의 논문이 오류를 그대로 인용했고 비판한 논문은 68편뿐이었다. 인용된 오류의 절반은 7년이 지나도 여전히 복사되고 있었다. 모델 비용은 정가로 약 2,720달러, 검증된 오류 하나당 약 3달러였다.
이 분야가 아는 것의 대부분은 지난 20년 사이에, 아직 이메일에 답장할 수 있는 사람들에 의해 쓰였다.