“AI가 이걸 할 수 있으면 깨워줘”… 10년간 쌓인 826개의 기준은 지금 어디쯤일까
Wake me up when AI can...
한 개발자가 2016년부터 2026년까지 Hacker News에 올라온 “AI가 ~하면 그때 믿겠다” 식의 댓글 약 800개를 모아 투표에 부쳤다. 9,700명이 10만 표를 던진 결과, 826개 중 112개는 “명백히 달성”으로 판정됐고 78개는 팽팽한 논쟁으로 남았다. 코딩과 텍스트 작업은 대부분 통과했지만, 자기 출력의 진위 검증이나 새로운 이론 창출, 3AM 장애 대응 같은 항목은 여전히 논란의 중심이다. 튜링 테스트는 조건을 붙일수록 통과율이 떨어지는 ‘골대 옮기기’의 전형으로 드러났다.
만약 LLM을 매일 쓰면서 메모나 블로그를 남기지 않는다면, 지난 세월 동안 무엇에 감탄했는지 되돌아보기가 어렵다.
- smcg
음, 하지만 이건 전부 프로그래밍 작업이잖아. AI는 대부분 사람들의 삶에 의미 있는 긍정적 변화를 가져오지 못했고, 많은 영역에서는 부정적인 영향을 끼치고 있어.
- baal80spam
이거 목표를 슬쩍 옮기는 얘기인가?
- ghusto
"AI가 좋은(단어 샐러드가 아닌) 새로운 설명 이론을 만들어낼 수 있을 때" 같은 말은 중요한 점을 놓치고 있어. 내가 비꼬는 식으로 설명해볼게:
"사람이 좋은(단어 샐러드가 아닌) 새로운 설명 이론을 만들어낼 수 있을 때"
우리 자신을 과대평가하지 말자. 애초에 우린 많은 것들을 그다지 잘하지 못했어. 그런데 AI에게는 실수 제로라는 달성 불가능한 기준을 들이대고 있어.