Divided by Zero에 오신 걸 환영합니다. IT테크, 스타트업 그리고 자본시장에 대한 2차적 사고를 공유합니다.
GPT-3에서 GPT-4로의 전환은 그야말로 충격이었습니다. 단순히 똑똑해진 수준이 아니라, 아예 다른 종의 AI가 나타난 것 같았죠. 변호사 시험에서 하위 10% 성적을 내던 모델이 갑자기 상위 10%를 차지하는 괴물이 되었으니까요. 이 폭발적인 성장의 비결은 단순하고 무식했습니다. 바로 스케일링(Scaling). 더 많은 데이터, 더 많은 컴퓨팅 파워를 때려 넣으면 AI가 알아서 똑똑해진다는 법칙이 지배하던, 얼마안됐지만, AI 성능 발전의 황금기였습니다.
의견을 남겨주세요