머스크가 또 허풍을 떨었다: 2.5T 파라미터 Grok4.8, 이번 주에 사전 학습 끝내고 RL로 전환

동찰 Beating AI 속보, Grok 4.7도 아직 출시되지 않았는데, 머스크가 벌써 Grok 4.8을 예고하기 시작했다. 그는 4.8이 2.5T 파라미터 규모의 모델이며, SpaceXAI의 새로운 C++ 소프트웨어 스택으로 훈련되고, 이번 주에 사전 훈련을 마친 후 강화 학습을 시작할 것이라고 밝혔다.

이 C++ 스택 역시 머스크가 이전에 반복적으로 그려온 떡밥이다. 그는 6월 말에 약 3개월 내로 Grok의 훈련 및 추론 소프트웨어를 C/C++로 대폭 재작성하고, 다수의 중간 레이어를 삭제하며, 엔비디아 GB300에 맞춰 전용 최적화를 진행하여 약 3개월 후에 "엄청난 향상"을 가져올 것이라고 말했다.

하지만 Grok 4.7은 RL 문제로 막 연기된 상태다. 머스크는 이전에 9월 12일경 출시될 것이라고 했지만, 출시 직전에 모델이 어려운 문제에서 너무 일찍 포기하고 답변 검사도 충분히 엄격하지 않다고 인정했다. 이전 떡밥도 아직 나오지 않았는데, 다음 떡밥은 이미 오븐에 들어갔다.