머스크 "그록 4.8, 이번 주 사전학습 마친다"

일론 머스크가 차세대 모델 '그록 4.8'의 사전학습이 이번 주 안에 끝난다고 밝혔습니다. 매개변수 규모가 기존 그록 4.6(1조5000억개)보다 크게 늘어난 2조5000억개에 달하며, 새로 도입한 C++ 기반 소프트웨어 스택과 엔비디아 GB300 GPU로 학습을 진행 중이라고 설명했습니다.

사전학습이 끝나면 바로 강화학습 단계로 넘어갈 예정이며, 정식 사양이나 출시 일정은 아직 공개되지 않았습니다. 매개변수 규모가 이전 세대보다 크게 늘어난 만큼 추론 능력과 응답 품질에서도 유의미한 향상이 있을지 업계의 관심이 쏠리고 있습니다. 최신 GPU를 활용한 대규모 학습이 순조롭게 마무리되면 xAI의 차세대 모델 경쟁력에도 긍정적인 영향을 줄 것으로 전망됩니다.

출처: AI타임스