엔비디아, '1조 파라미터' 네모트론4 AI 모델 개발

AI 요약

엔비디아가 1조개 안팎의 매개변수를 갖춘 차세대 오픈 AI 모델 '네모트론4'를 개발 중이며, 이는 5500억개 규모의 네모트론3 울트라보다 약 두 배 큰 모델로 일부 학습 데이터와 모델 구조는 결정됐지만 최종 학습은 아직 시작되지 않았고 계획대로라면 이르면 올해 늦가을 공개될 수 있습니다. 엔비디아는 오픈 AI 생태계 확대를 위해 네모트론 연합을 출범시키고 리플렉션AI, 커서, 싱킹머신스랩, 미스트랄AI 등과 학습 데이터·모델 설계·평가 방법을 공동 개발하는 한편, 자체 데이터센터뿐 아니라 자사가 구매한 클라우드 서버를 다시 빌려 활용하는 등 대규모 컴퓨팅 자원을 투입하고 있으며 다년간 클라우드 서비스 계약 약정액은 약 270억달러입니다. 목표는 세계 최고 수준의 오픈 모델과 경쟁할 수 있는 성능을 확보하는 것이며 폐쇄형 최첨단 모델을 넘어서는 것이 목표는 아니라고 전해졌습니다.