AI Factory: NVIDIA가 제시하는, AI 혁신을 위한 차세대 AI 데이터센터(AIDC, AI Data Center)

AI Factory: NVIDIA가 제시하는, AI 혁신을 위한 차세대 AI 데이터센터에 대한 개념

소개

NVIDIA는 최근 컴퓨텍스에서 최신 Blackwell(블랙웰) 아키텍처를 탑재한 시스템을 발표했습니다. 젠슨 황(Jensen Huang) CEO는 이번 발표에서 NVIDIA의 파트너들과 함께 블랙웰 시스템을 기반으로 AI 기반 혁신을 가속화할 것이라고 밝혔습니다. 이 시스템은 Grace CPU와 NVIDIA 네트워킹을 포함하며, AI를 위한 데이터 센터(AIDC, AI Data Center)를 위한 새로운 솔루션을 제공하게 될 것이라고 합니다.

젠슨황 CEO는 이러한 새로운 차세대 데이터센터를 'AI Factory(AI 공장)'라고 이름붙였습니다. 그는 이 시스템을 통해 전통적인 데이터 센터를 가속화된 컴퓨팅으로 전환하고, AI를 새로운 상업적 자원으로 만드는 데 큰 역할을 할 것이라고 주장하였습니다.

이러한 AI Factory는 기존의 x86 기반 데이터 센터와 달리, NVIDIA의 새로운 시스템은 Grace 기반 프로세서와 다중 GPU 구성을 사용하여 높은 에너지 효율성과 성능을 제공합니다. 또한, 공기 냉각뿐만 아니라 액체 냉각 기술도 지원하여 다양한 환경에 맞게 최적화할 수 있습니다.

AI Factory를 위한 구성 요소

  • NVIDIA MGX: 모듈식 레퍼런스 디자인 플랫폼으로, 다양한 시스템 구성과 네트워킹 옵션을 제공합니다.

  • Blackwell 아키텍처: 고대역폭 메모리와 전용 압축 해제 엔진을 통해 데이터 처리 속도를 최대 18배 향상시킵니다.

  • GB200 NVL2: 대규모 언어 모델 추론과 데이터 처리에 적합한 플랫폼으로, x86 CPU 대비 에너지 효율이 8배 높습니다.

  • 파트너 생태계: TSMC, ASRock Rack, ASUS 등 글로벌 기술 리더와 협력하여 서버 랙(Rack)부터 냉각 솔루션에 이르기까지 필수 구성 요소를 제공합니다.

더 읽어보기

젠슨황 CEO의 COMPUTEX 키노트 다시보기




이 글은 GPT 모델로 정리한 글을 바탕으로 한 것으로, 원문의 내용 또는 의도와 다르게 정리된 내용이 있을 수 있습니다. 관심있는 내용이시라면 원문도 함께 참고해주세요! 읽으시면서 어색하거나 잘못된 내용을 발견하시면 덧글로 알려주시기를 부탁드립니다. :hugs:

:pytorch:파이토치 한국 사용자 모임:kr:이 정리한 이 글이 유용하셨나요? 회원으로 가입하시면 주요 글들을 이메일:love_letter:로 보내드립니다! (기본은 Weekly지만 Daily로 변경도 가능합니다.)

:gift: 아래:arrow_lower_right:쪽에 좋아요:heart:를 눌러주시면 새로운 소식들을 정리하고 공유하는데 힘이 됩니다~ :star_struck: