대학을 위한 설정 권장 사항 (H200 대 RTX 6000 Pro) > 생성형 AI 구축 참고자료

본문 바로가기

사이트 내 전체검색

뒤로가기 생성형 AI 구축 참고자료

대학을 위한 설정 권장 사항 (H200 대 RTX 6000 Pro)

페이지 정보

작성자 관리자 작성일 25-06-09 10:51 조회 35 댓글 0

본문

현재 우리는 두 가지 주요 옵션을 고려하고 있습니다.

  1. 4개의 NVIDIA H200 GPU(141GB)

  2. 8x NVIDIA RTX 6000 Pro 블랙웰(96GB)

어떻게 생각하나요?


-------


상황에 따라 다릅니다. H200 4개를 모두 연결해서 훈련에 사용한다면 NVLink가 훨씬 빠릅니다. FP64가 필요하다면 H200은 필수입니다.

하지만 fp8 deepseek(현재 오픈 sota)를 실행하려면 이에 맞는 추가 vram이 필요합니다.

댓글목록 0

등록된 댓글이 없습니다.

Copyright © 소유하신 도메인. All rights reserved.

사이트 정보

회사명 : 회사명 / 대표 : 대표자명
주소 : OO도 OO시 OO구 OO동 123-45
사업자 등록번호 : 123-45-67890
전화 : 02-123-4567 팩스 : 02-123-4568
통신판매업신고번호 : 제 OO구 - 123호
개인정보관리책임자 : 정보책임자명

PC 버전으로 보기