AMD, 인스팅트 MI325X·5세대 에픽 정식 출시··· 'AI 슈퍼사이클 잡는다'

IT동아 · 2024.10.11 06:08:27

[IT동아=샌프란시스코]

“우리는 고성능 컴퓨팅이 전 세계를 구성하는 기본 요소라고 믿으며, 클라우드, 의료, 산업, 자동차, 통신, PC, 게임 등 세계에서 가장 중요한 과제를 해결하기 위해 기술을 사용하고 있다. 오늘날 매일 수십억 명의 사람들이 AMD 제품을 사용하며, 그중 가장 흥미로운 응용 분야는 AI다. 앞으로도 이 분야에 더 많은 컴퓨팅이 필요해진다”

리사 수 AMD 최고경영자가 샌프란시스코 모스콘 센터에서 열린 ‘어드밴싱 AI’ 행사의 기조연설을 진행 중이다 / 출처=IT동아

글로벌 반도체 설계 기업 AMD가 현지시간으로 10월 10일, 미국 캘리포니아주 샌프란시스코 모스콘 센터에서 ‘어드밴싱 AI’ 행사를 열고 새로운 인스팅트 AI 가속기 및 서버용 에픽 프로세서, 네트워킹 장비, 기업용 프로세서 등을 공개했다. 이번에 출시된 AMD 인스팅트 MI325 AI 가속기는 인스팅트 MI300의 후속으로, 256GB의 HBM3E 메모리로 엔비디아 H200과 경쟁한다.

5세대 에픽(EPYC) 프로세서는 앞서 대만 컴퓨텍스 2024에서 주요 정보가 사전에 공개된 바 있으며, 이번 행사를 통해 공식 출시하고 올 하반기 판매를 시작한다. AMD의 기업용 제품군인 라이젠 프로 AI 300 프로세서 제품군, 데이터센터용 AMD 펜산도 폴라라 400 네트워킹 인터페이스 카드, 펜산도 셀리나 400 데이터 처리 장치(DPU)도 함께 공개됐다.

AMD MI325X AI 가속기 출시, 엔비디아 H200과 경쟁

AMD는 지난해 12월, 데이터서버용 AI 가속기인 인스팅트 MI300 시리즈를 공식 출시했다. 이후 5월부터 제품 인도가 시작됐고, 현재 마이크로소프트, 오픈AI, 메타에서 활용 중이며, 코히어, 스태빌리티AI, 에센셜AI를 비롯한 25개 주요 파트너사에서 운용 중이다.

AMD의 새로운 AI 가속기, AMD 인스팅트 MI325X가 공식 출시됐다 / 출처=IT동아

이번에 출시되는 인스팅트 MI325X는 고성능 버전인 MI300X의 후속으로, 전작의 192GB HBM3에서 더 상향된 256GB HBM3E 메모리를 갖추며, 메모리 대역폭도 초당 5.3TB에서 6TB로 늘었다. 8개를 연결한 구성에서는 초당 896GB의 인피티니 패브릭 대역폭으로 연결되며, 2TB의 HBM3E 메모리와 48TB의 대역폭을 갖춘다. 성능은 FP8 기준 20.8PF(페타플롭스), FP16 기준 10.4PF를 제공한다.

인스팅트 MI325X는 엔비디아 H100 및 H200의 대체제로 나선다 / 출처=IT동아

엔비디아의 고성능 AI 가속기인 H200과 비교해도 1.3배 높은 FP16 및 FP8 성능과 1.8배 높은 메모리 용량, 1.3배 높은 메모리 대역폭을 갖춘다. 추론 성능은 H200 HGX 시스템과 비교해 라마 3.1 405B 모델을 1.4배 더 빨리 처리하며, 라마 3.1 70B 모델은 1.2배 빨리 처리한다. 훈련 기능도 크게 강화돼 엔비디아 H200과 인스팅트 MI325X를 단일 비교했을 때 라마 2 7B 모델을 1.1배, 8개 구성에서는 라마 2 70B 모델과 동등한 처리 성능을 제공한다.

2025년 출시 예정인 인스팅트 MI350 시리즈도 첫선

차세대 AI 가속기인 MI350 시리즈의 MI355X에 대한 자료도 일부 공개됐다 / 출처=IT동아

아울러 2025년 출시 예정인 차세대 제품인 인스팅트 MI350 시리즈에 대한 주요 정보도 공개됐다. MI350 시리즈는 3nm 공정 기반에 CDNA4 아키텍처를 활용하며, 288GB의 HBM3E 메모리와 FP4 및 FP6 처리를 새롭게 지원한다. 8대를 구성한 구성에서는 최대 2.3TB의 HBM3E 메모리와 64TB의 메모리 대역폭을 갖추며, 이를 통해 18.5PF(페타플롭스)의 FP16, 37P FP8, 새로 지원하는 FP6 및 FP4도 각각 74PF의 처리 성능을 지원한다.

세부 모델인 인스팅트 MI355X는 MI325X와 비교해 1.8배 빠른 FP16, FP8 처리 성능을 제공한다. 3세대 이전 제품인 MI300과 비교하면 7.4배 향상된 AI 플롭스 처리 성능, 처리 가능한 모델 크기는 6배나 커졌다. AMD는 올해 4분기 중 인스팅트 MI325X 생산을 시작하고, 내년 1분기 중 델 테크놀로지스, 에비덴, 기가바이트, HPE 등 주요 파트너사에서 판매를 시작한다. AMD는 2025년 중 MI350을 출시하고, 26년에는 MI400 시리즈를 낼 예정이다.

밤시 보파나 AMD AI 부문 선임 부사장이 ROCm 6.2 버전에 대한 성능 향상을 소개하고 있다 / 출처=IT동아

한편 AMD 개발 생태계를 확대하기 위한 ROCm 관련 소식도 덧붙였다. AMD ROCm 6.2 버전은 6.0과 비교해 LLM 처리 성능을 최소 1.9배에서 2.8배까지 끌어올렸고, 훈련 성능 역시 평균 1.8배 향상됐다. AMD는 ROCm 호환성 향상을 위해 올해 7월 인수한 AI 스타트업 사일로AI를 투입한다. AMD 사일로 AI 조직은 약 200여 개의 유럽 언어 기반 LLM 작업을 수행한 바 있다.

5세대 에픽 최대 192코어 384스레드··· 서버 점유율 30% 노린다

AMD는 4세대 에픽 프로세서를 통해 시장 점유율을 27%까지 끌어올렸으며, 현재 350개의 OEM 플랫폼과 950여 개의 클라우드 인스턴스로 제공된다. AMD는 5세대 에픽 프로세서를 통해 30% 이상 점유율 확보를 목표로 하며, 서버 CPU 시장 주도와 전력 효율성 확보, AI 기능 강화를 핵심 목표로 설정했다.

128코어 제품은 16개의 4nm 칩을 칩렛으로 엮었고, 192코어 버전은 12개의 3nm 칩을 칩렛으로 엮었다 / 출처=IT동아

프로세서는 3/4나노미터 젠5, 젠5C 아키텍처가 혼용된다. 젠5 아키텍처는 최대 128코어 256스레드까지 있고, 젠5C 아키텍처가 최대 192코어 384스레드로 구성된다. SP5 소켓은 그대로 유지되며, 5GHz의 동작 속도와 AVX-512 명령어를 512b 데이터 패스를 최대 지원한다. 소비전력은 최소 8코어 155W에서 최대 192코어 500W로 설정된다. 메모리는 12채널 DDR5-6400을 지원하고, 소켓당 최대 6TB의 메모리를 인식한다. PCIe 5.0는 128레인에 암호화를 지원하고, CXL 2.0 규격 저장장치도 호환된다. 보안 측면에서는 트러스티드 I/O를 처음 지원한다.

1세대 에픽과 비교해 코어 수는 6배, 성능은 11배가 늘었다 / 출처=IT동아

성능 측면에서는 사이클당 명령어 처리 횟수가 기업용 클라우드 환경에서 최대 17% 향상됐고, 고성능 컴퓨팅 및 AI 처리는 37% 향상된다. SPECrate_2017_Int_처리속도는 5세대 인텔 코어 8592+ 64코어 모델을 1로 설정할 때, 192코어 에픽 9965 모델이 2.7배 빠르다. 작업 속도도 비디오 전환 속도 4배, 작업용 앱 2.3배, 오픈 소스 데이터베이스 처리 속도 4배, 이미지 렌더링 속도는 3배 늘었다. 시뮬레이션 시각화 속도는 64코어 기준 1.6배, 고성능 컴퓨팅 환경에서 모델링 및 시뮬레이션 처리는 3.9배까지 빨라졌다.

AI CPU 성능은 경쟁사 제품 대비 최대 3.8배 늘었다는 설명이다 / 출처=IT동아

AI 처리 성능 면에서는 5세대 인텔 8592+와 비교해 XG부스트 머신러닝 속도는 3배, 엔드투엔드 AI 성능 및 유사성 검색은 3.8배, LLM 성능은 1.9배 늘었다. 인스팅스 MI300을 최대로 연결했을 때 인텔 8592+ 대비 추론 성능은 8%, 학습 성능은 20% 더 늘어난다. 엔비디아 H100과 연결 시에는 GPU 추론 성능은 20%, 학습 성능은 15% 앞선다.

인텔 제온 플래티넘 8280 1000대로 구성된 서버를 에픽 9965 131개만으로 대체할 수 있다 / 출처=IT동아

공간 및 효율 측면에서는 인텔 제온 플래티넘 8280 1000개로 구성된 서버를 에픽 9965 131개만으로 대체할 수 있으며, 이때 공간 효율은 7배 정도 줄어든다. 소비전력도 68% 줄어들고, 3년 간 총 소유비용도 67% 줄인다. 가격은 8코어 제품인 9015가 최소 527달러(70만 원대)부터 시작하며, 128코어 9755가 1만 2984달러(약 1745만 원), 젠5C 아키텍처 기반의 192코어 9965가 1만 4813달러(약 1990만 원)로 설정된다.

AI PRO 300 시리즈, 네트워크 프로그래밍 지원 DPU도 출시

기업용 노트북 프로세서인 AMD 라이젠 AI 프로 300 시리즈도 공개됐다 / 출처=IT동아

AMD의 기업용 프로세서인 라이젠 프로 제품군도 AI 300 시리즈과 마찬가지로 리브랜딩 됐다. 새로운 라이젠 AI 프로 300 시리즈는 마이크로소프트 코파일럿을 지원하며, RDNA 3.5 기반의 16개 GPU 코어와 2세대 XDNA NPU를 탑재해 최대 55TOPS(초당 55조 회 연산) 성능을 낸다. 프로세서 구성은 라이젠 AI 9 HX PRO 375 및 370이 12코어 24스레드, 라이젠 AI 7 프로 360이 8코어 16스레드다.

기업용 제품인 만큼 데이터 무결성 등을 검증하는 보안 프로세서와 제어 흐름 공격 방지 기능, 보안 부팅 등을 기본 지원하고, 클라우드 베어메탈 복구와 서플라이 체인 시큐리티, 와치독 타이머가 새로운 기능으로 추가됐다.

포레스트 노로드 데이터센터 솔루션 비즈니스 유닛 수석 부사장이 AMD 3세대 P4 엔진과 이를 기반으로 한 펜산도 셀리나 400, 폴라라 400 카드를 각각 공개했다 / 출처=IT동아

AMD는 데이터서버의 프론트앤드용으로 AMD 펜산도 셀리나 DPU를, 백엔드 환경에서는 업계 최초로 울트라 이더넷 컨소시엄(UEC) 규격을 지원하는 AMD 펜산도 폴라라 400 네트워킹 인터페이스 카드(NIC)를 각각 출시한다. 셀리나 DPU는 이전 세대에 비해 2배 성능 및 대역폭을 제공하며, 최대 400GB의 처리량을 지원한다. 두 제품은 모두 샘플링 단계에 있고, 올해 4분기 중 고객을 확보한 뒤 내년 상반기에 출시된다.

올해로 재임 10년 차 맞은 리사 수, AI로 새로운 도약 간다

AMD에게 있어서 올해는 대전환의 해다. 실적이나 프로덕트 측면에서도 이상적인 상황이다 / 출처=IT동아

리사 수 AMD 최고경영자는 지난 9월 열린 골드만삭스 커뮤나코피아 & 테크놀로지 콘퍼런스에서 “AMD는 1년 주기로 AI 로드맵을 가속화하고 있다”라며, “AI 슈퍼사이클은 이제 시작”이라고 말한 바 있다. 이번에 출시된 AMD 인스팅트 MI325는 앞서 밝힌 제품 로드맵에 맞춰 출시된 첫 제품이며, 이에 대한 시장의 기대는 상당하다.

지난 7월 열린 2분기 실적 발표에서 리사 수 최고경영자는 “AI칩에 대한 수요가 급증해 올해 매출 예상치를 40억 달러에서 45억 달러로 상향했다”라고 말했고, 2분기 매출과 순이익 모두 전년 대비 9%, 19%씩 증가했다. 특히나 경쟁사인 엔비디아가 차세대 칩인 ‘블랙웰’ 출시를 약 3개월가량 늦춘 상황에서, AMD 인스팅트 MI325X는 예정대로 출시돼 AMD가 AI 시장의 수요를 조금 더 먼저 받아낼 수 있게 됐다.

리사 수 AMD 최고경영자는 “이번 주가 AMD에서 일한 지 10주년이 되는 해다. 우리의 일은 너무나 중요하고, 이 산업에 함께하게 된 점은 행운이라 생각한다. AMD는 고성능 컴퓨팅과 AI의 한계를 계속 넓히고 있다. 이것은 이제 시작이다”라고 덧붙였다.

글 / IT동아 남시현 (sh@itdonga.com)

사용자 중심의 IT 저널 - IT동아 (it.donga.com)

번호	제목	글쓴이	작성일	조회	추천
설문	손해 보기 싫어서 피해 입으면 반드시 되갚아 줄 것 같은 스타는?	운영자	24/11/18	-	-
4406	[리뷰] 경이로운 배터리 효율과 GPU 성능, 인텔 코어 울트라 7 258V	IT동아	10.18	242	0
4405	[크립토 퀵서치] 거래소에 원화 예치하면 이용료를 준다? [4]	IT동아	10.18	5009	3
4404	클라이프, "전자서명·고객관리·대회까지 일원화한 클라이밍 서비스"	IT동아	10.18	228	0
4403	엠키스코어 “고성능=고발열 고민하는 AI 데이터센터, ‘수랭식’이 해답”	IT동아	10.17	299	0
4402	인터넷 느려졌다면? PC·모바일에서 인터넷 속도 측정하는 방법	IT동아	10.17	219	0
4401	넥스트페이 AI 스토어, 0.3% 뚫고 슈퍼노바챌린지 3위	IT동아	10.17	216	0
4400	[창업도약+경북대] 셀러스 ‘종양연관 대식세포’ 활용한 항암제로 항암치료 혁신 꿈꾼다	IT동아	10.17	216	0
4399	[월간자동차] 24년 9월, 신차 판매량 반등했지만, 중고차 거래량은 줄어 [1]	IT동아	10.17	6283	1
4398	[스케일업] 두디스·말랑탱크·스크램블러·운약근답올핏·캠터·파나띠꼬 “사업 방향 설정에 유용했습니다”	IT동아	10.17	204	0
4397	항공기 설계 효율 높이는 ‘버추얼 트윈’ 기술	IT동아	10.16	207	0
4396	키사이트코리아 “계측기 넘어 R&D 종합 솔루션 기업으로”	IT동아	10.16	239	0
4395	삼성전자, AI 품은 투인원 PC, '갤럭시 북5 Pro 360' 28일 출시	IT동아	10.16	548	1
4394	비건 레더로 친환경 가치 재단하는 패션 브랜드, '투영' [45]	IT동아	10.16	6591	12
4393	공공시장에서 인정 받은 협업툴 '두레이', 업무 효율 높일 인공지능 기능 탑재	IT동아	10.16	180	0
4392	[고려대 미래내일] 청년 일경험, 생성 AI 연구 개발과 사업화까지	IT동아	10.16	201	0
4391	리치멜론 “누구나 알아볼 수 있는 캐릭터를 만들고 싶습니다” [동국대학교 캠퍼스타운]	IT동아	10.16	181	0
4390	전기차 화재 여파 벤츠…EV 판매 순위표 상단서 실종	IT동아	10.15	199	0
4389	레드햇, “오픈소스의 힘으로 AI 대중화 강하게 추진”	IT동아	10.15	248	0
4388	AMD의 목적은 '경쟁 아닌 자립'··· 인스팅트 MI325X의 출시 의의는?	IT동아	10.15	176	0
4387	카카오톡 선물하기 기프티콘, 현금 환불 받으려면?	IT동아	10.15	161	0
4386	한국거래소가 ‘금융 AI 언어 모델 경진대회’를 개최하는 이유	IT동아	10.15	1005	1
4385	차트분석 도구 ‘트레이딩뷰’ 파고들기 - 28	IT동아	10.14	184	0
4384	[신차공개] 페라리 ‘테일러 메이드 로마 스파이더’·롤스로이스 ‘고스트 시리즈 II’ 공개	IT동아	10.14	2194	2
4383	카드사 연락 없이 클릭 한 번에 내 카드 찾고 안 쓰는 카드 취소까지 된다면? [이럴땐 이렇게!]	IT동아	10.14	222	0
4382	[스타트업리뷰] 소통과 AI 더한 스타트업 재무 회계의 혁신, '그랜터'	IT동아	10.14	162	0
4381	말랑탱크 “간편하고 위생적인 눈 가습기, 닥터아이” [동국대학교 캠퍼스타운] [13]	IT동아	10.14	5785	0
4380	로봇 산업 모든 것 담은 ‘2024 로보월드’, 역대 최대규모로 열린다	IT동아	10.11	212	0
4379	[창업도약+경북대] 틀루토 “생성형 인공지능으로 학술정보 대중화와 지식 불균형 해소 나설 것”	IT동아	10.11	209	0
4378	애플, DMA 압박에 독점 생태계 무너지나	IT동아	10.11	266	0
4377	[스케일업] 파나띠꼬 [3] 마이샵온샵 “향기를 강조하기 위한 영업전략을 펼쳐라”	IT동아	10.11	258	0
4376	[생성 AI 길라잡이] 간단한 설정으로 고품질 로고 제작 ‘루카’	IT동아	10.11	185	0
4375	인텔, 애로우레이크 S 공식 출시··· AI 데스크톱 시장 연다 [1]	IT동아	10.11	1238	0
4374	아토피 원인 규명 및 치료법 도출 이끄는 ‘특화 DB 구축’	IT동아	10.11	188	0
4373	[스케일업] 두디스 [3] 한국벤처컨설팅 "서비스·솔루션, 가능성 아닌 명확함으로 승부해야"	IT동아	10.11	165	0
4372	[스케일업] 운약근답올핏 [3] 린밸류업 “IR 자료는 투자자 입장에서 작성하라”	IT동아	10.11	163	0
4371	AMD 인스팅트로 분주해진 서버 파트너사, 주요 신제품은?	IT동아	10.11	164	0
	AMD, 인스팅트 MI325X·5세대 에픽 정식 출시··· 'AI 슈퍼사이클 잡는다'	IT동아	10.11	804	0
4369	단속카메라 종류와 원리 살펴보니	IT동아	10.10	177	0
4368	기업들이 오픈소스 정책을 추구하는 이유	IT동아	10.10	173	0
4367	[리뷰] 토너 값 무서운 SMB 위한 레이저 복합기, 브라더 DCP-B7640DW 토너세이브	IT동아	10.10	1050	0
4366	[스케일업] 스크램블러 [3] 유장준 스타트업세일즈연구소장 “유통, 기초부터 천천히”	IT동아	10.10	147	0
4365	[스타트업리뷰] 브이디컴퍼니 산업용 청소기 클리버 SH1	IT동아	10.10	306	0
4364	일릭서 “저렴하고 빠른 고품질 데이터 분석 솔루션, 스탯업AI” [동국대학교 캠퍼스타운]	IT동아	10.10	138	0
4363	디캠프 ‘양보다 질’ 강조한 배치 프로그램 도입, 스타트업 성장 길잡이 역할 강화 나선다	IT동아	10.08	187	0
4362	창업-BuS 연합 IR "아이 키우듯 스타트업 특성 파악해 맞춤형 지원"	IT동아	10.08	183	0
4361	‘연중 상시 지원’으로 육성한 초격차 스타트업 한자리에 ‘창업-BuS 연합 IR’	IT동아	10.08	188	0
4360	[IT기획자의 탄생] 1. '기획' 없는 스타트업이 실패할 수 밖에 없는 이유	IT동아	10.08	170	0
4359	[스케일업] 반프 [2] 안재열 센터장 “자율적·수평적 조직 문화, 비결은 ‘존중’”	IT동아	10.08	169	0
4358	[자동차와 法] 자율주행자동차법 관련 핵심 내용과 개선사항에 대하여	IT동아	10.08	827	0
4357	‘서울시 핀테크 스타트업이 한 자리에’ 서울 핀테크 위크 2024 개최	IT동아	10.08	176	0
뉴스	김장훈, 12월 AI 콘서트 '토닥토닥' 개최....신비한 영상체험 '커밍순'	디시트렌드	14:00

최근 방문

즐겨찾기

즐겨찾기 갤러리

갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

개념글 리스트

차단하기

[IT동아 갤러리]

갤러리 본문 영역

AMD MI325X AI 가속기 출시, 엔비디아 H200과 경쟁

2025년 출시 예정인 인스팅트 MI350 시리즈도 첫선

5세대 에픽 최대 192코어 384스레드··· 서버 점유율 30% 노린다

AI PRO 300 시리즈, 네트워크 프로그래밍 지원 DPU도 출시

올해로 재임 10년 차 맞은 리사 수, AI로 새로운 도약 간다

▶ AMD 인스팅트로 분주해진 서버 파트너사, 주요 신제품은?▶ RTX 40 시리즈 단종 초읽기, 앞으로의 그래픽 카드 선택지는?▶ [투자를IT다] 2024년 10월 1주차 IT기업 주요 소식과 주가 흐름

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘

지갑 연결