‘NPU가 핵심’ 인텔ㆍAMD, 온-디바이스 AI 경쟁 본격화

IT동아 · 2024.03.27 01:41:12

PC 장비 시장도 인공지능에 대응하고 있다. / 출처=셔터스톡

[IT동아 강형석 기자] 곳곳에서 인공지능이라는 단어를 쉽게 접할 수 있다. 간단한 명령만으로 원하는 정보를 알려주거나 창작물을 만들어낸다. 시장 반응도 뜨겁다. 그래픽 처리장치(GPU)의 인기와 함께 반도체 기업의 실적은 꾸준히 상승 중이며 인공지능이라는 단어가 없으면 주목받지 못할 정도가 되었다.

PC 시장도 예외는 아니다. 인공지능을 배우거나 학습 등을 위해 고성능 중앙처리장치와 그래픽카드 수요가 꿈틀거리고 있다. IT 시장분석 및 컨설팅 기관인 한국 IDC의 자료에 따르면 국내 PC 출하량은 약 480만 대로 지난해 대비 17% 감소했으나 온디바이스 인공지능(AI)에 대한 관심이 PC 시장에 긍정적 모멘텀으로 작용할 것이라 전망했다. 그만큼 인공지능에 대한 기대감이 크다는 것을 말해준다.

다만 인공지능 장비는 그래픽 처리장치에 집중되어 있다. 인텔, AMD, 엔비디아 모두 그래픽 처리장치를 내놓았지만 비교적 빨리 인공지능 분야에 뛰어든 엔비디아에 시선이 몰리는 상황. 이에 중앙처리장치를 개발하는 인텔과 AMD는 변화하는 시대에 맞춰 새로운 카드를 들고 경쟁을 펼치고 있다.

‘신경처리장치(NPU)’가 뭐길래?

지금까지 PC 시스템의 축을 이끄는 처리장치를 꼽는다면 중앙처리장치(CPU), 그래픽 처리장치(GPU)가 있다. 기본적으로 데이터 처리 명령어가 입력되면 메모리를 거쳐 각 처리장치의 코어가 이를 연산한 후 결과를 출력하는 형태다. 과거에는 이 명령어를 순차적으로 처리했다면 현재는 부하에 따라 유연하게 대처해 효율성을 높인 점이 다르다.

그래픽 처리장치는 각 코어들이 부동소수점을 병렬 연산하면서 학습과 추론을 가속화하는데 초점이 맞춰져 있다. 위 이미지는 엔비디아 H100의 구조. / 출처=엔비디아

반면 신경처리장치(NPU)는 처음부터 많은 데이터를 빠르게 처리하는데 특화된 설계를 갖는다. 사전에 정의된 데이터를 학습해 결과를 내는 머신러닝(Machine Learning)이 아닌 대규모 데이터에서 스스로 학습하는 딥러닝(Deep Learning)에 더 유리한 형태다. 신경처리장치는 인공지능 처리에 필요한 제어와 산술 논리 구성 요소를 바탕으로 한다. 데이터를 병렬 처리하는 것은 그래픽 처리장치와 같지만, 학습과 심화 학습 알고리즘을 실행 시 더 빠른 결과 도출이 가능하다.

PC 시스템은 이런 부분을 중앙처리장치, 그래픽 처리장치가 도맡아 왔다. 칩 안에 수천, 수만 개에 달하는 명령어 처리장치(코어)로 다수의 데이터를 한 번에 처리하는 그래픽 처리장치가 주목받기 시작한 것도 이 때문이다. 하지만 두 장치는 큰 공간을 차지할 뿐만 아니라, 많은 전력을 쓴다. 일반적인 고성능 중앙처리장치가 100~200W 사이, 고성능 그래픽카드 또한 300~400W 가량을 소모한다.

반면 신경처리장치를 도입하면 이 부분을 어느 정도 극복할 수 있다. 대규모 연산에 특화된 설계를 바탕으로 불필요한 요소를 없애는 게 가능하다. 칩 안에 자리해 내부의 입출력 자원을 사용하는 형태로 구성되기에 전력소모량이 적다. 아직은 그래픽 처리장치 활용도가 높지만, 신경처리장치는 모바일용 중앙처리장치를 중심으로 빠르게 도입되면서 자리를 잡아가는 중이다.

인텔ㆍAMD, 중앙처리장치에 신경처리장치 도입 ‘온-디바이스 AI 경쟁’

인공지능 연산을 그래픽 처리장치에 의존하던 PC 시장에 변화가 생겼다. 인텔, AMD가 중앙처리장치 내에 신경처리장치를 집적하면서다. 인텔은 새로 개발한 모바일 PC용 중앙처리장치 ‘코어 울트라(Core Ultra)’부터, AMD도 ‘라이젠(Ryzen) 7040’ 계열을 시작으로 적용 범위를 확대하고 있다. 바야흐로 PC판 ‘온-디바이스 인공지능(On-Device AI)’ 경쟁이 본격화된 모양새다.

기기 자체에 인공지능 처리가 가능한 장치를 온-디바이스 인공지능라 부른다. 우리가 사용하는 인공지능 서비스 대부분은 온라인 연결이 이뤄져야 한다. 대규모 인공지능 데이터 학습이 이뤄진 데이터센터를 통해 결과를 받기 때문이다. 이와 달리 온-디바이스 인공지능은 기기 내에서 데이터를 처리하기 때문에 결과 전송에 따른 지연 시간이 줄고 다양한 방법으로 활용하는 것도 가능하다.

인텔은 코어 울트라를 시작으로 신경처리장치를 도입해 인공지능 시대에 대비했다. / 출처=인텔

무엇보다 PC 시스템 자체를 유연하게 구성할 수 있다는 장점이 있다. 중앙처리장치만으로 인공지능 처리가 가능하니 그래픽 처리장치는 선택사항이 된다. 전력과 부피를 동시에 줄이거나 비용에 대응하는 등 PC 선택의 폭이 커진다. 현재 신경처리장치가 적용된 프로세서는 주로 노트북 PC에 쓰이는 모바일 칩에 집중되어 있지만, 향후 시장 상황에 따라 데스크톱용 칩으로 확대될 가능성이 높다.

인텔 코어 울트라에 적용된 신경처리장치는 약 34TOPS(초당 조 연산) 수준의 성능을 제공하는 것으로 알려져 있다. 여기에 어도비, 줌, 돌비, 시스코 등 100여 기업과 협업해 다양한 소프트웨어에서 신경처리장치가 개입할 수 있도록 준비하고 있다. 윈도우 11 운영체제에 도입된 다이렉트ML을 빠르게 적용하기도 했다.

AMD도 라이젠 7040 제품군에 신경처리장치를 적용했다. / 출처-AMD

AMD는 약 38TOPS 정도의 성능으로 상대적 우위를 점하고 있다. 그러나 경험도 중요하기에 어도비를 포함해 메타, 블랙매직 디자인 등과 협업하는 부분을 강조하고 있다. 다만 신경처리장치가 탑재됐어도 윈도우 11 운영체제 내에서는 아직 정보를 확인할 수 없는 상황이다. AMD는 빠른 시일 내에 윈도우 11 운영체제에서도 장치를 쓸 수 있도록 지원할 예정이다. 또한 라이젠 7040 제품군의 차기 칩을 빠르게 선보여 경쟁 우위를 가져간다는 계획이다.

온-디바이스 인공지능 분야를 놓고 인텔과 AMD가 본격적인 힘겨루기에 돌입했지만, 시장은 아직 그래픽 처리장치를 더 선호하는 분위기여서 흐름을 돌리기에는 준비가 더 필요해 보인다. 온-디바이스 인공지능은 특히 개인 경험이 중요하다. 온라인 서비스가 아니라 기기 내 설치된 소프트웨어 환경 내에서 인공지능관련 기능이 구현되어야 중요성을 인지한다. 따라서 두 제조사의 소프트웨어 지원 규모가 승패를 좌우할 것으로 예상된다.

글 / IT동아 강형석 (redbk@itdonga.com)

사용자 중심의 IT 저널 - IT동아 (it.donga.com)

번호	제목	글쓴이	작성일	조회	추천
설문	나라가 위기에 처하면 가장 먼저 나설 것 같은 스타는?	운영자	24/12/09	-	-
3619	벤틀리와 한국 현대미술의 만남…‘컨티넨탈 GT 코리아 에디션’	IT동아	03.27	312	0
3618	레노버, 인텔·MS와 손잡고 AI PC 시대 연다 [3]	IT동아	03.27	1031	4
	‘NPU가 핵심’ 인텔ㆍAMD, 온-디바이스 AI 경쟁 본격화	IT동아	03.27	148	0
3616	레노버, 96 코어 품은 워크스테이션, ‘씽크스테이션 P8’ 출시	IT동아	03.26	185	0
3615	[EV 시대] 사용자 중심으로 진화하는 모빌리티	IT동아	03.26	147	0
3614	반독점법 피소된 애플... 왜 美 정부는 애플을 때릴까? [6]	IT동아	03.26	489	1
3612	[KESIA 시드팁스] 기술로 부동산 투자 대중화 꿈꾸는 스타트업 ‘원컵’	IT동아	03.26	160	0
3611	[2024 고려대 초창패] 마이허브 “마이링크를 이용하면 의료 AI 솔루션 도입이 수월합니다” [1]	IT동아	03.26	903	1
3610	인공지능 PC의 완성은 그래픽카드? ‘전원공급장치’도 신중히 골라야 [7]	IT동아	03.26	637	1
3609	삼성전자, 필터 값 안 드는 공기청정기 출시, 성능과 디자인은 그대로?	IT동아	03.25	281	0
3608	"지금 내 혈당은 얼마?"…카카오가 만든 AI 혈당 관리 앱 써보니 [1]	IT동아	03.25	302	0
3607	NHN클라우드, 2.0 전략으로 'AI 주권' 발판 마련한다	IT동아	03.25	133	0
3606	[리뷰] 청소 설정과 급수·배수까지 자동, 나르왈 프레오 X 울트라	IT동아	03.25	151	0
3605	[스타트업 법률실무] 기고를 마치며	IT동아	03.25	141	0
3604	[주간투자동향] 알고케어, 150억 원 규모 시리즈A 투자 유치	IT동아	03.25	208	0
3603	스마트폰으로 봄 꽃 사진 잘 찍으려면? [이럴땐 이렇게!]	IT동아	03.25	1010	8
3602	[생성 AI 길라잡이] 갤럭시 AI 활용하기 - '노트 어시스트' [5]	IT동아	03.23	6086	6
3601	[2024 고려대 초창패] 이민우 퀀텀유니버스 대표 “확장형 콘텐츠를 넘어 새로운 가치를 만들 것”	IT동아	03.22	154	0
3600	차트분석 도구 ‘트레이딩뷰’ 파고들기 - 3	IT동아	03.22	174	0
3599	[농업이 IT(잇)다] '드론·자동농약배합기'로 농작물 관리 효율 높이는 ‘아쎄따’	IT동아	03.22	150	0
3598	[뉴스줌인] 미니 각 티슈 크기의 ‘LG 시네빔 큐브’ 프로젝터, 쓸 만할까?	IT동아	03.22	167	0
3597	[2024 고려대 초창패] 아이젠텍 “40분 만에 결과 나오는 PCR 검사, 국내 기술로 가능합니다”	IT동아	03.22	1012	0
3596	클라우드 입지 구축한 오라클, 다음은 목표는 AI	IT동아	03.21	159	0
3595	‘기존 제품의 특징을 다듬어 확대했다’ 한미마이크로닉스 2024년 신제품 발표	IT동아	03.21	362	0
3594	[자동차 디자人] 폭스바겐 브랜드 디자인 총괄 ‘안드레아스 민트’ [1]	IT동아	03.21	617	1
3593	스마트 상권으로 거듭나는 춘천 원도심, ‘봄나들거리 축제’ 눈길	IT동아	03.21	148	0
3592	[리뷰] 13세대 코어 i5-1340P와 비교한 '인텔 코어 울트라 5 125H'	IT동아	03.21	1546	0
3591	[스타트업-ing] 클레온 “AWS 인퍼런시아로 GPU 서버 비용 50% 줄였어요”	IT동아	03.21	152	0
3590	식량위기 극복할 대체식품 산업, 지자체와 푸드테크 기업이 손잡고 키운다 [7]	IT동아	03.21	1090	0
3589	‘어디서든 인공지능 가속 지원’ AMD 코리아, 인공지능 시장 청사진 제시	IT동아	03.20	139	0
3588	카카오벤처스 "비만 치료제 열풍, 스타트업에 새로운 기회" [1]	IT동아	03.20	488	0
3587	스타트업 혁신 지원하는 AWS ’AWS 유니콘데이’	IT동아	03.20	138	0
3586	[월간자동차] 24년 2월, 판매 1위 모델 국산 ‘쏘렌토’·수입 ‘BMW 5시리즈’	IT동아	03.20	907	2
3585	"AI로 고객 응대하고, 광고 문구 쓰세요"…SKT, AI 기반 B2B 사업 확대 박차	IT동아	03.20	127	0
3584	퀄컴, 경제성·효율 높인 '스냅드래곤 8s 3세대' 출시	IT동아	03.20	164	0
3583	[자동차와 法] 교통사고 과실비율에 대한 고찰	IT동아	03.19	136	0
3582	‘하드웨어+소프트웨어’ 플랫폼으로 인공지능 생태계 장악 노리는 엔비디아의 속내는? [1]	IT동아	03.19	506	0
3581	엔비디아 GTC 2024 개최, ‘블랙웰’과 ‘NIMS’로 인공지능 생태계 강화 나선다	IT동아	03.19	118	0
3580	'맞춤형 지원 패키지와 함께하는 창업' 엠디글로벌넷, 경기 신사업창업사관학교 참가자 모집	IT동아	03.19	125	0
3579	[2024 고려대 초창패] 번거로운 매출·배달 관리를 하나로 ‘올인원 포스’	IT동아	03.19	115	0
3578	[뉴스줌인] 최신 보급형폰, 6년 전 고급형폰, 뭐가 더 좋을까? [10]	IT동아	03.19	1244	2
3577	[IT신상공개] 거리 맞춰 온도 조절하는 '다이슨 슈퍼소닉 뉴럴 헤어드라이어'	IT동아	03.19	479	0
3576	[IT강의실] 실물 자산을 가상자산으로 ‘RWA’ [2]	IT동아	03.19	844	0
3575	[KESIA 시드팁스] "멀지만 가까운 왕진, 똑똑의사로 모두가 누리게 할 것" [1]	IT동아	03.19	202	0
3574	가격대별 출시 예정 전기 SUV 살펴보니	IT동아	03.18	147	0
3573	AI 혁신의 중심 된 '엔비디아 GTC 2024', 국내 주요 참여 스타트업은?	IT동아	03.18	473	0
3572	[스타트업 법률실무 마스터링] 투자유치 법률실무 (4) - 계약 위반과 분쟁 방지	IT동아	03.18	770	0
3571	‘엔비디아ㆍAMD’ 인공지능 생태계 경쟁, 이제 시작이다	IT동아	03.15	213	0
3570	[시승기] 브랜드 첫 1만대 클럽 가입 이끈 ‘포르쉐 카이엔’	IT동아	03.15	219	0
3569	[2024 고려대 초창패] 라르크 인터내셔널 “인플루언서 이름 건 제품, 기획∙제조∙유통까지 책임진다”	IT동아	03.15	182	0
뉴스	[포토] 전현무 작가 개인전, 'MOO바'로 놀러오세요	디시트렌드	10:00

최근 방문

즐겨찾기

즐겨찾기 갤러리

갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

개념글 리스트

차단하기

[IT동아 갤러리]

갤러리 본문 영역

‘신경처리장치(NPU)’가 뭐길래?

인텔ㆍAMD, 중앙처리장치에 신경처리장치 도입 ‘온-디바이스 AI 경쟁’

▶ 레노버, 96 코어 품은 워크스테이션, ‘씽크스테이션 P8’ 출시▶ 인공지능 PC의 완성은 그래픽카드? ‘전원공급장치’도 신중히 골라야▶ NHN클라우드, 2.0 전략으로 'AI 주권' 발판 마련한다

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘

지갑 연결

▶ 레노버, 96 코어 품은 워크스테이션, ‘씽크스테이션 P8’ 출시 ▶ 인공지능 PC의 완성은 그래픽카드? ‘전원공급장치’도 신중히 골라야 ▶ NHN클라우드, 2.0 전략으로 'AI 주권' 발판 마련한다