갤럭시 S24 시리즈의 가장 큰 화두는 단연코 AI 기능이다. ‘갤럭시 AI’는 전에 없던 AI 혁신 기능으로 언어의 장벽을 뛰어넘어 언제 어디서나 원활한 소통이 가능하고 완전히 새로워진 사용자 경험을 선보인다. 특히 통화 중에 실시간 음성 통번역과 화면 번역을 제공하는 ‘실시간 통역(Live Translate)’ 기능에 이목이 집중됐다. 상대방의 기기에 상관없이 실시간 양방향 통화 통번역을 제공하며, 최대 13개 언어를 지원하고 사용자의 언어 설정과 각 연락처의 언어를 기억해 통화를 더 편리하게 만든다. 외부 클라우드를 통하지 않고, 기기 내에서 진행되기 때문에 보안 문제에서도 자유롭다.

실시간 통역 기능이 가장 돋보인다.

 통화 중 ‘실시간 통역(Live Translate)’ 기능이 차별화된 AI폰의 첫 번째 무기다. 갤럭시 S24는 서로 다른 언어로 소통하는 사용자 간 전화 통화 시, 실시간으로 양방향 통역 서비스를 제공한다. 실시간 통역은 ‘온디바이스 AI’를 기반으로 이뤄지며, 클라우드를 거치지 않아도 사용이 가능하다. 지원 언어는 한국어를 비롯해 중국어(간체), 영어, 프랑스어, 독일어, 힌디어, 이탈리아어, 일본어, 폴란드어, 포르투갈어, 스페인어, 태국어, 베트남어 이상 13개 언어이다.

이번에 선보인 갤럭시 S24 시리즈는 최대 13개 언어를 지원해 실시간 음성 통역뿐 아니라 화면에서 텍스트 번역까지 실시간 통역을 제공한다. 처음에는 사용 언어를 설정해야 하지만 연락처마다 사용하는 언어를 기억해 다음 통화 시에 자동 설정되며, 상대방이 갤럭시가 아니어도 심지어 어떤 종류의 전화를 사용하든 간에 실시간 통역 기능을 사용할 수 있다.

AI 기능 강화를 위해 구글과 손을 맞잡았다. 삼성전자 MX사업부장 노태문 사장과 구글의 플랫폼&에코시스템 담당 히로시 록헤이머(Hiroshi Lockheimer) 수석부사장 (왼쪽부터)

갤럭시 S24의 AI폰을 돋보이게 해주는 두 번째 AI 기능은 구글 제미나이와의 협업으로 탄생한 ‘서클 투 서치(Circle to Search)’이다. 기존에는 검색을 하려면 사용 중인 활동을 멈추고 앱을 전환해야 하는 번거로움이 있었다면, 이젠 앱을 전환하지 않고도 검색하려는 내용 위에 원을 그리는 제스처만으로 검색이 가능해진다. 홈 버튼을 길게 누른 뒤 화면의 이미지나 단어 등에 동그라미를 그리면 관련 검색 결과가 제공된다. 생성형 AI가 정리한 내용으로도 별도로 제공받을 수 있다.

이외에 삼성 노트, 보이스 레코더, 키보드 앱, 메시지 앱 등에도 제미나이가 적용됐다. 제미나이를 기반으로 노트내용 요약, 음성 녹음 텍스트화 등이 이뤄진다. 이미지 생성 AI모델인 ‘이마젠2’도 갤럭시에서 사용된다. 구글 제미나이는 삼성폰의 생성형AI 모델 공급자로 장기 계약을 맺었다.

갤럭시 S24 시리즈는 혁신적 검색 솔루션을 제공하면서도 개인 정보 보호의 중요성도 놓치지 않았다. 삼성은 구글과의 긴밀한 협력으로 검색 과정이 더욱 안전할 수 있도록 장치를 마련했다. 사용자는 ‘고급 지능 설정’ 기능을 통해 온라인 처리 방법과 AI 기능의 허용 여부를 직접 선택할 수 있다.

이 외에도 일상 생활에서 편리하게 사용할 수 있는 다양한 AI 기능이 소개됐다. 사용자가 문자를 보낼 때 타이핑 중인 단어나 구문을 바로 번역해 주고, 상대에 따라 문구의 톤을 제안하기도 한다. 뿐만 아니라, 운전 중 받는 메시지를 간략하게 요약해 알려주는 등 주행 중에도 안전하게 소통할 수 있도록 돕는다. 갤럭시 AI가 사용자들의 다양한 일상에 녹아 자연스러운 소통을 돕는 셈이다.

삼성 노트 문서 내용을 일목요연하게 정리해주는 AI 기반 '삼성 노트 어시스턴트'도 돋보이는 부분이다. 직장인들의 번거로운 회의록 작성에 큰 도움이 될 것으로 보인다. 이 기능은 구글의 최신 LLM(대규모 언어 모델)인 제미나이를 활용해 작동한다. 음성 녹음 파일 내용을 텍스트로 바꿔주는 기능에도 제미나이가 쓰인다.

구글 제미나이와의 결합으로 AI 기능이 한층 강화됐다.

한편, 구글은 인공지능(AI) 개발 경쟁의 일환으로 생성형 AI의 기반이 되는 대규모언어모델(LLM) 제미나이(Gemini)를 지난해말 공개했다. 오픈AI 챗GPT의 LLM인 GPT에 맞설 수 있는 언어모델을 내놓은 것이다. 순다르 피차이 구글 최고경영자(CEO)는 “첫 번째 버전인 제미나이 1.0은 구글 딥마인드의 비전을 처음으로 실현했다”며 “구글이 개발한 가장 포괄적이고 뛰어난 AI 모델”이라고 밝혔다.

제미나이는 이미지를 인식하고 음성으로 말하거나 들을 수 있으며 코딩 능력까지 갖춘 ‘멀티모달 AI’이다. 여기서 멀티모달 AI란 텍스트, 이미지, 영상, 음성 등 다양한 데이터 모달리티를 함께 고려하여 서로의 관계성을 학습 및 표현하는 기술을 말한다.

멀티모달 AI는 하나의 모달리티를 활용하는 것보다 다양한 작업을 수행할 수 있다. 예를 들어, 이미지로 텍스트 검색을 하거나 텍스트에서 이미지를 검색, 혹은 이미지와 텍스트를 같이 이해하는 검색이 가능하다. 이 멀티모달을 기본으로 갖춘 제미나이는 정교한 추론 기능 제공이 가능하다. 이에 따라 내용 이해와 요약, 추론, 코딩, 계획 수립 등의 작업을 훨씬 더 잘 수행할 것으로 예상된다.

삼성은 1억대의 갤럭시에 AI를 탑재하겠다고 공언했다.

이처럼 구글 제미나이가 갤럭시 S24와 결합해 새로운 AI의 영역을 개척하는 가운데 제미나이의 성능이 기대에 미치지 못한다는 혹평도 있다. 제미나이는 울트라, 프로, 나노 버전으로 출시됐는데, 삼성 갤럭시 S24에 적용된 제미나이가 어떤 평가를 받을 수 있을 지 관심이 쏠린다.

삼성전자가 2024년에 약 1억대의 갤럭시 모바일 기기에 ‘갤럭시 AI’를 탑재하겠다고 밝혔다. 노태문 사장은 “갤럭시 S24 시리즈의 갤럭시 AI는 온디바이스와 클라우드 기반의 AI 기술을 적재적소에 활용하는 ‘하이브리드 AI’를 표방하고 있다”며 “삼성전자는 2024년에 약 1억대의 모바일 기기에 갤럭시 AI를 제공해 모바일 AI의 글로벌 확산에 기여하겠다”고 강조했다. 또한, “갤럭시 AI의 전례 없는 혁신적인 사용자 경험으로 갤럭시 S24 시리즈는 전작 대비 두 자릿수 이상 판매될 것을 기대하고 있다”고 덧붙였다.