인포플라 “대답만 하던 기존 AI의 한계, VLM 기반 자동화로 극복”

IT동아

2024.05.18 15:07:37

조회 7240 추천 3 댓글 4

[IT동아 김영우 기자] 클라우드 시장의 대표주자인 아마존웹서비스(이하 AWS)가 5월 16일과 17일, 양일간 서울 코엑스에서 ‘AWS 서밋 서울 2024(AWS Summit Seoul 2024, 이하 AWS 서밋)’을 개최했다. 국내 클라우드 생태계의 현황을 조명하고 AWS의 비전을 전하는 이 행사는 2015년부터 시작해 올해로 10년 차를 맞이했다.

올해 AWS 서밋은 60여개의 파트너사가 부스를 꾸리고 2만 9000여명의 인원이 참가해 국내 클라우드 관련 행사 중 최대 규모를 뽐냈다. 특히 올해 행사는 최근 시장의 최대 화두로 떠오른 생성형 AI 관련 혁신을 이끄는 기술과 제품, 그리고 서비스가 다수 소개되어 큰 관심을 끌었다.

AWS 서밋 행사장에서 발표를 진행한 최인묵 인포플라 대표 / 출처=IT동아

AWS 클라우드 생태계에서 AI 관련 제품과 서비스를 개발하고 있는 고객사들의 사례 발표도 눈에 띄었다. 그 중에는 대기업 외에 스타트업 및 중소기업의 사례도 주목을 받았다. 17일 EXPO 세션에서 ‘생성형 AI 기반 IT 서비스 자동화 기술 및 클라우드 서비스 개발 여정’을 주제로 발표한 ‘㈜인포플라(대표 최인묵)’도 그 중의 하나다.

이날 발표를 진행한 최인묵 인포플라 대표는 반복적인 업무를 자동화하는 RPA(Robotic Process Automation) 솔루션에 대한 가능성, 그리고 한계를 명확히 하는 것으로 운을 띄웠다. 특히 기존의 스크립트 기반 RPA를 비전공자가 원활하게 이용하기 위해서는 전문가의 도움이 필요한 점을 언급했다. 또한, 웹이나 앱 내에서 이루어지는 반복 작업을 RPA로 자동화한 경우, 갑작스럽게 팝업 창의 등장이나 화면 장애 등의 돌발변수에 제대로 대응하지 못해 RPA가 정지하는 등의 문제가 있다고 지적했다.

VLM을 통해 기존 RPA의 한계를 극복할 수 있다 / 출처=인포플라

인포플라는 이러한 기존 RPA의 한계를 극복하는 방안으로 ‘VLM(Vision Language Model)’을 제안했다. 이는 거대 언어 모델, LLM(Large language model)에 이미지 처리능력을 더한 것이다. 스크립트가 아닌 화면 인식만으로 모든 문제를 해결할 수 있으며, 원격 환경도 지원이 가능한 점 등, 기존 RPA의 한계를 다수 극복할 수 있다.

이와 더불어 돌발변수에도 화면을 인식해 마치 사람처럼 능동적인 대응이 가능하며, 무엇보다 학습이 거듭될수록 능력이 향상되는 것이 가장 큰 장점이다. 이를테면 웹페이지에 텍스트를 반복 입력하는 업무를 VLM 기반으로 자동화한 경우, 작업 중 팝업창이 뜨는 돌발변수가 발생하더라도 화면 및 상황을 분석해 팝업창을 닫은 후 텍스트 박스에 텍스트를 입력하는 업무를 이어갈 수 있다. 물론 기존 RPA라도 이러한 상황에 대응하는 스크립트를 만들어 대응하는 것은 가능하겠지만, 이렇게 스크립트가 늘어날수록 오류 가능성 역시 커진다.

이와 관련, 이날 인포플라는 자사에서 개발한 ‘VLAgent(VLM + Agent)’를 제안했다. 이는 VLM을 통해 화면을 인지하고 명령을 수행할 수 있는 에이전트 모델을 의미한다. 스크립트의 수동 제작이 불필요하며, AI가 화면을 이해하고 작업 플랜 및 액션 플랜의 생성 및 실행을 자동으로 수행할 수 있는 것이 특징이다.

이는 LLM과 AI 에이전트, 그리고 업무 자동화 등의 최근의 트렌드를 한데 모은 것이다. 또한, 단순히 사용자의 질문에 답변만 하는 기존 AI 서비스와 달리, 실행을 통한 문제 해결까지 이어진다는 것도 차별점이다. 또한 기존의 모델은 고해상도 영상을 인식하고 대응하는 과정에서 지나치게 높은 처리 능력을 요구하기도 했고, 한글을 지원하지 않아 국내 사용자들이 이용하기에 불편을 주기도 했다.

‘VLAgent’의 구성 / 출처=인포플라

이에 인포플라는 이러한 문제를 해결할 수 있는 4K 고해상도 및 한글 지원, 그리고 일반 PC에서도 구동 가능한 가벼움, 그리고 데이터 학습 기능 등을 품은 자체 솔루션을 개발하게 되었다고 강조했다. VLAgent는 인포플라의 실시간 객체인식 RPA인 ‘알파카(RPACA)’를 포함해 AWS에 업로드된 상태이며, 인포플라의 AI 기반 통합 매니지먼트 시스템인 ‘아이톰스(ITOMS)’를 통해 활용할 수 있다.

이날 발표 중 인포플라는 시연 영상을 보여주기도 했다. 윈도 운영체제 기반의 PC에서 VLAgent에 “건대역에서 강남역까지 경로를 알려줘”라는 내용의 명령을 입력하자, AI가 마우스와 키보드를 제어해 바탕화면의 ‘크롬’ 웹 브라우저를 실행하고 ‘구글 지도’ 서비스를 선택한 후, 출발지(건대역)와 도착지(강남역)을 입력해 경로를 검색하는 과정까지 자동 완료했다.

VLAgent의 시연 영상을 소개하는 최인묵 인포플라 대표 / 출처=IT동아

한편, 최인묵 인포플라 대표는 이날 발표를 마무리하며 “우리의 솔루션은 서비스 및 업무 자동화, 시각 장애인 지원, 엔터테인먼트 사업, 교육 및 제조, 의료, 고객서비스 등 다양한 분야에서 활용이 가능하다”며, “사실상 국내에선 최초의 시도이며, 해외에서도 유사한 사례를 찾기 힘들다”고 강조하기도 했다.

글 / IT동아 김영우(pengi@itdonga.com)

사용자 중심의 IT 저널 - IT동아 (it.donga.com)

▶ [생성 AI 길라잡이] 더 사람 같아진 AI, 'GPT-4o'는 어떻게 다를까?▶ 10년 차 맞은 AWS 서밋 서울··· '국내 최대 IT·클라우드 행사로 자리매김'▶ 국내 기업 열에 일곱은 "이제 AI 활용 못 하는 직원은 고용 안 해"

고정닉 0

원본 첨부파일 4본문 이미지 다운로드

전체 댓글 0개

등록순

본문 보기

타인의 권리를 침해하거나 명예를 훼손하는 댓글은 운영원칙 및 관련 법률에 제재를 받을 수 있습니다.
Shift+Enter 키를 동시에 누르면 줄바꿈이 됩니다.

갤러리 리스트
번호	제목	글쓴이	작성일	조회	추천
설문	손해 보기 싫어서 피해 입으면 반드시 되갚아 줄 것 같은 스타는?	운영자	24/11/18	-	-
3856	두루·무의 “모두의1층이니셔티브로 장애 인식·접근성 개선”	IT동아	05.29	127	0
3855	[자동차와 法] 음주운전 시 위드마크 공식 적용의 문제점에 대하여	IT동아	05.28	931	0
3854	[신차공개] 기아 'EV3'·벤틀리 '더 뉴 컨티넨탈 GT' 론칭 예고	IT동아	05.28	163	0
3853	[뉴스줌인] 내연기관차 이어 전기차 찍은 LG전자 웹OS, 다음 목표는?	IT동아	05.28	232	0
3852	글로벌 가상자산 정책 동향 ‘제도 틀 안에서 규제 공백 보완’	IT동아	05.28	143	0
3851	샥즈, 오픈스윔 프로·오픈핏 에어 출시···오픈형 이어폰 1위 입지 굳힌다	IT동아	05.28	293	0
3850	서울과기대의 제조창업 지원, '밀도있는 심화 과정'으로 민다	IT동아	05.28	158	0
3849	아직도 안 찾고 쌓이는 숨은 보험금, 이 기회에 찾아볼까? [1]	IT동아	05.27	1100	0
3848	자동차 에어컨 필터 고를 땐 이렇게! [이럴땐 이렇게!]	IT동아	05.27	1016	0
3847	차트분석 도구 ‘트레이딩뷰’ 파고들기 - 12	IT동아	05.26	214	0
3846	[자동차 디자人] 英 오프로더 SUV ‘그레나디어’ 디자이너 ‘토비 이큐어’	IT동아	05.24	255	0
3845	가상자산 시장 ‘거래량·수익 상승, 원화·코인 마켓 격차 뚜렷’	IT동아	05.24	231	0
3844	[농업이 IT(잇)다] 전통주로 과거ㆍ현재ㆍ미래를 잇는 나루 되겠다, 한강주조 고성용 대표	IT동아	05.24	239	1
3843	[IT하는법] 잘 사용하지 않는 MS 원드라이브, 사용 해제하는 방법 [4]	IT동아	05.24	4822	1
3842	‘천비디아’ 달성한 엔비디아, 독주할까? 반도체주와 함께할까?	IT동아	05.24	223	0
3841	SEC, 이더리움 현물 ETF 승인 “증권거래법 요건 충족”	IT동아	05.24	245	0
3840	벤처 투자 80%가 수도권 편중··· '투자 해결사'로 나선 부산창경	IT동아	05.24	236	0
3839	국내 통신3사 모두 "이제 우리는 AI 기업" [16]	IT동아	05.23	2331	1
3838	[IT애정남] 갤럭시 '생성형 편집', 어떻게 해야 잘 될까요?	IT동아	05.23	429	0
3837	즉석 카메라로 이런 ‘손맛’이? ‘인스탁스 미니 99’ 출시	IT동아	05.23	303	0
3836	스타트업 해외 진출 시 알아야 할 정보 공유 ‘라이징 스타트업 콘서트4’	IT동아	05.23	329	0
3835	[IT애정남] 해외 구매폰에 국내 유심 쓰는데 음성 통화 안되면? [1]	IT동아	05.23	1183	3
3834	퀄컴, 코파일럿+ PC 등장에 'AI 허브 및 개발 도구'로 지원 사격	IT동아	05.23	248	0
3833	네카오, 글로벌 공략 갈 길 바쁜데…일단 멈춤	IT동아	05.23	199	0
3832	2025년 상반기 탄생할 주식 대체거래소(ATS), 이렇게 달라진다	IT동아	05.23	346	0
3831	AMD, 에픽·MI300X 투트랙으로 AI 산업 주도권 확보 나서	IT동아	05.22	207	0
3830	'직장인 3명 중 1명, 데이터 도출 어려워'··· AI 기반 자동화가 해답될까?	IT동아	05.22	274	0
3829	산행 보조부터 산불 진화까지...'입는 로봇' 활용처 확대 [1]	IT동아	05.22	5194	1
3828	대거 출시 예고한 Arm CPU 기반 윈도우 PC, 뭐가 다를까?	IT동아	05.22	302	0
3827	비트코인 피자데이, 업비트·빗썸 “피자 2024판 쏜다” [17]	IT동아	05.22	7306	4
3826	[생성 AI 길라잡이] 음성과 이미지만 있으면 영상을 만든다 ‘런웨이ML’	IT동아	05.21	2265	0
3825	가속 페달 밟은 검색광고 시장 경쟁, 보라웨어 ‘AI 검색광고 관리 솔루션에 주목해야 되는 이유	IT동아	05.21	214	0
3824	부르면 달려오는 '이동형 전기차 충전기' 시장 기지개 [14]	IT동아	05.21	2143	0
3823	MS, '코파일럿 플러스 PC' 발표…AI 시대의 새로운 PC 제시	IT동아	05.21	266	0
3822	업비트·빗썸, 1분기 실적 개선···투자자 보호·서비스 개선에 주력한다	IT동아	05.21	192	0
3821	GPT4o와 GPT4 비교해 보니··· '사람 대 AI의 근본적인 접근 방식 바꿔' [6]	IT동아	05.21	1545	3
3820	삼성전자, '비스포크 AI 콤보' 에센셜 화이트 색상 출시…색상 라인업 강화	IT동아	05.20	251	0
3819	채팅창 넘어 일상으로…'만능 AI 비서' 시대 온다	IT동아	05.20	623	0
3818	오늘부터 시끄러운 불법 튜닝 오토바이 집중 단속 [6]	IT동아	05.20	789	6
3817	AWS 서밋 행사장에서 펼쳐진 훈훈한 ‘프리킥’	IT동아	05.20	223	0
3816	[주간투자동향] 라피치, 60억 원 규모 투자 유치	IT동아	05.20	194	0
3815	키보드의 윈도 키, 최대한 활용하려면 이렇게![이럴땐 이렇게!] [5]	IT동아	05.20	1675	16
	인포플라 “대답만 하던 기존 AI의 한계, VLM 기반 자동화로 극복” [4]	IT동아	05.18	7240	3
3813	6월 인공지능ㆍ반도체 시장 엔비디아 손에 달렸다	IT동아	05.17	282	0
3812	[시승기] 시대를 초월한 디자인 DNA…’포르쉐 911 카레라 쿠페’	IT동아	05.17	357	0
3811	[IT신상공개] 입맛대로 고르는 저음, 소니 얼트 파워 사운드	IT동아	05.17	544	1
3810	"코바코의 대국민 AI 광고 제작 서비스, 네이버가 함께합니다"	IT동아	05.17	267	0
3809	[생성 AI 길라잡이] 더 사람 같아진 AI, 'GPT-4o'는 어떻게 다를까? [2]	IT동아	05.17	1432	1
3808	차트분석 도구 ‘트레이딩뷰’ 파고들기 - 11	IT동아	05.16	403	0
3807	[뉴스줌인] PC 2대 연결해 하나처럼? 인텔 ‘썬더볼트 쉐어’ 기술 이모저모 [5]	IT동아	05.16	2364	0
뉴스	[포토] 혜리, 애교 한가득	디시트렌드	18:00