[생성 AI 길라잡이] 음성과 이미지만 있으면 영상을 만든다 ‘런웨이ML’

IT동아 · 2024.05.21 18:56:09

※ 생성 인공지능이 세계를 뜨겁게 달굽니다. 사람만큼, 더러는 사람보다 더 그림을 잘 그리고 글을 잘 쓰는 생성 인공지능. 생성 인공지능을 설치하고 활용하는 방법과 최신 소식을 매주 전합니다.

[IT동아 강형석 기자] 지난 2024년 3월 13일(미국 현지 기준), 오픈AI는 동영상 생성 인공지능 ‘소라(SORA)’를 공개해 업계에 충격을 줬습니다. 인공지능이 만든 다양한 영상도 함께 공개됐죠. 오픈AI 측은 올해 내에 이용 가능할 것이라는 점을 강조하고, 시장에 혼란을 주지 않도록 충분한 안전 테스트를 진행한 후 일반에게 공개할 예정입니다. 딥페이크 같은 문제가 있어서는 안 될 일이니까요.

이와 동시에 소라 정도는 아니지만, 인공지능 동영상 생성 서비스는 제공되고 있습니다. 지금 소개할 런웨이ML(RunwayML)도 그 중 하나라 할 수 있습니다. 소라처럼 명령어 입력에 따라 동영상을 생성하는 수준은 아니지만, 이미지ㆍ명령어ㆍ그림도구(드로잉툴) 등을 활용해 멋진 영상을 만들어줍니다.

영상 편집과 생성 등 다양한 인공지능 기반 서비스를 제공하는 런웨이ML. / 출처=IT동아

런웨이는 PC 웹 브라우저를 통해 사용 가능합니다. 다만 모바일은 안드로이드를 지원하지 않으며 애플 앱스토어에 ‘RunwayML’이라는 이름으로 내려받을 수 있는 상태였습니다. 아이폰, 아이패드 모두 같은 이름으로 검색이 가능합니다.

런웨이ML은 다양한 기능을 제공합니다. 영상 편집 외에 텍스트와 이미지를 활용해 영상을 생성해 주기도 합니다. 립싱크 비디오라는 기능이 참신한데 음성 파일을 등록하면 그에 맞춰 사람이 말하는 영상을 만들어줍니다. 이미지 합성, 인페인팅, 3D 효과, 해상도 향상도 지원합니다. 물론 모든 기능을 100% 자유롭게 쓸 수 없습니다. 대부분 생성형 인공지능 서비스와 마찬가지로 정해진 크레딧만큼 무료 사용이 가능하고 소진되면 이후 유료 결제를 해야 됩니다. 이 서비스는 가입하면 125 크레딧 정보가 기본 제공됩니다. 영상 기준으로 약 3개의 비디오 프로젝트를 다룰 수 있으며 텍스트로 최대 16초 가량 영상 생성이 가능합니다.

이미지/텍스트 영상 생성을 진행하려면 ‘Gen-2’라 표기된 아이콘을 클릭하면 됩니다. / 출처=IT동아

다양한 기능은 차후 다뤄보겠습니다. 먼저 확인해 볼 부분은 2세대(Gen-2)라 부르는 텍스트/이미지 영상 생성 기능입니다. 주 화면 상단에 있는 ‘Try Gen-2’를 클릭하거나 좌측 메뉴에 있는 ‘비디오 생성(Generate Videos)’을 클릭한 후 상단의 ‘Try Gen-2’를 클릭하거나 하단의 ‘텍스트/이미지에서 비디오로(Text/image to Video)’를 클릭하면 이동할 수 있습니다. 1세대(Gen-1)은 영상이 필요합니다. 영상 등록 후 텍스트를 입력하거나 도구를 활용해 원하는 형태로 영상을 변환합니다. 어떻게 보면 Gen-2가 텍스트로 영상을 생성하는 생성형 서비스라고 보는 게 좋겠습니다.

런웨이ML Gen-2 영상 생성 메뉴 구성. 바로 다룰 수 있게 준비되어 있습니다. / 출처=IT동아

Gen-2의 핵심인 텍스트/이미지 영상 생성 메뉴로 들어가면 매우 단순한 화면 구성이 출력됩니다. 크게 보면 3분할 구조인데요. 가장 좌측에 있는 메뉴는 상세 설정과 브러시, 스타일, 화면비 등을 설정할 수 있습니다. 영상을 생성한 후 세부 작업을 진행할 때 씁니다.

화면 좌측에는 이미지를 끌어넣거나 텍스트를 입력하는 창이 있습니다. 지정된 영역에 이미지를 넣거나 명령어를 입력하면 인공지능이 영상을 생성합니다. 이미지는 보유한 파일을 넣으면 되고, 텍스트는 영문 기준 320자까지 입력할 수 있습니다. 화면 우측은 영상 처리 과정과 결과물을 보여줍니다.

텍스트를 입력해 영상 생성을 명령했습니다. 약 3분 정도의 시간이 흐른 뒤 입력한 텍스트에 따라 영상을 만들어줍니다. / 출처=IT동아

명령어를 입력해 봤습니다. 절벽을 드론으로 찍은 모습을 만들어 달라고 요구했습니다. 입력을 마치니 약 3분 정도의 시간이 흐른 뒤 4초짜리 짧은 영상을 제안했습니다. 정말 입력한 대로 드론이 절벽 상공을 촬영한 듯한 영상이 출력됩니다. 영상은 기본 4초짜리를 만들어냅니다. 그리고 원하면 4초씩 연장해 생성할 수 있습니다. 물론 무료는 앞서 설명했던 105초라는 시간에서 차감됩니다. 유료 서비스라면 더 긴 영상을 만들 수 있겠습니다.

저장은 결과물 우측 상단에 있는 저장 아이콘을 클릭하면 진행됩니다. / 출처=IT동아

4초짜리 영상이 마음에 든다면 이제 저장해야 됩니다. 영상 우측 상단에 4개의 아이콘이 있습니다. 좌측부터 좋아요(하트), 저장하기, 콘텐츠 제출하기, 전체화면 재생하기 순입니다. 두 번째 아이콘인 다운로드를 클릭하면 브라우저 기본 저장 폴더에 영상이 기록됩니다. 생성된 영상은 약 8MB 정도였고 해상도는 720p(1280 x 720)보다 조금 큰 1408 x 768 픽셀이었습니다.

영상 상세 설정 내에서 해상도를 2K(2560 x 1440)로 높일 수 있습니다. 하지만 비용이 추가되므로 신중히 접근해야 되겠습니다. 무료 사용자판은 영상에 워터마크가 생성됩니다. 유료 사용자는 이를 없앨 수 있습니다. 영상은 상업 및 비상업용으로 사용이 가능하다고 합니다. 하지만 아직도 인공지능 생성 영상 사용에 대한 논란이 있으니 주의가 필요합니다.

이미지로 영상을 만드는 것도 가능합니다. 이미지와 표현하고 싶은 부분을 함께 강조한 명령어를 입력하면 더 잘 만들어집니다. / 출처=IT동아

이번에는 이미지를 가지고 영상 생성을 시도했습니다. 과거에 촬영했던 런던 타워브리지 사진을 중심으로 종이비행기가 새처럼 날아다니는 영상을 만들어달라고 요청했습니다. 역시 약 3분 정도의 시간이 지난 후 영상을 제안합니다. 종이비행기가 정말 새처럼 날개를 펄럭이며 날아다닙니다. 종이비행기 수가 많기를 원했는데 아쉽네요. 명령어에 더 많은 비행기를 넣으라고 넣을 걸 그랬습니다. 우선 이 영상도 저장했는데 흥미롭게도 3.4MB에 불과합니다. 영상 수준과 화질 등에 따라 용량 변화가 있으니 참고하세요.

런웨이ML은 이미지와 텍스트만으로 쉽게 영상을 생성하고 변환할 수 있는 생성형 인공지능 서비스입니다. 장시간 영상이 아는 초 단위의 짧은 영상 위주로 생성 가능하지만, 이 부분은 점차 늘어나리라 예상됩니다. 한글 인식은 아직 어렵지만, 간단한 영어 문장으로 영상 생성을 할 수 있습니다. 인공지능 영상 생성 혹은 변환하는 구조가 궁금하다면 한 번 도전해 보는 것은 어떨까요?

글 / IT동아 강형석 (redbk@itdonga.com)

사용자 중심의 IT 저널 - IT동아 (it.donga.com)

번호	제목	글쓴이	작성일	조회	추천
설문	손해 보기 싫어서 피해 입으면 반드시 되갚아 줄 것 같은 스타는?	운영자	24/11/18	-	-
3856	두루·무의 “모두의1층이니셔티브로 장애 인식·접근성 개선”	IT동아	05.29	127	0
3855	[자동차와 法] 음주운전 시 위드마크 공식 적용의 문제점에 대하여	IT동아	05.28	929	0
3854	[신차공개] 기아 'EV3'·벤틀리 '더 뉴 컨티넨탈 GT' 론칭 예고	IT동아	05.28	162	0
3853	[뉴스줌인] 내연기관차 이어 전기차 찍은 LG전자 웹OS, 다음 목표는?	IT동아	05.28	231	0
3852	글로벌 가상자산 정책 동향 ‘제도 틀 안에서 규제 공백 보완’	IT동아	05.28	142	0
3851	샥즈, 오픈스윔 프로·오픈핏 에어 출시···오픈형 이어폰 1위 입지 굳힌다	IT동아	05.28	292	0
3850	서울과기대의 제조창업 지원, '밀도있는 심화 과정'으로 민다	IT동아	05.28	158	0
3849	아직도 안 찾고 쌓이는 숨은 보험금, 이 기회에 찾아볼까? [1]	IT동아	05.27	1100	0
3848	자동차 에어컨 필터 고를 땐 이렇게! [이럴땐 이렇게!]	IT동아	05.27	1015	0
3847	차트분석 도구 ‘트레이딩뷰’ 파고들기 - 12	IT동아	05.26	214	0
3846	[자동차 디자人] 英 오프로더 SUV ‘그레나디어’ 디자이너 ‘토비 이큐어’	IT동아	05.24	255	0
3845	가상자산 시장 ‘거래량·수익 상승, 원화·코인 마켓 격차 뚜렷’	IT동아	05.24	231	0
3844	[농업이 IT(잇)다] 전통주로 과거ㆍ현재ㆍ미래를 잇는 나루 되겠다, 한강주조 고성용 대표	IT동아	05.24	238	1
3843	[IT하는법] 잘 사용하지 않는 MS 원드라이브, 사용 해제하는 방법 [4]	IT동아	05.24	4822	1
3842	‘천비디아’ 달성한 엔비디아, 독주할까? 반도체주와 함께할까?	IT동아	05.24	221	0
3841	SEC, 이더리움 현물 ETF 승인 “증권거래법 요건 충족”	IT동아	05.24	245	0
3840	벤처 투자 80%가 수도권 편중··· '투자 해결사'로 나선 부산창경	IT동아	05.24	236	0
3839	국내 통신3사 모두 "이제 우리는 AI 기업" [16]	IT동아	05.23	2331	1
3838	[IT애정남] 갤럭시 '생성형 편집', 어떻게 해야 잘 될까요?	IT동아	05.23	428	0
3837	즉석 카메라로 이런 ‘손맛’이? ‘인스탁스 미니 99’ 출시	IT동아	05.23	301	0
3836	스타트업 해외 진출 시 알아야 할 정보 공유 ‘라이징 스타트업 콘서트4’	IT동아	05.23	328	0
3835	[IT애정남] 해외 구매폰에 국내 유심 쓰는데 음성 통화 안되면? [1]	IT동아	05.23	1182	3
3834	퀄컴, 코파일럿+ PC 등장에 'AI 허브 및 개발 도구'로 지원 사격	IT동아	05.23	247	0
3833	네카오, 글로벌 공략 갈 길 바쁜데…일단 멈춤	IT동아	05.23	198	0
3832	2025년 상반기 탄생할 주식 대체거래소(ATS), 이렇게 달라진다	IT동아	05.23	345	0
3831	AMD, 에픽·MI300X 투트랙으로 AI 산업 주도권 확보 나서	IT동아	05.22	207	0
3830	'직장인 3명 중 1명, 데이터 도출 어려워'··· AI 기반 자동화가 해답될까?	IT동아	05.22	274	0
3829	산행 보조부터 산불 진화까지...'입는 로봇' 활용처 확대 [1]	IT동아	05.22	5194	1
3828	대거 출시 예고한 Arm CPU 기반 윈도우 PC, 뭐가 다를까?	IT동아	05.22	302	0
3827	비트코인 피자데이, 업비트·빗썸 “피자 2024판 쏜다” [17]	IT동아	05.22	7306	4
	[생성 AI 길라잡이] 음성과 이미지만 있으면 영상을 만든다 ‘런웨이ML’	IT동아	05.21	2264	0
3825	가속 페달 밟은 검색광고 시장 경쟁, 보라웨어 ‘AI 검색광고 관리 솔루션에 주목해야 되는 이유	IT동아	05.21	214	0
3824	부르면 달려오는 '이동형 전기차 충전기' 시장 기지개 [14]	IT동아	05.21	2143	0
3823	MS, '코파일럿 플러스 PC' 발표…AI 시대의 새로운 PC 제시	IT동아	05.21	265	0
3822	업비트·빗썸, 1분기 실적 개선···투자자 보호·서비스 개선에 주력한다	IT동아	05.21	191	0
3821	GPT4o와 GPT4 비교해 보니··· '사람 대 AI의 근본적인 접근 방식 바꿔' [6]	IT동아	05.21	1545	3
3820	삼성전자, '비스포크 AI 콤보' 에센셜 화이트 색상 출시…색상 라인업 강화	IT동아	05.20	251	0
3819	채팅창 넘어 일상으로…'만능 AI 비서' 시대 온다	IT동아	05.20	623	0
3818	오늘부터 시끄러운 불법 튜닝 오토바이 집중 단속 [6]	IT동아	05.20	788	6
3817	AWS 서밋 행사장에서 펼쳐진 훈훈한 ‘프리킥’	IT동아	05.20	222	0
3816	[주간투자동향] 라피치, 60억 원 규모 투자 유치	IT동아	05.20	194	0
3815	키보드의 윈도 키, 최대한 활용하려면 이렇게![이럴땐 이렇게!] [5]	IT동아	05.20	1675	16
3814	인포플라 “대답만 하던 기존 AI의 한계, VLM 기반 자동화로 극복” [4]	IT동아	05.18	7240	3
3813	6월 인공지능ㆍ반도체 시장 엔비디아 손에 달렸다	IT동아	05.17	281	0
3812	[시승기] 시대를 초월한 디자인 DNA…’포르쉐 911 카레라 쿠페’	IT동아	05.17	357	0
3811	[IT신상공개] 입맛대로 고르는 저음, 소니 얼트 파워 사운드	IT동아	05.17	544	1
3810	"코바코의 대국민 AI 광고 제작 서비스, 네이버가 함께합니다"	IT동아	05.17	267	0
3809	[생성 AI 길라잡이] 더 사람 같아진 AI, 'GPT-4o'는 어떻게 다를까? [2]	IT동아	05.17	1432	1
3808	차트분석 도구 ‘트레이딩뷰’ 파고들기 - 11	IT동아	05.16	403	0
3807	[뉴스줌인] PC 2대 연결해 하나처럼? 인텔 ‘썬더볼트 쉐어’ 기술 이모저모 [5]	IT동아	05.16	2364	0
뉴스	데이식스, 12월 고척돔 콘서트 3만8천석 전석 매진	디시트렌드	14:00

최근 방문

즐겨찾기

즐겨찾기 갤러리

갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

개념글 리스트

차단하기

[IT동아 갤러리]

갤러리 본문 영역

▶ MS, '코파일럿 플러스 PC' 발표…AI 시대의 새로운 PC 제시▶ GPT4o와 GPT4 비교해 보니··· '사람 대 AI의 근본적인 접근 방식 바꿔'▶ 인포플라 “대답만 하던 기존 AI의 한계, VLM 기반 자동화로 극복”

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘

지갑 연결

▶ MS, '코파일럿 플러스 PC' 발표…AI 시대의 새로운 PC 제시 ▶ GPT4o와 GPT4 비교해 보니··· '사람 대 AI의 근본적인 접근 방식 바꿔'▶ 인포플라 “대답만 하던 기존 AI의 한계, VLM 기반 자동화로 극복”