28. AI 영상 드라마 패러디 “응답하라 1988” 첫 실험

오늘은 AI로 드라마 패러디를 한번 해 보았습니다. 제가 너무 좋아하는 드라마. 응답하라 1988의 한 장면을 만들어 봤어요.

비가 내리는 어느날, 정봉이의 아들과, 덕선이의 딸이 우연히 골목에서 우산을 나눠 쓰게 되는 일화입니다.

정봉이 아들은, 덕선이의 딸에게 첫눈에 반하고, “썸”을 타게 되면서 나누는 대화의 한 장면 이예요.

우리가 드라마에서 봤던, 강동원을 패러디한 정봉이의 우산 장면을 넣고 싶어서, 몇번 시도 했는데, 잘 안되서, 포기 했습니다. 그런 디테일하고 설명하기 어려운 장면은 역시 인간만이 표현 할 수 있는 영역이구나 생각이 들더군요.

힐링영상 제작을 시작으로 CF 도 만들어 보고, 오늘은 이렇게 드라마 패러디도 공부 하면서, AI Tool 다루는 방식과, 프롬프트 활용, 더빙등 조금씩 제 자신을 성장 시키고 있는 중 입니다.

1. Chat GPT로 이미지 만들고, 대사 구상

우선 chat gpt에게 제가 스크린샷으로 만든 응팔이 이미지를 업데잇 해주고, 그 상황에 맞게 남과 여를 설정 했습니다. 외모 묘사부터, 배경 묘사까지 디테일 하게 설명하고, 대사와 영상의 길이와 내용에 맞게, 이미지를 4-5장 만들었습니다.

여기서 힘들었던것은, 이미지의 연속성 이었어요. 이미지를 새로 뽑을때마다, 전혀 다른 인물이 나와서, 애를 좀 먹었습니다. 프롬프트 줄 때마다, 이미지가 같아야 한다고 해도, 그게 잘 지켜지지 않았습니다.

그렇게 이미지 실랑이를하고, 마음에 드는 이미지를 만들고, 이미지별 대사를 만들었습니다.

2. 타입캐스트에서 더빙

타입캐스트에서 이미지에 맞는 더빙을 했습니다. 아직 타입캐스트에 적응을 못 해서 인지, 목소리 만드는것은 아직도 저에게 어려운 부분 입니다.

우선 프롬프트가 적용 되는 캐릭터만을 사용 했습니다. 프롬프트가 적용 안되거나, 감정이 적용 안되는 캐릭터는 이런 드라마 만들때, 정말 힘 들더구요. 아니요, 아예 만들수가 없습니다.

그래서 저는 타입캐스트 정기 구독을 베이직에서 프로로 변경하였습니다.

이렇게 남과 여의 대사를 더빙하고, 문장별로 다운로드 하지 않고, 통 째로 문장을 다운로드하여, 클링에서 상황에 맞게 조절해 썼습니다. 문장별로 잘라서 다운로드 하면, 찾기 불편 하더라고요.

3. 클링 ai에서 영상 제작과 립싱크

영상 scene에 맞는 프롬프트를 만들어 영상을 제작하고, 제작한 영상을 가지고 다시 립싱크 했습니다. 여기서 정말 힘들었던 것은, 립싱크가, 한명의 이미지가 있는 영상에서는 잘 되는데, 두명 이상의 이미지가 있는 영상에서는, 누가 누구인지 인식을 못해서, 여자가 할 대사를 남자가 하거나, 남자가 해야 할 대사를 여자가 하는, 불편한 영상을 만들수 밖에 없다는 것 이었습니다.

아직까지 클링ai는 두명이상의 이미지에서, 립싱크 하는 대상을 구별하는 기능이 없기 때문데, 이럴경우, 따로 한명 한명 따로 따로 이미지를 영상화 해서 붙여 넣어야 하는, 번거로움이 있다는것을 배웠습니다.

정말 손이 많이 가는 작업 이었습니다.

그래도 더빙과 영상이 잘 맞아 떨어질때는, 기분이 좋더라고요.