LLM으로 유튜브 쇼츠 영상 자동 생성하기
"최근 쇼츠가 대세라 그런지 조회수가 예전 같지 않습니다."
"쇼츠를 어떻게 만들어야 하나 고민이 많아요."
유튜브 쇼츠 영상 자동 생성 프로젝트는 주변 100만 유튜버의 고민으로부터 시작되었습니다.
콘텐츠 크리에이터들과 인터뷰한 결과 기존 롱폼 영상으로부터 고퀄리티의 쇼츠 영상을 자동으로 만들어준다면 수익 창출과 채널 성장 모두에 큰 도움될 수 있을 것이라고 판단하였습니다.
저희는 LLM이 영상 스크립트(시간과 대사)를 보고 영상 하이라이트를 잘 뽑을 수 있지 않을까 하는 생각이 들어 1차 시도로 영상 스크립트를 ChatGPT 4o에 입력하여 하이라이트 부분을 추출하였고, 해당 부분을 토대로 쇼츠 하이라이트를 아래와 같이 만들 수 있었습니다.
저희 팀이 LLM을 통한 쇼츠 영상 하이라이트 생성 과정에서 겪은 몇 가지 팁과 시행 착오를 메이커 여러분들께 공유드리고자 합니다.
1. 최대한 자세한 컨텍스트를 LLM에게 제공하라. 그러나 너무 길지는 않게...
스크립트 포맷에 대한 설명과 예시, 역할 지정(너는 우리를 도와줄 영상 편집자야) 뿐만 아니라 제공할 영상에 대한 설명도 위키피디아에서 발췌하여 제공하였습니다. 그러나 컨텍스트가 길어지면 길어질수록 명시한 제약 조건을 위배한 결과를 생성하는 일이 잦아졌습니다.(60초 이내 영상을 생성하라고 하였는데 60초 이상의 영상을 생성, 제목 길이를 제한하라고 했는데 그것보다 길게 나오는 등) 따라서 저희 팀은 최대한 많은 컨텍스트를 LLM에게 제공하였으나, 핵심적인 내용만 사람이 선별하여 집어넣는 방식으로 타협하였습니다.
2. Do's and Don'ts를 자세히 제공하라
시간, 길이 등 제한 조건들을 명시하면서 좋은 사례와 나쁜 사례를 최대한 자세히 명시하였습니다. 특히 하이라이트가 왜 하이라이트인지 명시하는 부분에서 단순히 재밌어서, 웃겨서라고 명시하면 안되고 "해당 주제는 매우 논쟁적이며, 특정 성별이 갖는 특징이 커리어에 도움이 된다는 내용을 포함하고 있습니다." 같은 방식으로 Do's and Don'ts를 명확하게 명시하였습니다. 그 결과 꽤나 퀄리티 좋은 결과를 얻을 수 있었습니다.
3. Self Verification은 매우 중요하다
컨텍스트가 길어짐에 따라 프롬프트에 명시한 제한 조건을 위배하는 일이 간헐적으로 발생했습니다. 이를 보완하기 위해 도출된 결과를 평가하는 프롬프트를 작성하여 ChatGPT에게 제공하는 Self Verification 과정을 거치도록 하였습니다(마인크래프트 LLM 관련 논문 참조). 스스로의 결과를 스스로가 다시 평가하는 방식인데, 재밌게도 답변 퀄리티가 크게 상승하고 명시한 제한 조건을 위배하는 일이 사라졌습니다.
4. 상세한 예시, 생성 가이드라인 제공
제목의 길이 제한, 해시태그 갯수 제한 등 형식에 대한 명확한 가이드라인을 제공하면서 동시에 예시를 몇 가지 상세하게 제공하였습니다. 그리고 도출한 결과에 대하여 왜 그런 결과가 나왔는 지 Reasoning을 같이 요구하였더니, ChatGPT는 결과를 더 그럴듯 하게 제공해주었습니다. 단순히 답변을 요구하는 것이 아닌 이유를 같이 답변해달라고 하니 확실히 답변 퀄리티가 상승한 것을 관찰하였습니다.
실제 프롬프트 내용, 영상 제작 후처리 과정 등 자세한 내용은 ZEP ZEN AI 행사에서 세션을 진행하니, 관심 있으신 분들은 저에게 연락해주시면 소수의 분들께 쿠폰을 제공해드리고자 합니다. (쿠폰 갯수가 제한되어 있어 연락주신 모든 분들께 드리지 못할 수 있습니다 ㅠ)
https://event-us.kr/zep/event/89315
현재 유튜브 쇼츠 영상 생성 솔루션 베타서비스를 무료로 이용해보실 고객 분들을 모집하고 있습니다. 100만 유튜버 크리에이터 분들과 같이 협업을 진행하고 있으며, 저희 팀이 만들고 있는 솔루션에 대해 관심이 있으시면 편하게 연락주세요!
저희 팀은 AI 기술을 통해 콘텐츠 크리에이터들이 더 쉽고 더 편하게 콘텐츠를 만들게 하는 것에 집중하고 있습니다. 콘텐츠 업계에 계시거나, 저희 팀과 협업을 희망하시거나, 콘텐츠 AI 분야에 관심있는 투자자 등 저희 팀에게 관심이 있으시다면 디스콰이엇으로 편하게 연락주세요!
감사합니다.
