실사 인물 발화 영상 생성 프레임워크 기술

기술개요

• 영상 합성을 위한 목표 인물의 얼굴 외형을 포함한 영상 데이터와 발화할 문장 음성에 맞게 목표 인물이 자연스럽게 발화하는 영상을 합성해주는 기술로써 교육, 마케팅 등 급증하는 영상 소비 추세에 따라 특정 인물이 동일한 배경에서 다른 문장을 발화하는 영상 제작의 수요가 있는데, 매 영상마다 촬영할 필요 없이 원본 영상 데이터를 활용하여 새로 합성해주는 기술. 특히, 생성AI 기술을 활용하여 새로 합성할 인물을 영상 데이터, 그 인물이 발화할 문장을 음성 데이터로 입력받아 목표 인물의 자연스러운 발화 영상을 합성해주는 기능을 포함하며, 영상 합성 기술은 목표 인물의 얼굴 외형을 포함한 영상 데이터 입력만으로 원하는 발화 표정을 새롭게 합성해줄 뿐만 아니라 해상도, 입술 움직임 동기화 등의 요소를 고려함으로써 고품질 합성기능을 보장

기술개발 목적 및 필요성

• • 교육용 강의, 뉴스 앵커같이 특정 인물이 발화하는 영상 제작에 드는 인적, 시간적 자원 소모를 줄이기 위해, 실사 인 물 발화 영상 합성에 특화된 생성AI 모델 기술 상용화 추진

  
  

  • 영상 소비 트렌드의 대중화에 따른 맞춤형 인물 영상 제작 수요 증가

  
  

  • 영상 제작에 필요한 준비 및 환경 간소화 요구

  
  

  • 급증하는 인물 영상 수요에 맞게, 자원 소모없이 보다 빠르게 실사 인물의 자연스러운 발화 영상을 제작하기 위한 핵 심 기술이 필요

기술의 특징 및 장점

• • 특정 인물이 임의의 문장을 발화하는 영상을 생성AI 기술을 활용하여 즉각 제작 가능

  
  

  • 영상 합성을 위한 다량의 학습데이터나 추가 학습 요구없이 고품질 영상합성이 가능

  
  

  • 영상 제작 전 과정에서 기존 인물 발화 영상을 활용하여 비대면, 원격 서비스로 실사 인물 영상을 새로 합성 가능함