MoDa 커뮤니티는 한 번의 클릭으로 사진을 말하게 할 수 있는 AI 비디오 생성 도구 Live Portait을 출시했습니다.

MoDa 커뮤니티는 한 번의 클릭으로 사진 속 캐릭터가 말하게 할 수 있는 Live Portrait라는 AI 비디오 생성 도구를 출시했습니다

Alibaba Cloud는 Live Portrait라는 디지털 휴먼 비디오 생성 도구를 출시했습니다. 사용자는 사진과 텍스트 또는 음성만 업로드하면 말하는 디지털 휴먼 비디오를 생성할 수 있습니다. 이 도구는 라이브 비디오 방송, 채팅 로봇, 기업 마케팅 등 다양한 시나리오에서 사용할 수 있습니다. 현재 이 도구는 Magic Community Creation Space

에서 체험할 수 있도록 열려 있습니다.

자기 대화 대형 모델과 AI 페인팅 모델의 인기로 인해 연구 커뮤니티에서는 생성 AI에 대한 연구를 점차 더 많은 양식으로 추진하고 있으며, 그중 AI 비디오 생성 기술이 많은 주목을 받고 있습니다. 이 기술은 텍스트, 오디오 등의 정보를 얼굴 움직임 정보로 변환하여 캐릭터 이미지가 포함된 애니메이션 사진을 생성할 수 있어 영상 촬영 및 제작의 문턱을 효과적으로 낮출 수 있습니다

Alibaba Cloud의 최신 Live Portait 도구는 모션 모듈과 생성 모듈을 결합합니다. 이 도구는 Alibaba Cloud가 자체 개발한 입 모양 예측 알고리즘을 사용하여 입 모양 생성의 정확도를 크게 향상시키고 기존 방법에 비해 크게 향상되었습니다. 훈련 단계에서는 명시적인 자세 제어가 추가되어 생성된 비디오가 베이스보드 비디오 없이도 모든 동작을 보여줄 수 있으므로 디지털 인간 음성의 현실성이 크게 향상됩니다. 또한 Live Portait은 능동형 아이 컨트롤 기술을 통해 안구에 자연스러운 움직임을 추가하여 생성된 결과를 실제 효과에 더 가깝게 만들 수 있습니다. 보도에 따르면 Live Portait 관련 기술은 CVPR, ICCV

등 최고의 국제 AI 컨퍼런스에 포함되었습니다.

MoDa 커뮤니티의 정보에 따르면 Live Portait은 사용자가 사진을 업로드한 후 텍스트 기반과 오디오 기반 중에서 선택할 수 있는 두 가지 방법을 제공합니다. 텍스트 기반 모드에서 사용자는 표준 중국어, 영어, 광둥어, 어린이 음성을 포함한 28가지 다양한 음성 중에서 선택할 수 있습니다. 또한 Live Portait은 사용자가 비디오를 더 빠르게 생성할 수 있도록 경량 모델 선택도 제공합니다

도구 알고리즘 책임자인 Zhang Bang은 다음과 같이 말했습니다. "Live Portait은 단일 사진을 사용하여 사실적인 얼굴 애니메이션을 생성하는 기능을 포함하여 팀이 독립적으로 개발한 여러 혁신적인 기술을 통합하여 기존 적대 생성 네트워크의 한계를 뛰어 넘었습니다. 지속적인 기술 발전으로 이미지 생성 비디오는 광범위한 응용 가능성을 갖고 있으며 기업이 생산 효율성을 향상하고 비용을 절감하는 중요한 도구가 될 것으로 예상됩니다.”

팀의 연구 방향에는 디지털 휴먼, 3D 모델 AI 생성, 고충실도 렌더링 및 자연스러운 인간-컴퓨터 상호 작용이 포함되는 것으로 알려져 있으며, 최고의 국제 컨퍼런스에서 50개 이상의 논문을 발표했습니다.

위 내용은 MoDa 커뮤니티는 한 번의 클릭으로 사진을 말하게 할 수 있는 AI 비디오 생성 도구 Live Portait을 출시했습니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!