클릭 한 번으로 모든 것이 움직입니다! Tencent Hunyuan, Tsinghua University 및 Hong Kong University of Science and Technology와 협력하여 Tusheng 비디오 모델 'Follow Your Click' 출시

편집됨 | Yanzheng

제작됨 | 51CTO 기술 스택(WeChat ID: blog51cto)

3월 15일, Tencent Hunyuan, Tsinghua University, Hong Kong University of Science and Technology가 공동으로 새로운 Tusheng 비디오 모델 "Follow- Your-Click"은 입력 모델의 이미지를 기반으로 해당 영역을 클릭하고 몇 가지 프롬프트 단어를 추가하면 이미지의 원래 정적 영역이 이동하고 한 번의 클릭으로 비디오로 변환됩니다.

현재의 대형 투시타 비디오 모델에서 일반적인 생성 방식은 사용자가 프롬프트 단어로 이동 영역을 설명하도록 요구할 뿐만 아니라 이동 지침에 대한 자세한 설명을 제공해야 합니다. , 이는 복잡한 과정입니다. 또한, 생성되는 효과의 관점에서 볼 때, 기존의 이미지 생성 비디오 기술은 이미지의 특정 부분을 이동하는 것에 대한 제어력이 부족합니다. 생성된 비디오는 이미지의 특정 영역이 아닌 전체 장면을 이동해야 하는 경우가 많습니다. 그리고 유연성이 부족한 것.

이러한 문제를 해결하기 위해 Tencent Hunyuan 모델 팀, 칭화대학교, 홍콩 과학기술대학교의 공동 프로젝트 팀은 보다 실용적이고 제어 가능한 이미지-비디오 생성 모델인 Follow-Your-Click을 제안했습니다. , 보다 편리한 상호 작용을 제공하기 위해 사진의 "한 번의 클릭으로 모든 것을 이동"하는 것도 현실화됩니다.

이미지-비디오 생성 기술은 영화 콘텐츠 제작, 증강 현실, 게임 제작, 광고 등 다양한 산업 분야의 AIGC 응용 분야에서 폭넓은 전망을 갖고 있습니다. 2024년에.

이 공동 프로젝트 팀의 Tencent Hunyuan 대형 모델 팀은 다중 모드 기술을 지속적으로 연구 및 탐색하고 있으며 업계 최고의 비디오 생성 기능을 보유한 것으로 이해됩니다. 이전에 Tencent Hunyuan Model은 기술 파트너로서 "인민일보"의 원본 비디오 "So Many Beautiful Rivers and Mountains"를 지원하여 중국의 아름다운 강과 산에 대한 절묘한 비디오 클립을 생성하고 탄탄한 콘텐츠 이해, 논리적 추론 및 사진 생성 능력.

문서 링크: https://arxiv.org/abs/2403.08268

Github: https://follow-your-click.github.io/

위 내용은 클릭 한 번으로 모든 것이 움직입니다! Tencent Hunyuan, Tsinghua University 및 Hong Kong University of Science and Technology와 협력하여 Tusheng 비디오 모델 'Follow Your Click' 출시의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!