首頁  >  文章  >  科技週邊  >  一鍵點、萬物動!騰訊混元聯合清華、港科大推出圖生影片大模型“Follow Your Click”

一鍵點、萬物動!騰訊混元聯合清華、港科大推出圖生影片大模型“Follow Your Click”

WBOY
WBOY轉載
2024-03-18 15:34:08641瀏覽

編輯| 言徵

出品| 51CTO技術堆疊(微訊號:blog51cto)

##3月15日,騰訊混元與清華大學、香港科技大學聯合推出全新圖生視頻模型“Follow-Your-Click“,基於輸入模型的圖片,只需點擊對應區域,加上少量提示詞,就可以讓圖片中原本靜態的區域動起來,一鍵轉換成影片。

一键点、万物动! 腾讯混元联合清华、港科大推出图生视频大模型“Follow Your Click”

#目前的圖生影片大模型中,一般的生成方法不僅需要使用者在提示詞中描述運動區域,也需要提供運動指令的詳細描述,過程較為複雜。另外,從產生的效果來看,現有影像產生視訊技術在移動影像的指定部分上缺乏控制,產生的影片往往需要移動整個場景,而不是影像上的某一個區域,精準度和靈活性上有所欠缺。

為了解決這些問題,騰訊混元大模型團隊、清華和港科大的聯合項目組提出了更實用和可控的圖像到視頻生成模型Follow-Your-Click ,帶來更便捷的交互,也讓圖片「一鍵點,萬物動」成為現實。

一键点、万物动! 腾讯混元联合清华、港科大推出图生视频大模型“Follow Your Click”

圖像到影片生成的技術在電影內容製作、擴增實境、遊戲製作以及廣告等多個產業的AIGC應用上有著廣泛前景,是2024年最熱門的AI技術之一。

據了解,本聯合專案組中的騰訊混元大模型團隊,正在持續研究和探索多模態技術,擁有業界領先的視訊生成能力。此前,騰訊混元大模型作為技術合作夥伴,支持《人民日報》打造原創視頻《江山如此多嬌》,生成中國大美河山的精美視頻片段,展示出了較強的內容理解、邏輯推理和畫面生成能力。

論文連結:https://arxiv.org/abs/2403.08268

Github:https://follow-your-click.github.io/

以上是一鍵點、萬物動!騰訊混元聯合清華、港科大推出圖生影片大模型“Follow Your Click”的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文轉載於:51cto.com。如有侵權,請聯絡admin@php.cn刪除