魔搭社群上線AI影片產生工具Live Portait，可一鍵讓照片開口說話

魔搭社群推出了一款名為Live Portrait的AI影片產生工具，能夠透過一鍵操作讓照片中的人物開口說話

阿里雲推出了一個名為Live Portrait的數位人影片產生工具，用戶只需上傳一張照片和一段文字或語音，即可產生一段開口說話的數位人影片。這項工具可應用於視訊直播、聊天機器人、企業行銷等多個場景。目前，該工具已在魔搭社群創空間開放體驗

隨著自對話大模型和AI繪畫模型的風靡，研究界正逐漸將生成式AI的研究推向更多模態的方向，其中AI視頻生成技術備受關注。該技術能夠將文字或音訊等資訊轉化為臉部運動訊息，從而產生具有人物形象的動畫照片，有效降低了影片拍攝和製作的門檻

阿里雲最新上線的Live Portait工具，結合了運動模組和生成模組。該工具採用了阿里雲自研的口型預測演算法，大幅提高了口型生成的準確度，相較於傳統方法有顯著提升。在訓練階段，增加了姿態的顯式控制，使得生成的視頻可以呈現任意動作，無需底板視頻，從而大幅提升了數字人說話的真實感。此外，透過眼神主動控制技術，Live Portait可以為眼球增加自然運動，使得生成結果更接近真人效果。據介紹，Live Portait相關技術已被國際AI頂會CVPR、ICCV等收錄

根據魔搭社群的訊息，Live Portait提供了兩種方式供用戶選擇上傳照片後，即文字驅動和音訊驅動。在文字驅動模式下，使用者可以選擇28種不同的聲音，包括國語、英語、粵語和童聲等。此外，Live Portait還提供了輕量模型選擇，以幫助用戶更快地生成影片

張邦，工具演算法負責人，表示：「Live Portait整合了團隊多項自主研發的創新技術，包括利用單張圖片即可生成逼真的臉部動畫，突破了傳統對抗生成網路的限制。隨著技術的不斷演進，影像生成影片具有廣闊的應用前景，有望成為企業提高生產效率、降低成本的重要工具。」

據了解，團隊的研究方向包括數位人、3D模型AI生成、高逼真渲染和自然人機互動等領域，已經在國際頂尖會議上發表了50多篇論文

以上是魔搭社群上線AI影片產生工具Live Portait，可一鍵讓照片開口說話的詳細內容。更多資訊請關注PHP中文網其他相關文章！