AI可以繪製情感嗎？看DALL-E如何表抽象

要說2022年人工智慧領域發展有怎樣的趨勢？

一定要提到「多模態AI」的崛起，尤其是文字到圖像生成工具。

從DALL-E到Imagen、Parti、女媧等，都可以產生高品質的影像，讓人驚艷。

這當中最典型的例子便是OpenAI的Dall-E2了。

自Dall-E面世後，或許你看過它產生許多繪畫風格的圖片，像是太空人在太空騎馬。

然而，很少有透過Dall-E表現抽象概念的圖片。

這不，一個機器學習科學家Gabriele Sgroi就來探索了DALL-E如何完成這項任務。

他測試了油畫棒和繪畫風格的悲傷，愛，憤怒，幸福，正義和非正義等主題。

油畫棒風格

#憤怒

1

#愛

##繪畫風格#悲傷

##愛

####################################################################### ##########################快樂################################################################# #######還有其他抽象概念的畫作欣賞：正義與非正義######################正義############################################################################ #############

非正義

#Gabriele Sgroi相信畫作會更有洞察力，而不是將情緒圖像限制在人們的面部表情上。

本文中的所有圖像（包括封面圖像）都是使用 DALL-E 從給定提示中選擇第一代提供的所有圖像生成的。

從這些例子中可以看出，儘管並不總是可以清楚地識別出給定的情緒，但是DALL-E在繪畫風格總體上展現出更抽象、更複雜的圖片。

其中，代表正義的圖片大多描繪出一個希臘女神，但是代表非正義的圖像確實讓人琢磨不透。

總的來說，Sgroi觀察到結果很大程度取決於所選的風格。

並且在大多數情況下，DALL-E會在產生的圖紙上寫下情感的名稱。

總之，DALL-E 似乎對測試的情緒表現出一定程度的理解，將它們與面部表情以及通常與之相關的顏色或符號正確配對。

Sgroi表示，進一步研究不同風格之間相同情緒表徵的差異，並檢查觀察到的正面和負面情緒之間的偏差是否在其他示例中仍然存在，這將是很有趣的。

DALL-E失敗了嗎？

諷刺的是，DALL-E 2宣稱是擅長理解用來產生圖像的文字提示。

但是有網友發現，當前無法理解文字時，便會將文字內容放置在生成的圖片中。

如藝術家雷內‧馬格利特的畫作《這不是一支煙鬥》。

還有一位人工智慧Janelle Shane讓DALL-E 2產生公司徽標，卻發現沒有一張圖能正確拼出單字。

Waffle House產生範例

另外，你可以說DALL-E 2了解一些科學定律。

因為它可以輕鬆描繪出墜落的物體，或是漂浮在太空中的太空人。

但是，如果想要產生解剖圖、X 光影像、數學證明或藍圖，所得到的影像可能表面上是正確的，但根本上都是錯誤的。

就例如，按比例繪製太陽系的圖片中，可以說是一塌糊塗，左下角地球形狀，還有左上角類似荷包蛋的物體。

OpenAI研究員Aditya Ramesh解釋道，它試圖在不理解含義的情況下編造一些視覺上相似的東西。

所以DALL-E 2並不知道什麼是科學，它只知道如何閱讀文字並繪製插圖。

還有讓DALL-E 2生成人物臉孔時，逼真到簡直讓人不敢相信。

#

在訓練期間，OpenAI引入了deepfake保護措施，就是為了防止其記住經常出現在網路上面孔。

如果上傳的圖像包含了真實的人物面孔，即使是不知名的人，系統便會拒絕生成內容。

但是，另一個問題便出現了，OpenAI表示，該系統針對具有單一關注焦點的圖像進行了優化

就例如生成「太空人凝視著地球，臉上帶著渴望的表情」這種細緻入微肖像生成還是非常成功的。

然而，當DALL-E一次產生多個人的圖像時，就直接崩潰了。因此它在生成集體照和人群場景中就會變得非常糟糕。

此外，DALL-E還會產生一些偏誤的圖像。

目前，OpenAI 的團隊已經開始透過機器學習來修正偏見。

例如，在DALL-E 2 的訓練期間，研究人員調整了訓練方法並增加了女性圖像的權重，因此它們更有可能被生成。

DALL-E未來會帶來更多驚喜。

#

以上是AI可以繪製情感嗎？看DALL-E如何表抽象的詳細內容。更多資訊請關注PHP中文網其他相關文章！