搜尋
首頁科技週邊人工智慧帕累托排序學習:基於推薦系統公平性的排序學習

作者 | 汪昊

審校 | 孫淑娟

推薦系統公平性是 2017 年以來爆火的人工智慧研究領域。知名的人工智慧公司如 Twitter, Google, IBM和百度,都創立了人工智慧倫理團隊或研發了人工智慧倫理產品。然而讓人遺憾的是,人工智慧倫理研究在國內起步較晚,跟國外相比,目前仍有一定差距。

帕累托排序學習:基於推薦系統公平性的排序學習

排序學習是在 2010 年左右爆發的機器學習技術,在推薦系統和資訊檢索領域都得到了廣泛的應用。在最近幾年,排序學習成為了熱門的人工智慧倫理研究演算法基準。

本文將要介紹的是 2022 年在國際學術會議 CISAT 2022 (International Conference on Computer Information Science and Application Technology) 發表的論文 Pareto Pairwise Ranking for Fairness Enhancement of Recommender Systems。本文主要說明如何結合帕累托分佈和排序學習實現公平的排序學習推薦演算法。

帕累托排序學習:基於推薦系統公平性的排序學習

圖1. MovieLens 資料集觀影評分差機率分佈

我們根據觀察(圖1)和統計理論(齊夫分佈的統計估計)可以得到以下結論: 同一個使用者對不同物品的評分差的機率分佈正比於評分差。我們修改機率矩陣分解的損失函數,得到我們發明的新演算法帕累托排序學習(Pareto Pairwise Ranking)的損失函數公式:

帕累托排序學習:基於推薦系統公平性的排序學習

把我們剛才的觀察帶入損失函數公式中,我們得到以下損失函數公式:

帕累托排序學習:基於推薦系統公平性的排序學習

我們把L 取對數,得到以下公式:

帕累托排序學習:基於推薦系統公平性的排序學習

我們利用隨機梯度下降公式來解損失函數對數,得到以下公式:

帕累托排序學習:基於推薦系統公平性的排序學習

帕累托排序學習:基於推薦系統公平性的排序學習

帕累托排序學習:基於推薦系統公平性的排序學習

#帕累托排序學習的演算法流程如下:

帕累托排序學習:基於推薦系統公平性的排序學習

圖2和圖3顯示的是帕累托排序學習在MovieLens 1 Million Dataset 資料集上的測試結果。論文作者比較了 10 種推薦系統演算法,發現帕累托排序學習演算法在公平性指標上表現最佳。


圖4 和圖5 顯示的是帕累托排序學習在LDOS-CoMoDa 資料集上的測試結果。帕累托排序學習演算法在公平性指標上的表現依然最好。

#########帕累托排序學習演算法是國內少見的基於公平性的排序學習推薦系統演算法。演算法原理簡單,實作簡便,運行速度快。作者在 16G RAM 和 Intel Core i5 的聯想筆記本上測試,執行速度很快。人工智慧倫理研究在國際上目前是研究熱點,希望能引起大家的足夠重視。 ############作者簡介############汪昊,前Funplus 人工智慧實驗室負責人,在ThoughtWorks, 豆瓣,新浪,網易等公司有超過11 年的研發和管理經驗。在推薦系統、聊天機器人、風控反詐騙領域有豐富的技術經驗。在國際學術會議和期刊發表論文 30 篇,獲得最佳論文獎/最佳論文報告獎3次。 2006 年 ACM 區域賽金牌。本科和碩士畢業於美國猶他大學。對外經貿大學在職 MBA。 ##################

以上是帕累托排序學習:基於推薦系統公平性的排序學習的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述
本文轉載於:51CTO.COM。如有侵權,請聯絡admin@php.cn刪除
烹飪創新:人工智能如何改變食品服務烹飪創新:人工智能如何改變食品服務Apr 12, 2025 pm 12:09 PM

AI增強食物準備 在新生的使用中,AI系統越來越多地用於食品製備中。 AI驅動的機器人在廚房中用於自動化食物準備任務,例如翻轉漢堡,製作披薩或組裝SA

Python名稱空間和可變範圍的綜合指南Python名稱空間和可變範圍的綜合指南Apr 12, 2025 pm 12:00 PM

介紹 了解Python函數中變量的名稱空間,範圍和行為對於有效編寫和避免運行時錯誤或異常至關重要。在本文中,我們將研究各種ASP

視覺語言模型(VLMS)的綜合指南視覺語言模型(VLMS)的綜合指南Apr 12, 2025 am 11:58 AM

介紹 想像一下,穿過​​美術館,周圍是生動的繪畫和雕塑。現在,如果您可以向每一部分提出一個問題並獲得有意義的答案,該怎麼辦?您可能會問:“您在講什麼故事?

聯發科技與kompanio Ultra和Dimenty 9400增強優質陣容聯發科技與kompanio Ultra和Dimenty 9400增強優質陣容Apr 12, 2025 am 11:52 AM

繼續使用產品節奏,本月,Mediatek發表了一系列公告,包括新的Kompanio Ultra和Dimenty 9400。這些產品填補了Mediatek業務中更傳統的部分,其中包括智能手機的芯片

本週在AI:沃爾瑪在時尚趨勢之前設定了時尚趨勢本週在AI:沃爾瑪在時尚趨勢之前設定了時尚趨勢Apr 12, 2025 am 11:51 AM

#1 Google推出了Agent2Agent 故事:現在是星期一早上。作為AI驅動的招聘人員,您更聰明,而不是更努力。您在手機上登錄公司的儀表板。它告訴您三個關鍵角色已被採購,審查和計劃的FO

生成的AI遇到心理摩托車生成的AI遇到心理摩托車Apr 12, 2025 am 11:50 AM

我猜你一定是。 我們似乎都知道,心理障礙由各種chat不休,這些chat不休,這些chat不休,混合了各種心理術語,並且常常是難以理解的或完全荒謬的。您需要做的一切才能噴出fo

原型:科學家將紙變成塑料原型:科學家將紙變成塑料Apr 12, 2025 am 11:49 AM

根據本週發表的一項新研究,只有在2022年製造的塑料中,只有9.5%的塑料是由回收材料製成的。同時,塑料在垃圾填埋場和生態系統中繼續堆積。 但是有幫助。一支恩金團隊

AI分析師的崛起:為什麼這可能是AI革命中最重要的工作AI分析師的崛起:為什麼這可能是AI革命中最重要的工作Apr 12, 2025 am 11:41 AM

我最近與領先的企業分析平台Alteryx首席執行官安迪·麥克米倫(Andy Macmillan)的對話強調了這一在AI革命中的關鍵但不足的作用。正如Macmillan所解釋的那樣,原始業務數據與AI-Ready Informat之間的差距

See all articles

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳圖形設置
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您聽不到任何人,如何修復音頻
3 週前By尊渡假赌尊渡假赌尊渡假赌
WWE 2K25:如何解鎖Myrise中的所有內容
4 週前By尊渡假赌尊渡假赌尊渡假赌

熱工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

DVWA

DVWA

Damn Vulnerable Web App (DVWA) 是一個PHP/MySQL的Web應用程序,非常容易受到攻擊。它的主要目標是成為安全專業人員在合法環境中測試自己的技能和工具的輔助工具,幫助Web開發人員更好地理解保護網路應用程式的過程,並幫助教師/學生在課堂環境中教授/學習Web應用程式安全性。 DVWA的目標是透過簡單直接的介面練習一些最常見的Web漏洞,難度各不相同。請注意,該軟體中

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

mPDF

mPDF

mPDF是一個PHP庫,可以從UTF-8編碼的HTML產生PDF檔案。原作者Ian Back編寫mPDF以從他的網站上「即時」輸出PDF文件,並處理不同的語言。與原始腳本如HTML2FPDF相比,它的速度較慢,並且在使用Unicode字體時產生的檔案較大,但支援CSS樣式等,並進行了大量增強。支援幾乎所有語言,包括RTL(阿拉伯語和希伯來語)和CJK(中日韓)。支援嵌套的區塊級元素(如P、DIV),

EditPlus 中文破解版

EditPlus 中文破解版

體積小,語法高亮,不支援程式碼提示功能