搜尋
首頁科技週邊人工智慧帕累托排序學習:基於推薦系統公平性的排序學習

作者 | 汪昊

審校 | 孫淑娟

推薦系統公平性是 2017 年以來爆火的人工智慧研究領域。知名的人工智慧公司如 Twitter, Google, IBM和百度,都創立了人工智慧倫理團隊或研發了人工智慧倫理產品。然而讓人遺憾的是,人工智慧倫理研究在國內起步較晚,跟國外相比,目前仍有一定差距。

帕累托排序學習:基於推薦系統公平性的排序學習

排序學習是在 2010 年左右爆發的機器學習技術,在推薦系統和資訊檢索領域都得到了廣泛的應用。在最近幾年,排序學習成為了熱門的人工智慧倫理研究演算法基準。

本文將要介紹的是 2022 年在國際學術會議 CISAT 2022 (International Conference on Computer Information Science and Application Technology) 發表的論文 Pareto Pairwise Ranking for Fairness Enhancement of Recommender Systems。本文主要說明如何結合帕累托分佈和排序學習實現公平的排序學習推薦演算法。

帕累托排序學習:基於推薦系統公平性的排序學習

圖1. MovieLens 資料集觀影評分差機率分佈

我們根據觀察(圖1)和統計理論(齊夫分佈的統計估計)可以得到以下結論: 同一個使用者對不同物品的評分差的機率分佈正比於評分差。我們修改機率矩陣分解的損失函數,得到我們發明的新演算法帕累托排序學習(Pareto Pairwise Ranking)的損失函數公式:

帕累托排序學習:基於推薦系統公平性的排序學習

把我們剛才的觀察帶入損失函數公式中,我們得到以下損失函數公式:

帕累托排序學習:基於推薦系統公平性的排序學習

我們把L 取對數,得到以下公式:

帕累托排序學習:基於推薦系統公平性的排序學習

我們利用隨機梯度下降公式來解損失函數對數,得到以下公式:

帕累托排序學習:基於推薦系統公平性的排序學習

帕累托排序學習:基於推薦系統公平性的排序學習

帕累托排序學習:基於推薦系統公平性的排序學習

#帕累托排序學習的演算法流程如下:

帕累托排序學習:基於推薦系統公平性的排序學習

圖2和圖3顯示的是帕累托排序學習在MovieLens 1 Million Dataset 資料集上的測試結果。論文作者比較了 10 種推薦系統演算法,發現帕累托排序學習演算法在公平性指標上表現最佳。


圖4 和圖5 顯示的是帕累托排序學習在LDOS-CoMoDa 資料集上的測試結果。帕累托排序學習演算法在公平性指標上的表現依然最好。

#########帕累托排序學習演算法是國內少見的基於公平性的排序學習推薦系統演算法。演算法原理簡單,實作簡便,運行速度快。作者在 16G RAM 和 Intel Core i5 的聯想筆記本上測試,執行速度很快。人工智慧倫理研究在國際上目前是研究熱點,希望能引起大家的足夠重視。 ############作者簡介############汪昊,前Funplus 人工智慧實驗室負責人,在ThoughtWorks, 豆瓣,新浪,網易等公司有超過11 年的研發和管理經驗。在推薦系統、聊天機器人、風控反詐騙領域有豐富的技術經驗。在國際學術會議和期刊發表論文 30 篇,獲得最佳論文獎/最佳論文報告獎3次。 2006 年 ACM 區域賽金牌。本科和碩士畢業於美國猶他大學。對外經貿大學在職 MBA。 ##################

以上是帕累托排序學習:基於推薦系統公平性的排序學習的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述
本文轉載於:51CTO.COM。如有侵權,請聯絡admin@php.cn刪除
2023年机器学习的十大概念和技术2023年机器学习的十大概念和技术Apr 04, 2023 pm 12:30 PM

机器学习是一个不断发展的学科,一直在创造新的想法和技术。本文罗列了2023年机器学习的十大概念和技术。 本文罗列了2023年机器学习的十大概念和技术。2023年机器学习的十大概念和技术是一个教计算机从数据中学习的过程,无需明确的编程。机器学习是一个不断发展的学科,一直在创造新的想法和技术。为了保持领先,数据科学家应该关注其中一些网站,以跟上最新的发展。这将有助于了解机器学习中的技术如何在实践中使用,并为自己的业务或工作领域中的可能应用提供想法。2023年机器学习的十大概念和技术:1. 深度神经网

人工智能自动获取知识和技能,实现自我完善的过程是什么人工智能自动获取知识和技能,实现自我完善的过程是什么Aug 24, 2022 am 11:57 AM

实现自我完善的过程是“机器学习”。机器学习是人工智能核心,是使计算机具有智能的根本途径;它使计算机能模拟人的学习行为,自动地通过学习来获取知识和技能,不断改善性能,实现自我完善。机器学习主要研究三方面问题:1、学习机理,人类获取知识、技能和抽象概念的天赋能力;2、学习方法,对生物学习机理进行简化的基础上,用计算的方法进行再现;3、学习系统,能够在一定程度上实现机器学习的系统。

得益于OpenAI技术,微软必应的搜索流量超过谷歌得益于OpenAI技术,微软必应的搜索流量超过谷歌Mar 31, 2023 pm 10:38 PM

截至3月20日的数据显示,自微软2月7日推出其人工智能版本以来,必应搜索引擎的页面访问量增加了15.8%,而Alphabet旗下的谷歌搜索引擎则下降了近1%。 3月23日消息,外媒报道称,分析公司Similarweb的数据显示,在整合了OpenAI的技术后,微软旗下的必应在页面访问量方面实现了更多的增长。​​​​截至3月20日的数据显示,自微软2月7日推出其人工智能版本以来,必应搜索引擎的页面访问量增加了15.8%,而Alphabet旗下的谷歌搜索引擎则下降了近1%。这些数据是微软在与谷歌争夺生

超参数优化比较之网格搜索、随机搜索和贝叶斯优化超参数优化比较之网格搜索、随机搜索和贝叶斯优化Apr 04, 2023 pm 12:05 PM

本文将详细介绍用来提高机器学习效果的最常见的超参数优化方法。 译者 | 朱先忠​审校 | 孙淑娟​简介​通常,在尝试改进机器学习模型时,人们首先想到的解决方案是添加更多的训练数据。额外的数据通常是有帮助(在某些情况下除外)的,但生成高质量的数据可能非常昂贵。通过使用现有数据获得最佳模型性能,超参数优化可以节省我们的时间和资源。​顾名思义,超参数优化是为机器学习模型确定最佳超参数组合以满足优化函数(即,给定研究中的数据集,最大化模型的性能)的过程。换句话说,每个模型都会提供多个有关选项的调整“按钮

荣耀的人工智能助手叫什么名字荣耀的人工智能助手叫什么名字Sep 06, 2022 pm 03:31 PM

荣耀的人工智能助手叫“YOYO”,也即悠悠;YOYO除了能够实现语音操控等基本功能之外,还拥有智慧视觉、智慧识屏、情景智能、智慧搜索等功能,可以在系统设置页面中的智慧助手里进行相关的设置。

人工智能在教育领域的应用主要有哪些人工智能在教育领域的应用主要有哪些Dec 14, 2020 pm 05:08 PM

人工智能在教育领域的应用主要有个性化学习、虚拟导师、教育机器人和场景式教育。人工智能在教育领域的应用目前还处于早期探索阶段,但是潜力却是巨大的。

30行Python代码就可以调用ChatGPT API总结论文的主要内容30行Python代码就可以调用ChatGPT API总结论文的主要内容Apr 04, 2023 pm 12:05 PM

阅读论文可以说是我们的日常工作之一,论文的数量太多,我们如何快速阅读归纳呢?自从ChatGPT出现以后,有很多阅读论文的服务可以使用。其实使用ChatGPT API非常简单,我们只用30行python代码就可以在本地搭建一个自己的应用。 阅读论文可以说是我们的日常工作之一,论文的数量太多,我们如何快速阅读归纳呢?自从ChatGPT出现以后,有很多阅读论文的服务可以使用。其实使用ChatGPT API非常简单,我们只用30行python代码就可以在本地搭建一个自己的应用。使用 Python 和 C

人工智能在生活中的应用有哪些人工智能在生活中的应用有哪些Jul 20, 2022 pm 04:47 PM

人工智能在生活中的应用有:1、虚拟个人助理,使用者可通过声控、文字输入的方式,来完成一些日常生活的小事;2、语音评测,利用云计算技术,将自动口语评测服务放在云端,并开放API接口供客户远程使用;3、无人汽车,主要依靠车内的以计算机系统为主的智能驾驶仪来实现无人驾驶的目标;4、天气预测,通过手机GPRS系统,定位到用户所处的位置,在利用算法,对覆盖全国的雷达图进行数据分析并预测。

See all articles

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
2 週前By尊渡假赌尊渡假赌尊渡假赌
倉庫:如何復興隊友
4 週前By尊渡假赌尊渡假赌尊渡假赌
Hello Kitty Island冒險:如何獲得巨型種子
4 週前By尊渡假赌尊渡假赌尊渡假赌

熱工具

Safe Exam Browser

Safe Exam Browser

Safe Exam Browser是一個安全的瀏覽器環境,安全地進行線上考試。該軟體將任何電腦變成一個安全的工作站。它控制對任何實用工具的訪問,並防止學生使用未經授權的資源。

DVWA

DVWA

Damn Vulnerable Web App (DVWA) 是一個PHP/MySQL的Web應用程序,非常容易受到攻擊。它的主要目標是成為安全專業人員在合法環境中測試自己的技能和工具的輔助工具,幫助Web開發人員更好地理解保護網路應用程式的過程,並幫助教師/學生在課堂環境中教授/學習Web應用程式安全性。 DVWA的目標是透過簡單直接的介面練習一些最常見的Web漏洞,難度各不相同。請注意,該軟體中

SublimeText3 英文版

SublimeText3 英文版

推薦:為Win版本,支援程式碼提示!

EditPlus 中文破解版

EditPlus 中文破解版

體積小,語法高亮,不支援程式碼提示功能

SublimeText3 Linux新版

SublimeText3 Linux新版

SublimeText3 Linux最新版