'Guru Sosial' GPT-4! Tahu cara mentafsir ungkapan dan membuat spekulasi tentang psikologi

Bayangkan anda menghadiri pesta koktel yang meriah yang dipenuhi dengan perbualan yang rancak dan dentingan cermin mata.

Pada masa ini, anda seorang pemerhati yang santai, bersembunyi di sudut dengan gembira. Namun, walaupun tanpa berada di tengah-tengah parti, anda boleh dengan mudah mengetahui hubungan sosial antara orang yang berbeza, memahami apa yang berlaku, dan juga mentafsir mesej sosial yang terang-terangan dan terselindung dengan membaca isyarat lisan dan bukan lisan orang.

Bagaimana jika LLM boleh menghasilkan semula tahap kemahiran sosial ini? Tidak, itulah Koko Mind.

Buka sahaja video, dan model akan mula menganalisis ekspresi watak dan membuat kesimpulan tentang emosi watak.

Kemudian, anda juga boleh bertanya soalan dalam bar segera di sebelah kanan untuk membenarkan AI menganalisis lebih lanjut arus bawah teka-teki sosial dalam video.

(Sejujurnya ini sukar bagi sesetengah orang)

Gambar

Koko Mind mengandungi 150 interaksi sosial pelbagai pihak yang kompleks dan soalan dan jawapan teks percuma.

Untuk memastikan kepelbagaian dan skalabiliti data serta mengelakkan pencemaran data, semua interaksi sosial, soalan dan jawapan dijana oleh GPT-4 dan seterusnya disahkan oleh pakar manusia.

Data analisis adalah berdasarkan tiga sumber berbeza:

• GPT-4-sahaja: Subset ini dicipta oleh GPT-4 hanya melalui pembayang.
  
• Berdasarkan filem: Untuk mengelakkan pencemaran data, bahagian data ini berdasarkan pelbagai adegan yang diekstrak daripada filem yang dikeluarkan selepas 2022. GPT-4 bertanggungjawab untuk membentuk adegan ini, menambah elemennya sendiri sambil mengekalkan intipati teras.
  
• Berdasarkan ToMi: Bahagian ini mengandungi data yang dikuasakan oleh set data simulasi ToMi, yang melibatkan pemindahan objek fizikal ke tempat yang berbeza, ujian klasik teori minda. Sudah tentu, interaksi sosial ini mesti diubah suai dan dikembangkan oleh GPT-4. .

Teori Minda: Soalan yang menilai pemahaman tentang keadaan mental dan perspektif orang lain.

Norma Sosial: Soalan yang direka untuk mengenal pasti nilai dan norma sosial dalam sesuatu situasi.

• Pengecaman Emosi: Masalah yang bertujuan untuk mengenal pasti dan memahami elemen emosi dalam konteks.
  
• Hubungan Sosial: Fokus pada dinamik dan hubungan interpersonal.
  
• Soalan kontrafaktual: Pertanyaan hipotesis direka untuk meneroka hasil atau kemungkinan alternatif.
  
• Nasihat Sosial: Soalan yang mencadangkan nasihat atau tindakan disyorkan yang berkaitan dengan situasi tertentu.
  
Para penyelidik menggunakan text-davinci-003 sebagai rujukan untuk menilai model berbeza selepas AlpacaEval.
• 
  Di mana penyelidik mengeluarkan isyarat bukan lisan dalam kurungan daripada konteks (cth. minum kopi dengan gugup, dsb.).
• Berikut adalah beberapa perkara menarik:

Daripada kedua-dua model, GPT-4 menunjukkan kepastian dan keyakinan yang lebih besar dalam mengenal pasti model yang menang berbanding Claude.

Claude mengatasi GPT-4 apabila konteksnya tidak mempunyai isyarat bukan lisan dan interaksi sama ada dijana sepenuhnya oleh GPT-4 atau berdasarkan filem.

• Dan jika konteksnya mengandungi petunjuk bukan lisan, maka GPT-4 sentiasa lebih baik daripada Claude. . setiap model.
  

  Gambar

  Hasilnya, walaupun menarik dalam banyak cara, juga mempunyai had tertentu. Pertama, Koko Mind adalah agak kecil, yang mungkin mengehadkan kebolehgunaan yang luas dan komprehensif kesimpulan penyelidik.

  Kedua, semua interaksi dalam Koko Mind dijana oleh GPT-4 dan memerlukan pengesahan manual, yang menjadikan set data sukar dikembangkan.

  Selain itu, walaupun Koko Mind menyediakan jawapan yang disahkan manusia dalam set data, penyelidik tidak menggunakan jawapan ini sebagai rujukan semasa menilai, dan memandangkan jawapan ini dihasilkan oleh GPT-4, ia mungkin berat sebelah terhadap GPT -4 .

  Penyelidikan masa depan boleh menumpukan pada cara menilai model dengan jawapan rujukan janaan mesin yang disahkan manusia.

  Sudah tentu, walaupun terdapat batasan satu jenis atau yang lain, penyelidik masih menganggap Koko Mind sebagai batu loncatan untuk penyelidikan masa depan yang berkaitan dengan kecerdasan sosial, model bahasa pelbagai mod, dll.

Atas ialah kandungan terperinci 'Guru Sosial' GPT-4! Tahu cara mentafsir ungkapan dan membuat spekulasi tentang psikologi. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!