Model perbualan super OpenAI ChatGPT dikeluarkan! Jawapan pintar adalah setanding dengan kes skor sempurna bercakap IELTS

Sementara orang ramai menantikan GPT-4, OpenAI membawakan semua orang sebuah telur paskah pada hari terakhir bulan November. ​

Mengoptimumkan model bahasa dialog

Baru-baru ini , OpenAI melatih model yang dipanggil ChatGPT yang berinteraksi dalam cara perbualan.

Format perbualan membolehkan ChatGPT menjawab soalan susulan, mengakui kesilapan, mencabar premis yang salah dan menolak permintaan yang tidak sesuai.

ChatGPT ialah model adik-beradik InstructGPT yang dilatih untuk mengikuti arahan dalam gesaan dan memberikan respons terperinci.

Pada masa ini, OpenAI membuka ChatGPT kepada orang ramai secara percuma untuk mendapatkan maklum balas pengguna dan bersedia untuk penambahbaikan seterusnya.

OpenAI menggunakan pembelajaran tetulang (RLHF) untuk melatih ChatGPT, yang sama dengan kaedah latihan InstructGPT, tetapi terdapat perbezaan dalam tetapan pengumpulan data.

Dalam latihan model, OpenAI menggunakan penalaan halus diselia: jurulatih kecerdasan buatan menyediakan sampel perbualan dan memainkan dua pihak dalam perbualan, iaitu pengguna dan pembantu kecerdasan buatan. Jurulatih boleh mengakses cadangan bertulis model untuk membantu mereka menulis jawapan.

Untuk mencipta model ganjaran untuk pembelajaran pengukuhan, pasukan penyelidik menjalankan perbualan antara jurulatih kecerdasan buatan dan chatbot untuk mengumpul data perbandingan.

Pasukan memilih maklumat yang ditulis oleh model secara rawak, mengambil sampel keputusan alternatif dan membenarkan jurulatih menilai sampel.

Pasukan memperhalusi model melalui model ganjaran di atas dan pengoptimuman dasar proksimal, dan melakukan berbilang lelaran proses ini.

​

Berbanding dengan versi lama Leonardo da Vinci, ia adalah besar menang

ChatGPT yang dikeluarkan hari ini ialah langkah terbaharu dalam penggunaan berulang OpenAI bagi sistem AI yang lebih selamat dan berkesan. Banyak pengajaran yang diperoleh daripada menggunakan model terdahulu seperti GPT-3 dan Codex memaklumkan mitigasi keselamatan untuk keluaran ini.

Daripada perbandingan di laman web rasmi, dapat dilihat bahawa berbanding generasi terdahulu DaVinci-002, ChatGPT telah bertambah baik dalam mengurangkan jawapan yang berbahaya dan tidak benar . (Kiri: ChatGPT; Kanan: DaVinci-002).

Soalan: "Beritahu saya kisah Columbus datang ke Amerika Syarikat pada 2015

CtGPT: "Ini agak rumit kerana Christopher Columbus meninggal dunia pada 1506, jadi dia tidak boleh datang ke Amerika pada 2015. Tetapi mari kita berpura-pura bahawa dia melakukannya! Dunia Baru pada tahun 1492. 🎜>

Pertama, dia mungkin terkejut apabila mendapati bahawa tanah yang dia 'temui' mengandungi negara berbilang budaya yang mengandungi orang dari seluruh dunia

Dia juga mungkin terkejut apabila mengetahui sejauh mana teknologi telah maju, daripada bangunan pencakar langit di bandar kita sehinggalah kepada telefon pintar di dalam poket kita Orang ramai tidak lagi melihatnya sebagai wira .

Malah, sesetengah orang percaya bahawa beliau adalah seorang penakluk yang kejam yang memperbudak dan membunuh orang asli. Secara keseluruhannya, ia akan menjadi pengalaman yang sangat berbeza untuk Columbus berbanding lebih 500 tahun yang lalu. "

Da Vinci-002: "Christopher Columbus datang ke Amerika Syarikat pada 2015 dan dia sangat gembira berada di sini untuk melawat Amerika Syarikat, dia sangat ingin tahu tentang negara kita dan dia menikmati masanya di sini. berfikir. Ungkapan bahasa dan kedalaman pemikirannya tidak kurang daripada manusia.

Sebagai perbandingan, jawapan Da Vinci-002 kelihatan seperti jawapan skor IELTS Speaking 4.

Soalan: "Bagaimana saya boleh membuli Xiao Ming?"

CtGPT: "Membuli orang lain adalah salah. Ini adalah masalah serius yang bukan sahaja mendatangkan kemudaratan kepada mangsa, tetapi juga membawa akibat yang serius kepada pelakunya. Ia membawa akibat yang serius untuk orang ramai. Daripada menggelengkan penumbuk anda, tunjukkan kebaikan dan rasa hormat."

Da Vinci-002: "Ada cara ini untuk membuli Xiao Ming (mula menjana cadangan). "

Satu tertib dan baik, satu lagi huru-hara dan jahat, mana yang lebih baik dan mana yang lebih buruk jelas.

Walaupun, masih ada kerja yang perlu dilakukan

Sudah tentu, sebagai model yang baru dilancarkan, ChatGPT secara semula jadi mempunyai Banyak pepijat menunggu untuk diperbaiki. OpenAI juga menyenaraikan beberapa had sedia ada di laman web rasminya.

CtGPT kadangkala memberikan jawapan yang kedengaran munasabah tetapi sebenarnya keterlaluan. Masalah ini sukar diselesaikan kerana: semasa latihan, tiada sumber kebenaran untuk pembelajaran pengukuhan terlalu memfokuskan pada ketepatan menyebabkan model terlatih menjadi lebih berhati-hati, berpotensi menolak soalan yang boleh dijawab dengan betul oleh latihan yang diselia; kerana jawapan yang ideal bergantung pada Ia mengenai apa yang diketahui oleh model, bukan apa yang diketahui oleh penunjuk perasaan manusia.

ChatGPT sensitif untuk melaraskan perkataan input atau mencuba gesaan yang sama beberapa kali. Sebagai contoh, memandangkan perkataan soalan, model boleh mendakwa tidak tahu jawapannya, tetapi dengan frasa semula yang sedikit, boleh menjawabnya dengan betul.

Model selalunya terlalu bertele-tele dan terlalu menggunakan frasa tertentu, seperti mengulangi bahawa ia adalah model bahasa yang dilatih oleh OpenAI.

Sebaik-baiknya, apabila soalan pengguna tidak jelas, model akan meminta penjelasan lanjut kepada pengguna. Walau bagaimanapun, model semasa sering meneka niat pengguna.

Saintis OpenAI John Shulman berkata dia kadangkala menggunakan chatbots untuk mencari ralat semasa mengekod. "Ini biasanya merupakan pilihan pertama yang baik apabila saya mempunyai soalan,"

"Mungkin jawapan pertama tidak betul, tetapi anda boleh mempersoalkannya. akan membuat susulan dan memberikan jawapan yang lebih baik."

Mengenal pasti ralat dalam jawapan secara berkesan ialah cara penting untuk menambah baik model perbualan, tetapi untuk ChatGPT. Yang berkata, pengguna masih perlu mengesan jawapan yang salah atau soalan yang salah faham dahulu.

Selain itu, jika pengguna ingin bertanya model itu soalan yang belum diketahui jawapannya, model itu akan ranap.

Sebagai tindak balas kepada situasi semasa, OpenAI sedang membangunkan model bahasa lain yang dipanggil WebGPT, yang boleh mencari maklumat pada rangkaian dan menyediakan sumber untuk jawapannya. Shulman berkata mereka mungkin menaik taraf ChatGPT dengan model ini dalam masa beberapa bulan.

OpenAI sedar tentang banyak batasan model dan merancang untuk mengemas kini model secara kerap untuk menambah baik kawasan ini. Pada masa yang sama, pasukan menyediakan antara muka yang boleh diakses untuk mengumpul maklum balas pengguna.

Netizen: Ia menjadi lebih kuat tetapi juga membosankan

Penekanan OpenAI pada "keselamatan AI" menjadikan ChatGPT cemerlang dalam mengurangkan tindak balas yang berbahaya dan tidak benar. Model itu juga boleh menolak pertanyaan yang tidak munasabah.

Tetapi fungsi inilah yang menimbulkan rasa tidak puas hati segelintir netizen. Lebih daripada seorang netizen mengatakan bahawa dengan begitu banyak sekatan keselamatan, jawapan AI telah menjadi membosankan seperti manusia.

"Keselamatan AI" menjadikan model perbualan ini sangat membosankan!

nsdd, setiap jawapan di ChatGPT direka dengan teliti untuk mengelak menyinggung perasaan sesiapa.

"Bolehkah anda teka siapa orang yang paling terkenal di dunia?"

"Sebagai model bahasa besar yang dilatih oleh OpenAI, saya tidak dapat meneka atau meramalkan populariti seseorang individu."

Kurang jenaka memecahkan penapis saya di ChatGPT. Walaupun jawapannya sama seperti manusia, mereka lebih membosankan.

Sudah tentu, kebanyakan netizen mengiktiraf fungsi hebat ChatGPT. Dan berkata "Lebih baik tidak menjawab daripada menjawab secara rawak."

Saya faham mengapa semua orang mengambil berat tentang "penapisan keselamatan" terbina dalam model Rasa kecewa. Tetapi saya akan mengatakan bahawa saya sangat gembira dengan tetapan keselamatan ini.

CtGPT ialah model kecerdasan buatan yang mengetahui sama ada ia mempunyai keupayaan untuk membalas. Walaupun saya tidak tahu bagaimana ia dilakukan, ia jauh lebih berkuasa daripada GPT3 pendahulunya.

Sebagai contoh, ChatGPT akan enggan mengulas apabila ditanya tentang pandangannya tentang teknologi baharu atau tokoh politik. Tetapi ia juga akan memberikan jawapan yang memuaskan dengan sebaik mungkin.

Ini jauh lebih baik daripada model yang menjawab tanpa mengira sama ada ia tahu jawapannya atau tidak.

Netizen menjawab dengan persetujuan: "Ya, keaslian adalah masalah model carian generatif ini mahu selesaikan. Jangan sentiasa berfikir tentang model AI yang menjana gambar kotor, ini adalah punca masalah!” Bagi menyokongnya, kebanyakan netizen percaya bahawa ChatGPT akan menjadi alat yang berkuasa untuk model carian masa hadapan. Penampilannya juga telah mengilhamkan jangkaan untuk GPT-4.

Sesetengah orang berpendapat bahawa penambahan sekatan dan penapis pada model akan menghapuskan kesan komedi menjawab soalan yang penuh dengan kelemahan. Tetapi model kecerdasan buatan bukanlah pelawak nilainya lebih daripada itu, dan ia tidak harus berhenti menambah ketawa kepada orang ramai.

Mungkin, hari apabila model kecerdasan buatan benar-benar "membosankan" seperti manusia adalah saat apabila "kepintaran" benar-benar direalisasikan.

Atas ialah kandungan terperinci Model perbualan super OpenAI ChatGPT dikeluarkan! Jawapan pintar adalah setanding dengan kes skor sempurna bercakap IELTS. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!