NPU melancarkan rangka kerja kawalan UAV yang inovatif: membolehkan interaksi gaya sembang kumpulan, persepsi aktif terhadap alam sekitar dan kawalan autonomi UAV

Keupayaan generalisasi super menjadikan model besar sebagai sinar harapan untuk "kecerdasan buatan am".

Walau bagaimanapun, membaca beribu-ribu buku tidak sehebat perjalanan beribu-ribu batu Dalam persekitaran terbuka, model besar perlu benar-benar "berjalan" ke dunia fizikal untuk benar-benar memahami tugas yang rumit dan menyelesaikannya masalah praktikal.

Baru-baru ini, pasukan Profesor Li Xuelong menjalankan penyelidikan inovatif tentang kumpulan dron autonomi dalam persekitaran terbuka. Mereka menggunakan model berskala besar domestik untuk berjaya merealisasikan interaksi dialog manusia-komputer dan berbilang mesin dalam persekitaran terbuka, memecahkan halangan interaksi antara manusia dan mesin. Penyelidikan ini memperluaskan lagi senario aplikasi keselamatan tempatan, membolehkan dron besar terbang dalam kehidupan sebenar

Diinspirasikan oleh model kognitif manusia, pasukan kami merumuskan proses kognitif yang sangat autonomi Untuk interaksi tiga dimensi "pengkomputeran pemikiran - kawalan entiti - persepsi persekitaran", rangka kerja kawalan "sembang kumpulan" untuk dron autonomi yang dipacu oleh model besar sumber terbuka "Scholar·Puyu" telah ditubuhkan. Kami melengkapkan setiap dron dengan otak pintar, membolehkan kumpulan dron bekerjasama secara dinamik melalui komunikasi bahasa untuk mencapai interaksi pintar, persepsi aktif dan kawalan autonomi dalam persekitaran terbuka dan tugas yang kompleks. Langkah ini meningkatkan autonomi pelaksanaan misi dron

Secara amnya, keupayaan utama kelompok dron autonomi termasuk interaksi perbualan seperti manusia, persepsi persekitaran aktif dan kawalan entiti autonomi#🎜🎜 #

Manusia -seperti interaksi dialog

Rajah 1 Komunikasi sembang kumpulan dron

Meneroka pengguna manusia dan dron Kaedah interaktif dron membolehkan dron untuk memahami keperluan pengguna dalam tugas yang kompleks, yang merupakan prasyarat untuk merealisasikan dron autonomi.

Sebagai tindak balas kepada ini, pasukan mencadangkan kaedah interaksi dialog "sembang kumpulan", yang menukar pelbagai maklumat seperti bunyi, imej dan status dron itu sendiri ke dalam bentuk dialog bahasa semula jadi melalui model besar , mencapai interaksi Autonomi dan intuitif antara pengguna dan dron, serta antara dron.

Untuk meningkatkan kestabilan pelaksanaan dan keselamatan tugas yang kompleks, pasukan itu mereka bentuk mekanisme maklum balas masa nyata yang cekap. Mekanisme ini membolehkan dron melaporkan statusnya melalui dialog dan mendapatkan pengesahan pengguna pada nod utama dalam pelaksanaan misi. Pada masa yang sama, mekanisme ini juga boleh meningkatkan kecekapan pelaksanaan tugas #

Rajah 3 Penghindaran halangan persekitaran dinamik

#🎜. 🎜# Semasa penerbangan, dron mengesan persekitaran luaran secara aktif dan melaraskan dalam masa nyata Perancangan misi ialah pautan utama dalam menyelesaikan tugasan yang rumit. Untuk menangani masalah ini, pasukan membangunkan mekanisme persepsi aktif berpandukan tugas dan mencadangkan pencarian altitud rendah gabungan pelbagai sensor, pengelakan halangan dinamik dan algoritma kedudukan visual

#🎜 🎜# Semasa pelaksanaan misi sebenar, kami boleh melaraskan laluan penerbangan dan postur pemerhatian UAV secara dinamik berdasarkan maklumat yang dilihat dan matlamat misi. Kita boleh cuba melihat dunia di sekeliling kita dari sudut dan kedudukan yang berbeza, dan secara beransur-ansur mengurangkan ketidakpastian dalam persekitaran untuk mencapai pengumpulan maklumat dan pelaksanaan tugas yang cekap

KAWALAN BERAUTONOMI # 🎜🎜#

Rajah 4 Tangkapan sasaran berautonomi

Rajah 5 Kawalan kolaboratif gugusan dron heterogen

#🎜🎜🎜 #Penyelidikan utama adalah untuk meneroka bentuk ejen komposit untuk meningkatkan keupayaan mereka untuk mengendalikan tugas yang kompleks. Dalam era model besar, ini adalah bidang utama untuk kecerdasan baharu

Untuk menyelesaikan masalah ini, pasukan R&D menggunakan platform dron untuk mereka bentuk pengesan akhir seperti grippers untuk menaik taraf dron tradisional. "robot terbang" keupayaan untuk merebut

Pada masa yang sama, ia juga mewujudkan mekanisme kawalan kolaboratif kelompok dron heterogen dan digabungkan dengan maklum balas persepsi alam sekitar untuk melaraskan status penerbangan pembentukan dron dalam masa nyata. Untuk membolehkan kluster bekerjasama dan melaksanakan tugas seperti carian serantau, kedudukan sasaran dan merangkak

Pasukan berjaya mencuba menggunakan model interaksi tiga dimensi kecerdasan biologi "pengkomputeran pemikiran - kawalan entiti - persepsi persekitaran" kepada ejen autonomi, membentuk gugusan dron autonomi yang besar. Kelompok jenis ini menggunakan model bahasa berskala besar, platform dron dan pelbagai penderia untuk mencapai interaksi perbualan, persepsi aktif dan kawalan autonomi. Teknologi ini sangat penting untuk aplikasi dalam senario keselamatan di tapak seperti pemeriksaan keselamatan, penyelamatan bencana dan logistik udara

Rujukan: Li Xuelong, Vicinagearth security, Communications of the China Computer Society, 18(11), 44- 52, 2022

Atas ialah kandungan terperinci NPU melancarkan rangka kerja kawalan UAV yang inovatif: membolehkan interaksi gaya sembang kumpulan, persepsi aktif terhadap alam sekitar dan kawalan autonomi UAV. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!