Baca sistem pemantauan pemandu kereta pintar dalam satu artikel

Sistem Pemantauan Pemandu, singkatan DMS, ialah singkatan dari Sistem Pemantau Pemandu Bahasa Inggeris, iaitu sistem pemantauan pemandu. Ia terutamanya menyedari fungsi pengenalan pemandu, pemanduan keletihan pemandu dan pengesanan tingkah laku berbahaya.

Sistem Ford DMS

01 Peraturan Dengan berkat, DMS telah memasuki lorong pantas pembangunan

Dalam peringkat semasa pengeluaran besar-besaran pemanduan autonomi L2-L3, ia hanya boleh dilaksanakan dalam keadaan tertentu banyak kes Pemandu dikehendaki mengambil alih kenderaan tepat pada masanya untuk dilupuskan. Oleh itu, apabila pemandu terlalu mempercayai pemanduan autonomi dan menyerah atau melemahkan kawalan ke atas proses pemanduan, kemalangan tertentu mungkin berlaku. Pengenalan sistem pemantauan pemacu DMS boleh mengurangkan masalah ini dengan berkesan.

Sistem DMS Magna, diambil daripada video pengenalan Magna

Oleh itu, dalam beberapa tahun kebelakangan ini, pelbagai dasar dan peraturan negara telah mula mempromosikan pengenalan DMS: EU dan China telah memperkenalkan undang-undang dan peraturan. China telah mendahului dalam membuat keperluan mandatori untuk pemasangan sistem DMS pada model kenderaan komersial seperti "Dua Penumpang dan Satu Bahaya", dan keperluan untuk kenderaan penumpang juga sedang dirumuskan. Kesatuan Eropah telah memasukkan DMS sebagai elemen utama dan syarat yang diperlukan untuk penarafan keselamatan lima bintang Euro NCAP. Hampir bermula pada tahun 2020, kadar pemuatan sistem DMS telah meningkat dengan pesat, dan industri telah memasuki laluan pantas pembangunan.

Pada 21 Julai, "Ujian Jalan Kenderaan Bersambung Pintar" yang dikeluarkan bersama oleh Kementerian Perindustrian dan Teknologi Maklumat, Kementerian Keselamatan Awam dan Kementerian Pengangkutan dan Spesifikasi Pengurusan Aplikasi Demonstrasi (Percubaan)" menekankan keperluan bahawa kenderaan bersambung pintar mesti mempunyai fungsi pemantauan dalam talian, termasuk pemantauan video dan suara dalam kereta yang boleh mencerminkan status pemandu dan manusia. -interaksi komputer.

02 Vision Solution-DMS Pengenalan Penyelesaian Teknikal

Fungsi teras DMS adalah terutamanya pemantauan keletihan, pemantauan gangguan dan berbahaya pemantau tingkah laku. Penyelesaian DMS awal terutamanya dilaksanakan melalui teknologi bukan biometrik, seperti stereng dan penderia stereng untuk memantau sebarang pergerakan stereng yang tidak menentu, lorong berlepas atau perubahan kelajuan yang tidak munasabah. Walau bagaimanapun, disebabkan oleh kerumitan sistem dan persepsi yang tidak intuitif, kadar penggunaan keseluruhan adalah sangat rendah.

DMS awal mungkin mengelirukan penghakiman sistem disebabkan oleh persepsi yang tidak intuitif. Sumber, Zhihu Constantine.DC

DMS pada peringkat semasa kebanyakannya berdasarkan pengecaman muka berasaskan kamera dan teknologi pengesanan mata, mengumpul maklumat wajah pemandu melalui cahaya inframerah, dsb. Algoritma kemudian menganalisis keadaan fizikal semasa seseorang itu Apabila dikesan bahawa pemandu berada dalam keadaan tidak selamat, pemandu akan diingatkan dengan memancarkan lampu merah atau menggetarkan stereng. Bahagian perkakasan keseluruhan sistem terdiri daripada kamera + penyelesaian pengawal kenderaan/domain kokpit bersepadu bahagian perisian terutamanya melibatkan algoritma penglihatan AI.

Sumber imej Eyesight

Konfigurasi kamera 2D/3D

Pada masa ini, kebanyakan sistem pemantauan pemandu yang digunakan untuk mengesan keletihan pemandu menggunakan kamera cahaya nampak 2D tradisional kos rendah (dengan LED inframerah IR).

Pengenalan kepada Crystal Optoelektronik DMS Camera

Sistem L9 DMS yang ideal

2022, Lideal L9 dilengkapi dengan sensor 3D-ToF Melexis dan menggunakannya pada sistem DMS. Teknologi penderiaan optik 3D menggunakan cahaya inframerah dekat ini boleh membina "peta kedalaman" kepala pemandu Melalui "peta kedalaman", ciri wajah unik pemandu boleh dianalisis dengan tepat, dan prestasinya jauh melebihi teknologi 2D. Selain Melexis, NXP, ams dan Osram juga mempunyai reka letak penyelesaian teknikal yang serupa.

Integrasi kamera

Kamera ini dipasang terutamanya pada kedudukan menghadap pemandu, termasuk bahagian belakang Cermin pandangan kereta/ perakam pemanduan, stereng, skrin kawalan pusat instrumen dan tiang A, dsb. Mengambil kira estetika keseluruhan dalaman, penyepaduan kamera juga telah menjadi topik yang sangat membimbangkan.

Magna menyepadukan kamera ke dalam cermin pandang belakang

Tianma mengeluarkan skrin tebuk lubang yang boleh menyepadukan kamera DMS

Peluasan fungsi sistem DMS

Fungsi asas sistem pemantauan pemandu ialah pemantauan kelesuan, pemantauan gangguan dan pemantauan tingkah laku berbahaya. Walau bagaimanapun, dengan pengenalan kamera 2D/3D dan pembangunan algoritma pengecaman muka, sistem DMS juga menyepadukan pembangunan teknologi pemanduan autonomi seperti ADAS, yang menimbulkan beberapa aplikasi adegan pintar HMI interaksi manusia-komputer yang inovatif untuk meningkatkan tinggi. -Pengalaman pemanduan berautonomi tahap /Memandu dalam era kereta bersambung pintar.

Sistem DMS Continental, Sumber Laman web rasmi Continental

Sebagai penderia interaksi manusia-komputer yang inovatif, pengembangan fungsi DMS ini adalah terutamanya untuk mendapatkan maklumat pemandu, dengan itu menambah baik lagi aplikasi baharu dalam kokpit kereta masa hadapan mencapai pengalaman tersuai:

1 Pengecaman identiti wajah

Apabila pengguna menghampiri penderia, tiada koordinasi tindakan berlaku. diperlukan , ia boleh melengkapkan penghakiman langsung dan pengecaman identiti dengan cepat, membuka pintu secara aktif untuk pengguna, melaraskan kedudukan tempat duduk, dan log masuk dengan cepat ke sistem kenderaan untuk memastikan operasi sistem kokpit yang cekap.

Pengenalan pengecaman muka bukan sahaja meningkatkan pengalaman keselesaan pemanduan, tetapi juga meningkatkan keselamatan kenderaan, seperti fungsi anti-kecurian.

2. Jejak mata

Gunakan kamera untuk melakukan penjejakan medan pandangan dan teknologi penjejakan postur kepala untuk mengenal pasti kawasan yang pemandu melihat (cermin depan pemandu utama, cermin depan penumpang, cermin pandang belakang kiri...). Fungsi ini boleh dikaitkan dengan sistem paparan kepala HUD yang popular semasa, yang boleh melaraskan dalam masa nyata dan memberikan pemandu skrin paparan yang lebih sesuai.

Panasonic AR HUD

3. Pengecaman gerak isyarat

Pengecaman gerak isyarat, berdasarkan teknologi pengecaman gerak isyarat visual, disambungkan kepada sistem kenderaan, menyediakan kaedah gabungan baharu untuk melengkapkan semua fungsi melalui kamera kenderaan . Contohnya, selepas membuat gerak isyarat yang sepadan, hos akan melakukan operasi seperti menukar lagu atau meredam bunyi Definisi khusus ditakrifkan oleh setiap OEM.

Skim interaksi gerak isyarat ialah skim interaksi baharu di luar skim kawalan sentuhan tradisional dan telah digunakan pada BMW untuk bertahun-tahun lamanya. Kamera ini juga boleh mempunyai kaitan tertentu dengan sistem DMS.

4. Pengecaman ekspresi, penderiaan emosi

Kenal pasti emosi semasa pemandu melalui algoritma AI yang inovatif kepada pencahayaan ambien dan sistem pewangi. Aplikasi ini ditunjukkan oleh Toyota di CES 2019.

Konsep Toyota Boshoku AceS

5. Interaksi hiburan

MINIEYE, pembangun teknologi pemanduan autonomi, telah secara inovatif membuka ruang interaktif antara barisan hadapan dan belakang dalam penderiaan kokpit I-CSnya penyelesaian pengeluaran besar-besaran Dengan bantuan pelbagai kaedah interaksi bahasa badan semula jadi seperti garis penglihatan, gerak isyarat, dan pergerakan kepala, interaksi mudah antara berbilang orang dan lokasi boleh dicapai.

Sumber imej MINIEYE

6. OMS Pengesanan Penghuni Kokpit

Memperluaskan kamera secara khusus sepadan dengan pemandu ke seluruh kokpit boleh meningkatkan lagi keselamatan keseluruhan dalam kereta.

Melalui kamera yang terletak di atas bumbung kereta, digabungkan dengan data penderiaan radar gelombang milimeter, sistem boleh menganalisis secara komprehensif sifat-sifat muka, perkadaran tulang manusia dan maklumat panjang badan, yang boleh menentukan orang dewasa dan kanak-kanak dengan tepat. Apabila kanak-kanak dikenali, sistem akan secara aktif mencetuskan fungsi penjagaan kanak-kanak, memantau status dan tingkah laku kanak-kanak secara berterusan, dan memberikan maklum balas masa nyata kepada ibu bapa di barisan hadapan untuk mengingatkan mereka supaya mengambil langkah yang perlu.

Atas ialah kandungan terperinci Baca sistem pemantauan pemandu kereta pintar dalam satu artikel. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!