搜尋
首頁科技週邊人工智慧一文聊聊SLAM技術在自動駕駛的應用

定位在自動駕駛中佔據著不可替代的地位,而且未來有著可期的發展。目前自動駕駛中的定位都是依賴RTK配合高精地圖,這為自動駕駛的落地增加了不少成本與難度。試想一下人類開車,並非需要知道自己的全局高精定位及周圍的詳細環境,有一條全局導航路徑並配合車輛在該路徑上的位置,也就足夠了,而這裡牽涉到的,便是SLAM領域的關鍵技術。

什麼是SLAM

SLAM (Simultaneous Localization and Mapping),也稱為CML (Concurrent Mapping and Localization),即時定位與地圖構建,或併發建圖與定位。問題可以描述為:將一個機器人放入未知環境中的未知位置,是否有辦法讓機器人一邊逐步描繪出此環境完全的地圖,同時一邊決定機器人應該往哪個方向行進。例如掃地機器人就是一個很典型的SLAM問題,所謂完整的地圖(a consistent map)是指不受障礙物行進到房間可進入的每個角落。

一文聊聊SLAM技術在自動駕駛的應用

SLAM最早由Smith、Self和Cheeseman於1988年提出。由於其重要的理論與應用價值,被許多學者認為是實現真正全自主移動機器人的關鍵。

模擬人類來到一個陌生的環​​境時,為了迅速熟悉環境並完成自己的任務(例如找飯館,找旅館),這時應依次做以下事情:

a.用眼睛觀察周圍地標如建築、大樹、花壇等,並記住他們的特徵(特徵提取)

b.在自己的腦海中,根據雙眼獲得的信息,把特徵地標在三維地圖中重建出來(三維重建)

c.當自己在行走時,不斷獲取新的特徵地標,並且校正自己頭腦中的地圖模型(bundle adjustment or EKF)

d.根據自己前一段時間行走獲得的特徵地標,確定自己的位置(trajectory)

e.當無意中走了很長一段路的時候,和腦海中的以往地標進行匹配​​,看一看是否走回了原路(loop-closure detection)。實際這一步可有可無。以上五個步驟是同時進行的,因此是Simultaneous Localization and Mapping。

雷射SLAM與視覺SLAM

目前用在SLAM上的感測器主要分兩大類,光達與攝影機。光達有單線多線之分,角解析度及精度也各有千秋。

一文聊聊SLAM技術在自動駕駛的應用

而VSLAM則主要以攝影機來實現,攝影機品種繁多,主要分為單目、雙眼、單目結構光、雙眼結構光、ToF幾大類。他們的核心都是獲取RGB和depth map(深度資訊)。由於受製成本的影響,視覺SLAM在近年來變得越來越流行,透過低成本的攝影機進行即時的建圖與定位,這裡面的技術難度也是非常之大。以ToF(Time of Flight),一種很有前景的深度獲取方法為例。

感測器發出經過調製的近紅外光,遇物體後反射,感測器透過計算光線發射和反射時間差或相位差,來換算被拍攝景物的距離,以產生深度訊息。類似雷達,或是想像蝙蝠,softkinetic的DS325採用的就是ToF方案(TI設計的)。但它的接收器微觀結構比較特殊,有2個或更多快門,測ps等級的時間差,但它的單位像素尺寸通常在100um的尺寸,所以目前解析度不高。

一文聊聊SLAM技術在自動駕駛的應用

在有了深度圖之後呢,SLAM演算法就開始運作了,由於Sensor和需求的不同,SLAM的呈現形式略有差異。大致可分為雷射SLAM(也分為2D和3D)和視覺SLAM(也分為Sparse、semiDense、Dense),但其主要思路大同小異。

SLAM演算法實現的要素

SLAM技術非常實用,同時難度也相當大,在時刻需要精確定位的自動駕駛領域,想要完成SLAM落地也是困難重重。一般來說,SLAM演算法在實作的時候主要考慮以下4個面向:

1、地圖表示問題,例如dense和sparse都是它的不同表達方式,這個需要根據實際場景需求去抉擇;

2、資訊感知問題,需要考慮如何全面的感知這個環境,RGBD攝影機FOV通常比較小,但雷射雷達比較大;

3、資料關聯問題,不同的sensor的資料型態、時間戳記、座標系表達方式各有不同,需要統一處理;

4、定位與構圖問題,就是指怎麼實現位姿估計和建模,這裡面涉及到很多數學問題,物理模型建立,狀態估計和優化;其他的還有回環檢測問題,探索問題(exploration),以及綁架問題(kidnapping)。

一文聊聊SLAM技術在自動駕駛的應用

目前比較流行的視覺SLAM框架主要包含前端和後端:

前端

前端相當於VO(視覺里程計),研究影格與影格之間變換關係。

首先提取每幀影像特徵點,利用相鄰幀影像,進行特徵點匹配,然後利用RANSAC去除大噪聲,然後進行匹配,得到一個pose資訊(位置和姿態),同時可以利用IMU(Inertial measurement unit慣性測量單元)提供的姿態資訊進行濾波融合後端則主要是對前端出結果進行最佳化,利用濾波理論(EKF、UKF、PF)、或最佳化理論TORO、G2O進行樹或圖的優化。最終得到最優的位姿估計。

後端

#後端這邊難點比較多,涉及的數學知識也比較多,總的來說大家已經慢慢拋棄傳統的濾波理論走向圖優化去了。

因為基於濾波的理論,濾波器穩度成長太快,這對於需要頻繁求逆的EKF(擴展卡爾曼濾波器),PF壓力很大。

而基於圖的SLAM,通常以keyframe(關鍵影格)為基礎,建立多個節點和節點之間的相對變換關係,例如仿射變換矩陣,並不斷地進行關鍵節點的維護,保證圖的容量,在保證精度的同時,降低了計算量。

SLAM未來在自動駕駛領域的應用

#Slam技術目前已經在多個領域都取得了不錯的落地效果與成績,包括室內的移動機器人,AR場景以及無人機等等。而在自動駕駛領域,SLAM技術卻一直未得到太多的重視,一方面由於定位在目前的自動駕駛行業中大多通過RTK來解決,並不會投入過多的資源去進行深入的研究,另一方面也是由於目前技術還不成熟,在自動駕駛這種關乎生命的領域,任何一種新技術都得經過時間的檢驗才能被接受。

一文聊聊SLAM技術在自動駕駛的應用

在未來,隨著感測器精度的逐漸提升,SLAM也會在自動駕駛領域大顯身手,其成本的低昂性,性能的穩健性,都將為自動駕駛帶來革命性的改變。而隨著SLAM技術的逐漸火熱,也將有越來越多的定位人才湧進自動駕駛領域,為自動駕駛注入新血,帶來新的技術方向與研究領域。

以上是一文聊聊SLAM技術在自動駕駛的應用的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述
本文轉載於:51CTO.COM。如有侵權,請聯絡admin@php.cn刪除
及時工程中的思想圖是什麼及時工程中的思想圖是什麼Apr 13, 2025 am 11:53 AM

介紹 在迅速的工程中,“思想圖”是指使用圖理論來構建和指導AI的推理過程的新方法。與通常涉及線性S的傳統方法不同

優化您的組織與Genai代理商的電子郵件營銷優化您的組織與Genai代理商的電子郵件營銷Apr 13, 2025 am 11:44 AM

介紹 恭喜!您經營一家成功的業務。通過您的網頁,社交媒體活動,網絡研討會,會議,免費資源和其他來源,您每天收集5000個電子郵件ID。下一個明顯的步驟是

Apache Pinot實時應用程序性能監視Apache Pinot實時應用程序性能監視Apr 13, 2025 am 11:40 AM

介紹 在當今快節奏的軟件開發環境中,確保最佳應用程序性能至關重要。監視實時指標,例如響應時間,錯誤率和資源利用率可以幫助MAIN

Chatgpt擊中了10億用戶? Openai首席執行官說:'短短幾週內翻了一番Chatgpt擊中了10億用戶? Openai首席執行官說:'短短幾週內翻了一番Apr 13, 2025 am 11:23 AM

“您有幾個用戶?”他扮演。 阿爾特曼回答說:“我認為我們上次說的是每週5億個活躍者,而且它正在迅速增長。” “你告訴我,就像在短短幾週內翻了一番,”安德森繼續說道。 “我說那個私人

pixtral -12b:Mistral AI'第一個多模型模型 - 分析Vidhyapixtral -12b:Mistral AI'第一個多模型模型 - 分析VidhyaApr 13, 2025 am 11:20 AM

介紹 Mistral發布了其第一個多模式模型,即Pixtral-12b-2409。該模型建立在Mistral的120億參數Nemo 12B之上。是什麼設置了該模型?現在可以拍攝圖像和Tex

生成AI應用的代理框架 - 分析Vidhya生成AI應用的代理框架 - 分析VidhyaApr 13, 2025 am 11:13 AM

想像一下,擁有一個由AI驅動的助手,不僅可以響應您的查詢,還可以自主收集信息,執行任務甚至處理多種類型的數據(TEXT,圖像和代碼)。聽起來有未來派?在這個a

生成AI在金融部門的應用生成AI在金融部門的應用Apr 13, 2025 am 11:12 AM

介紹 金融業是任何國家發展的基石,因為它通過促進有效的交易和信貸可用性來推動經濟增長。交易的便利和信貸

在線學習和被動攻擊算法指南在線學習和被動攻擊算法指南Apr 13, 2025 am 11:09 AM

介紹 數據是從社交媒體,金融交易和電子商務平台等來源的前所未有的速度生成的。處理這種連續的信息流是一個挑戰,但它提供了

See all articles

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳圖形設置
3 週前By尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您聽不到任何人,如何修復音頻
3 週前By尊渡假赌尊渡假赌尊渡假赌
WWE 2K25:如何解鎖Myrise中的所有內容
4 週前By尊渡假赌尊渡假赌尊渡假赌

熱工具

MinGW - Minimalist GNU for Windows

MinGW - Minimalist GNU for Windows

這個專案正在遷移到osdn.net/projects/mingw的過程中,你可以繼續在那裡關注我們。 MinGW:GNU編譯器集合(GCC)的本機Windows移植版本,可自由分發的導入函式庫和用於建置本機Windows應用程式的頭檔;包括對MSVC執行時間的擴展,以支援C99功能。 MinGW的所有軟體都可以在64位元Windows平台上運作。

DVWA

DVWA

Damn Vulnerable Web App (DVWA) 是一個PHP/MySQL的Web應用程序,非常容易受到攻擊。它的主要目標是成為安全專業人員在合法環境中測試自己的技能和工具的輔助工具,幫助Web開發人員更好地理解保護網路應用程式的過程,並幫助教師/學生在課堂環境中教授/學習Web應用程式安全性。 DVWA的目標是透過簡單直接的介面練習一些最常見的Web漏洞,難度各不相同。請注意,該軟體中

EditPlus 中文破解版

EditPlus 中文破解版

體積小,語法高亮,不支援程式碼提示功能

SublimeText3 Linux新版

SublimeText3 Linux新版

SublimeText3 Linux最新版

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用