chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

AI提高自動駕駛夜視能力,檢測黑夜、霧天場景和白天一樣

智能感知與物聯(lián)網(wǎng)技術研究所 ? 來源:未知 ? 2023-07-30 22:35 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

未來,HADAR 可能會徹底改變自動駕駛汽車和機器人感知周圍世界的方式。

環(huán)境感知是自動駕駛領域非常重要的一項任務。特別是在夜晚或者極端天氣的情況下,現(xiàn)有的視覺感知和激光雷達兩種方式對環(huán)境的感知和識別都效果不佳。這給自動駕駛等高風險應用帶來了挑戰(zhàn)。 有些研究提出使用熱像儀來彌補 LiDAR 和視覺攝像頭的缺陷。但由于物體不斷發(fā)出熱輻射,粒子會擴散到附近的環(huán)境中,導致熱成像變得模糊、無紋理,形成「鬼影ghost)」,使這種方法難以實際應用。 現(xiàn)在,一種新的熱成像技術可以不受霧、煙和黑暗等視覺障礙的影響,使得自動駕駛汽車在黑暗中也能準確感知環(huán)境。如下圖所示,與以前的熱成像(上)相比,新方法可以創(chuàng)建更清晰、更有質感的夜間圖像(中和下)。

這種新方法是由來自普渡大學等機構的研究者提出,他們開發(fā)了一種新的系統(tǒng), 稱為「熱輔助探測和測距系統(tǒng)(HADAR)」。借助該系統(tǒng),我們可以在環(huán)境不佳的情況下獲得精細的環(huán)境圖像,細節(jié)與精度和傳統(tǒng)相機在明亮日光下拍攝的圖像相當。研究論文已登上 Nature 封面。

論文地址:https://www.nature.com/articles/s41586-023-06174-6 方法介紹 HADAR 能夠穿透光學雜波來檢測物體的溫度、材料成分和熱輻射模式,而不受霧、煙和黑暗等視覺障礙的影響。因此,無論一天中的時間或環(huán)境如何,HADAR 基于對深度和紋理的渲染都能創(chuàng)建極其詳細、清晰的圖像。

HADAR 與「鬼影」熱成像。 為了訓練 HADAR 系統(tǒng),研究人員在夜間使用先進的熱成像相機和能夠顯示電磁波譜中能量輻射的成像傳感器,在戶外捕獲數(shù)據(jù)。他們還創(chuàng)建了對戶外環(huán)境的計算機模擬,以便進行額外的 AI 訓練。 普渡大學電氣與計算機工程系教授、本文作者之一 Zubin Jacob 表示,「HADAR 學會了探測物體并估計與這些物體的距離,其精度是僅依靠傳統(tǒng)夜視技術的 10 倍。而且,HADAR 在夜間的性能與傳統(tǒng)物體檢測系統(tǒng)在白天的性能相當。」 「聲納、雷達和激光雷達等會發(fā)出信號并返回反射,以推斷物體是否存在及其與物體的距離。除了相機所擁有的視覺能力之外,它們還提供了場景的額外信息,尤其是在環(huán)境照明較差的情況下,」Jacob 表示,「然而,HADAR 有著根本的不同,它利用不可見的紅外輻射來重建夜間場景,清晰度就像白天一樣。」 在沒有反射光的黑暗環(huán)境中, 傳統(tǒng)攝像頭無法很好地捕捉圖像,雷達和激光雷達也容易受到干擾。 熱成像技術通過捕獲環(huán)境中物體輻射的紅外光來重建場景。如下圖所示,新研究提出的 HADAR 方法改變了機器感知的方式:

76d0ad48-2ee5-11ee-815d-dac502259ad0.png

為了解決「鬼影」問題,該研究訓練了一個神經(jīng)網(wǎng)絡,用于對熱像儀發(fā)出的紅外信號進行分類,將物體的特征熱信號與導致「鬼影」的環(huán)境噪音分開。 該研究訓練算法來識別已知材料(例如玻璃、木材或織物)的獨特發(fā)射光譜。通過識別場景中的這些已知特征,算法可以表征其觀察到的對象。那么剩下的就是環(huán)境信號和從這些物體反射到相機中的噪聲。通過向后評估噪聲信號的反射和散射方式,該算法可以填充每個對象的紋理信息,從而為圖像提供更高層次的細節(jié)。

772c40fe-2ee5-11ee-815d-dac502259ad0.png

處理后的圖像清晰地顯示了物體及其紋理,并且可以識別物體的材質。最重要的是,HADAR 還能夠提供一種關鍵數(shù)據(jù) —— 環(huán)境物體的深度信息,這將有助于自動駕駛在復雜路況下進行環(huán)境感知。 773fcb92-2ee5-11ee-815d-dac502259ad0.png 下圖展示了一個 HADAR 的應用實例。其中有一位真人和一個人形紙板。RGB 光學成像和稀疏 LiDAR 點云都無法區(qū)分真人和人形紙板,并且 LiDAR 還難以檢測到夜間條件下的車輛。而 HADAR 檢測到相應材料區(qū)域(皮膚?+?織物)中的人,將其與紙板清楚地區(qū)分開來,克服了「幻象制動」問題。 7763d2d0-2ee5-11ee-815d-dac502259ad0.png ?下圖 6 展示了 HADAR 測距在夜間擊敗了最先進的熱測距技術: 7849f90e-2ee5-11ee-815d-dac502259ad0.png 由于該方法能夠確定場景中的物體是由什么組成的,因此與傳統(tǒng)成像技術相結合,即使在白天,HADAR 也可以提供有關場景的獨特信息。


原文標題:AI提高自動駕駛夜視能力,檢測黑夜、霧天場景和白天一樣

文章出處:【微信公眾號:智能感知與物聯(lián)網(wǎng)技術研究所】歡迎添加關注!文章轉載請注明出處。


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴

原文標題:AI提高自動駕駛夜視能力,檢測黑夜、霧天場景和白天一樣

文章出處:【微信號:tyutcsplab,微信公眾號:智能感知與物聯(lián)網(wǎng)技術研究所】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    文看懂自動駕駛運行設計域

    如今,自動駕駛技術越來越普及,不少車主都用上了智駕功能,但疑惑也常常伴隨:為什么有的智駕功能白天能用、晚上就提示“不可用”?為什么高速公路上能順暢開啟,進市區(qū)狹窄路段就自動退出?
    的頭像 發(fā)表于 03-14 10:04 ?601次閱讀
    <b class='flag-5'>一</b>文看懂<b class='flag-5'>自動駕駛</b>運行設計域

    自動駕駛中常提的占用網(wǎng)絡檢測存在哪些問題?

    自動駕駛感知技術在過去幾年中經(jīng)歷了很大的變化,從最初的二維圖像檢測到鳥瞰圖投影,再到如今備受關注的占用網(wǎng)絡,感知技術的提升,讓自動駕駛能力越來越強。
    的頭像 發(fā)表于 02-24 15:53 ?1158次閱讀

    自動駕駛端到端為什么會出現(xiàn)黑盒現(xiàn)象?

    自動駕駛領域,端到端(End-to-End)是指從感知環(huán)境的原始數(shù)據(jù)到車輛實際控制指令,全部交給個統(tǒng)的深度學習模型來完成。這和傳統(tǒng)的模塊化自動駕駛系統(tǒng)不
    的頭像 發(fā)表于 02-20 09:25 ?9526次閱讀
    <b class='flag-5'>自動駕駛</b>端到端為什么會出現(xiàn)黑盒現(xiàn)象?

    已有VLM,自動駕駛為什么還要探索VLA?

    時(長尾場景),會因規(guī)則覆蓋不足而表現(xiàn)僵化。 隨著大語言模型和視覺語言模型(VLM)的爆發(fā),開發(fā)者們意識到,如果車輛能像人類一樣擁有常識,理解什么是“潮汐車道”,知道“救護車在后方鳴笛需要避讓”,那么自動駕駛的上限將
    的頭像 發(fā)表于 02-03 09:04 ?342次閱讀
    已有VLM,<b class='flag-5'>自動駕駛</b>為什么還要探索VLA?

    自動駕駛場景生成方法及優(yōu)選方案:康謀aiSim 3DGS方案重塑行業(yè)標準

    生成技術應運而生,其中 康謀aiSim 3DGS方案 憑借技術突破與工程化落地能力,成為自動駕駛場景生成領域的優(yōu)選方案。 自動駕駛
    的頭像 發(fā)表于 02-02 17:39 ?471次閱讀

    Transformer如何讓自動駕駛大模型獲得思考能力?

    在談及自動駕駛時,Transformer直是非常關鍵的技術,為何Transformer在自動駕駛行業(yè)直被提及?
    的頭像 發(fā)表于 02-01 09:15 ?4375次閱讀

    L3級自動駕駛在技術上有什么不一樣的要求?

    [首發(fā)于智駕最前沿微信公眾號]最近,很多小伙伴在后臺私信,想了解L3級自動駕駛有哪些技術要求。其實對于自動駕駛行業(yè)來說,L3級是個非常重要的分水嶺。旦達到L3級,車輛的主要
    的頭像 發(fā)表于 01-07 08:51 ?2834次閱讀
    L3級<b class='flag-5'>自動駕駛</b>在技術上有什么不<b class='flag-5'>一樣</b>的要求?

    自動駕駛汽車如何檢測石頭這樣的小障礙物?

    [首發(fā)于智駕最前沿微信公眾號]最近有位小伙伴留言,想讓我聊聊自動駕駛汽車對于石頭這樣的小障礙物,是使用什么視覺任務檢測的。在直接回答“如何檢測”之前,其實要思考
    的頭像 發(fā)表于 12-24 16:53 ?1268次閱讀
    <b class='flag-5'>自動駕駛</b>汽車如何<b class='flag-5'>檢測</b>石頭這樣的小障礙物?

    純視覺自動駕駛會像人眼一樣“近視”嗎?

    感知能力,使其在自動駕駛感知系統(tǒng)中的應用場景不斷擴展。 正因如此,很多人習慣將純視覺自動駕駛類比為“人眼駕駛”。但從生物視覺的角度來看,人眼
    的頭像 發(fā)表于 12-15 09:23 ?877次閱讀
    純視覺<b class='flag-5'>自動駕駛</b>會像人眼<b class='flag-5'>一樣</b>“近視”嗎?

    講講如何閉環(huán)自動駕駛仿真場景,從重建到可用?

    靜態(tài)3D場景無法滿足仿真測試?缺乏動態(tài)交通流、難以模擬極端天氣、傳感器模型不逼真!本文帶您看aiSim場景編輯與GGSR渲染器如何破局!自由配置暴雨黑夜與虛擬車流,使用通用高斯?jié)姙R實現(xiàn)廣角無畸變的高保真渲染,為
    的頭像 發(fā)表于 10-27 11:10 ?7412次閱讀
    講講如何閉環(huán)<b class='flag-5'>自動駕駛</b>仿真<b class='flag-5'>場景</b>,從重建到可用?

    生成式 AI 重塑自動駕駛仿真:4D 場景生成技術的突破與實踐

    生成式AI驅動的4D場景技術正解決傳統(tǒng)方法效率低、覆蓋不足等痛點,如何通過NeRF、3D高斯?jié)姙R等技術實現(xiàn)高保真動態(tài)建模?高效生成極端天氣等長尾場景?本文為您系統(tǒng)梳理AI驅動的4D
    的頭像 發(fā)表于 08-06 11:20 ?5366次閱讀
    生成式 <b class='flag-5'>AI</b> 重塑<b class='flag-5'>自動駕駛</b>仿真:4D <b class='flag-5'>場景</b>生成技術的突破與實踐

    卡車、礦車的自動駕駛和乘用車的自動駕駛在技術要求上有何不同?

    ,自動駕駛技術也得到了充足的應用,但因應用場景不同,技術的側重方向也有所區(qū)別。今天就來和大家聊聊這個話題。 應用場景:開放道路vs封閉場地 首先要理解的是,
    的頭像 發(fā)表于 06-28 11:38 ?1746次閱讀
    卡車、礦車的<b class='flag-5'>自動駕駛</b>和乘用車的<b class='flag-5'>自動駕駛</b>在技術要求上有何不同?

    自動駕駛安全基石:ODD

    和限制下可以正常工作,是自動駕駛安全的核心概念之。 ? 對于人類司機來說,在不同的道路上駕駛能力也有所區(qū)別,比如新手司機在些窄路、山路
    的頭像 發(fā)表于 05-19 03:52 ?6948次閱讀

    新能源車軟件單元測試深度解析:自動駕駛系統(tǒng)視角

    。 ?自動駕駛軟件的特殊性? ? 感知層: ?激光雷達、攝像頭等傳感器數(shù)據(jù)處理算法的單元測試需覆蓋極端場景。例如,激光雷達點云濾波算法在雨雪天氣下的噪聲抑制能力需通過邊界測試驗證。某廠商曾在測試中遺漏
    發(fā)表于 05-12 15:59

    AI將如何改變自動駕駛?

    [首發(fā)于智駕最前沿微信公眾號]五一假期繼續(xù)閑聊下,還歡迎大家隨意留言,隨著人工智能(AI)的發(fā)展,很多車企及自動駕駛供應商正嘗試將AI融入自動駕駛
    的頭像 發(fā)表于 05-04 09:58 ?1020次閱讀