整合ST行業領先的 RGB-IR 全域快門感測器技術與 Eyeris 基於人工智慧的深度神經網路產品的
組合,可提高汽車安全性和舒適性
意法半導體宣佈,與全球視覺人工智慧 (AI) 軟體和車內感測器融合技術的領導者Eyeris達成合作,通過集成 Eyeris 的先進深度神經網路產品組合,將意法半導體全域快門感測器應用延伸到車內監控領域,利用視覺空間感知功能全面瞭解車輛內部情況。這個先進的感知解決方案可支援汽車安全便利功能,包括駕駛員狀態監控系統 (DMS)、乘客狀態監控系統 (OMS)、兒童人體存在檢測、物體識別、手勢控制和活動預測。
意法半導體的 230萬圖元 VG5761 全域快門感測器的線性動態範圍高達 98 dB,可產生清晰圖像,能夠在任何光線和環境條件下捕獲車輛內部的圖像。配合 Eyeris 的車內感知技術,該感測器可用于 Eyeris 的駕駛員監控系統,精確地跟蹤駕駛員的注視度,尤其是從後視鏡、車頂控制台和中控台區域的非前置攝像頭位置的監測。同時,該感測器還可用于Eyeris 的乘客監控系統,能夠準確跟蹤監測身體關鍵點、高度、寬度、大小、姿勢、運動和方向。此外,意法半導體感測器還讓 Eyeris 能夠準確檢測車廂內是否有兒童,並在各種光線條件下識別車輛內部常見物體。意法半導體和 Eyeris 的技術整合為所有乘客帶來顯著的車內安全性、舒適性和便利性優勢。
意法半導體影像產品部美國技術行銷主管Dominique Barbier 表示:“ST 致力於讓汽車和電動汽車變得更安全。ST與Eyeris 合作,採用全域快門成像技術開發車內感知AI,這個範例展示了專注於攻克重大挑戰的頂級創新者能做到的一切。”。
VG5761 全域快門圖像感測器提供兩個存儲區,允許雙圖像存儲,除了有助於實現高動態範圍外,還支援無滯後效應的背景去除,沒有給主機系統增加額外處理任務。意法半導體的RGB-IR 圖像感測器採用在近紅外 (IR) 波長上比值大的 MTF(調製傳遞函數)以及 RGB 通道,在各種光線環境下監測整個車內情況,同時能夠細緻、準確地分析對車內安全至關重要的興趣區域 (ROI), 例如,駕駛員的眼睛和乘客的身體關鍵點,可發現駕駛員疲勞或注意力不集中的最早跡象以及乘客的身體姿勢。該感測器的高性能配合 Eyeris 人工智慧演算法,可説明汽車製造商開發出個性化的輔助保護控制和被動安全系統。
Eyeris 創始人兼首席執行官 Modar Alaoui 表示:“通過整合Eyeris 的深度神經網路產品組合與 ST 的全域快門成像技術,我們開發出了非常先進的車廂內監控解決方案,並為行業提高車廂安全性和舒適性提供了一個有用的範例。 ”
自 1999 年以來,ST 一直是成像感測器設計和製造領域的行業領導者。當前的產品組合涵蓋了從入門級 VGA 到幾百萬圖元的各種專用圖像感測器。ST 提供各種光學感測器解決方案,並通過 CMOS 圖像感測器、ToF(飛行時間)解決方案、環境光感測器和 CIS 代工服務繼續增強客戶的產品力。 ST 全盤掌控成像產品供應鏈,可以為主要客戶提供標準產品和定制設計服務,並且多個定制感測器、嵌入式 ISP 封裝和光學模組已經取得了市場成功。