基於STM32MP157的多核心處理器開發輔助盲人手杖解決方案

友尚推出輔助盲人手杖解決方案，基於ST MPU+ST全局快門影像傳感器及DToF架構。

主要元件簡介：

• STM32MP157微處理器基於靈活的Arm® Cortex®-A7雙核心（工作頻率800 MHz）和Cortex®-M4核心（工作頻率209 MHz）架構，並配有一個專用的3D圖形處理單元(GPU)、一個MIPI -DSI顯示介面以及一個CAN FD介面。
  
  STM32MP157 3D OpenGL ES 2.0圖形引擎專為在圖形使用者介面（GUI）、選單顯示或動畫等應用中加速3D圖形而設計，可配合面向業界標準API優化的軟體堆疊，支援Android™和Linux®嵌入式開發平台。
  
  ST官網提供多種開發包與工具，並接受多種IoT開發平台，有自身的討論社區與wiki ，讓使用者有著大量的資源能夠使用與自由的開發環境。
  （詳細資料：STM32MP157 MPU Dual Arm Cortex-A7 cores - 意法半导体STMicroelectronics）

• ST VD56G3是針對可見光和近紅外線進行最佳化的 150 萬像素全域快門影像感測器，具有嵌入式自動曝光和光流運動向量運算的場景。
  （詳細資料：VD56G3 - Compact and high-sensitivity 1.5 megapixel monochrome global shutter image sensor - 意法半导体STMicroelectronics）

• VL53L8CX是一款8x8多區域ToF測距感測器，兩個先進的超表面鏡頭及在環境光下能夠在降低功耗的同時增強效能。
  
  基於意法半導體的FlightSense技術設計，能夠提供最高400 cm的精確測距，並具有65°對角線視場。
  
  採用意法半導體的專利演算法，可以偵測和追蹤視場內的多個目標，並具有64區域深度測量能力。 意法半導體的直方圖確保蓋片玻璃串擾抗擾度超過60 cm。
  （詳細資料：VL53L8CX - 高性能的低功耗8x8多区域飞行时间 (ToF) 传感器 - 意法半导体STMicroelectronics）

主要功能：
        VD56G3影像傳感器收集前方影像，透過STM32MP157的多核心處理器中的人工智慧模型，辨識出影像畫面中的物件類型，配合VL53L8CX進行與到物件類型的距離測量，以作為輔助用。

方案原理：

• VD56G3影像傳感器用於收集影像資料。
• STM32MP157的多核心處理器進行影像辨識路況 （輸入的人工智慧模型，運行計算影像資料 ）。
• VL53L8CX是進行絕對距離測量，測量前方障礙物、交通號誌、視障者距離，依照路況不同，傳送對應指令給STM32MP157，喇叭發出不同指引音。