適應面廣 1756-M08SE AB羅克韋爾 控制器

適應面廣 1756-M08SE AB羅克韋爾 控制器

適應面廣 1756-M08SE AB羅克韋爾 控制器

[導讀]時間來到2023年，ST在中國召開了其首屆傳感器大會，支持本地端的AI計算的智能傳感器成為了本次大會的焦點。在開幕演講上，意法半導體副總裁·中國區總經理曹志平表示，我們的生活經歷了從off-line到on-line的變革，以及從on-line到on-life發展，目前邁入Sustainable Onlife階段，具備AI能力的傳感器將會是構建在線的、虛擬交融的可持續生活的關鍵。

2019年ST就推出了集成自家ML內核的傳感器，這在當時確實是業界。而這款產品并不是ST的淺嘗輒止，而是開啟了其在AI傳感器上的完整生態布局。

時間來到2023年，ST在中國召開了其首屆傳感器大會，支持本地端的AI計算的智能傳感器成為了本次大會的焦點。在開幕演講上，意法半導體副總裁·中國區總經理曹志平表示，我們的生活經歷了從off-line到on-line的變革，以及從on-line到on-life發展，目前邁入Sustainable Onlife階段，具備AI能力的傳感器將會是構建在線的、虛擬交融的可持續生活的關鍵。

智能傳感器要具備多強的計算能力，才能實現端側AI應用？傳感器和MCU/SoC之間又該如何分配數據的處理任務？帶著這些問題我們有幸采訪到了ST的諸多高層。

智能傳感器布局：從MLC進化到ISPU

“智能傳感器必須要能夠實現獨立的決策——通過它收集到的一些數據，能夠不依賴微控制器（不管是節點級別的次微控制器，還是主SOC）獨立做出決策。”意法半導體亞太區模擬器件、MEMS和傳感器產品部 (AMS) MEMS及影像傳感器子產品部市場及應用副總裁、智能手機創新中心負責人Davide BRUNO表示，“所以就ST本身而言，現在正在努力讓傳感器（不管是運動傳感器、加速記儀，還是影像傳感器方面）終能夠根據自己收集和感知到的數據做出獨立的決策，并自動采取干預行為，從而得到預期的效果。”

通常在一個端側系統中，會需要用到傳感器、MCU和其他一些連接的功能。傳感器負責采集真實物理世界的信號以及人體的相關信息，然后負責將數據傳遞到MCU中進行計算。MCU通過對于數據的計算分析，然后產出控制信號給到執行機構。在這其中，復雜的數據運算可能需要上傳到云端進行處理和記錄。

而ST在2019年推出的MLC（Machine Learning Core），則是在傳感器內增加一個可重新配置的單元，被稱為rPU。該rPU可以通過寄存器重新配置，能夠運行一些簡單的AI模型。其中FSM是用于設計邏輯連接的數學抽象。它是由有限數量的狀態和狀態之間的轉換組成的行為模型，類似于流程圖，可以在流程圖中檢查滿足某些條件時邏輯的運行方式。FSM允許可以將一些算法從應用處理器轉移到傳感器中運行，從而持續降低功耗。

而在傳感器峰會上，我們聽到了一個更新的產品類型叫做——ISPU，即Intelligent Sensor Processing Unit。據了解，ISPU其實是早在2022年初就已經發布，這是一款內置了DSP的IMU產品，ISPU是集成在傳感器的ASIC中的一個專門用于機器學習和處理器的DSP，可采用專用指令集進行編程，能夠運行1位NN精度的AI算法。Davide表示，ISPU能夠在邊緣自動分析處理數據，并根據特定應用的需求，采取干預行為，并確保所需的jingque度，從而讓終端應用變得更為豐富。而這一理念可以從IMU延伸到ST所有類型的MEMS和imaging傳感器當中。

意法半導體MEMS傳感器產品市場 BIANCHI表示，ISPU是意法半導體跨向人工智能領域的大一步。目前，可以通過ISPU來幫助客戶實現在他們自己的神經網絡端，以及包括在他們自己的人工智能算法上的解決方案的打造。

適應面廣 1756-M08SE AB羅克韋爾 控制器