ZHCACW1 june 2023 AM69A , TDA4VH-Q1
邊緣 AI 處理器的許多現(xiàn)有和新興市場(chǎng)應(yīng)用均為多攝像頭 AI 用例。多攝像頭 AI 類似于 AI 盒。區(qū)別在于,在多攝像頭 AI 中,多個(gè)攝像頭通過(guò) MIPI CSI-2 直接連接到系統(tǒng),而來(lái)自遠(yuǎn)程攝像頭的編碼位流則通過(guò) AI 盒中的以太網(wǎng)流式傳輸?shù)较到y(tǒng)。多攝像頭 AI 的用例包括但不限于以下應(yīng)用:
圖 3-3 展示了 AM69A 上的多攝像頭 AI 用例示例的數(shù)據(jù)流。在此示例中,使用兩個(gè) MIPI CSI-2 聚合器將八個(gè) 2MP 攝像頭組合在一起,并通過(guò)兩個(gè) MIPI CSI-2 RX 端口以 30fps 的速率采集,這是與 AI 盒的主要區(qū)別。經(jīng)過(guò) ISP(圖像信號(hào)處理器)、去馬賽克和鏡頭失真校正的圖像通過(guò) MSC 縮減為較小的分辨率。通過(guò)深度學(xué)習(xí)預(yù)處理、MMA 上的深度學(xué)習(xí)網(wǎng)絡(luò)和深度學(xué)習(xí)后處理獲得的輸出由硬件加速的 H.264 或 H.265 編碼器進(jìn)行編碼,然后流式傳輸或保存到存儲(chǔ)中。表 3-3 顯示了多攝像頭 AI 用例(帶有八個(gè) 2MP 攝像頭通道)的資源利用率和估算功耗。
| 主 IP | 利用率 (8 × 2MP (30fps)) |
|---|---|
| 2 × CSI-2 RX | 8 × 2MP (30fps) = 7.68Gbps (26%) |
| VPAC(VISS、MSC、LDC) | 8 × 2MP (30fps) = 480MP/s (40%) |
| MMA | 24TOPS (75%) |
| 編碼器 | 8 × 2MP (30fps) = 480MP/s (55%) |
| 8 × A72 | 深度學(xué)習(xí)預(yù)處理和后處理等 (50%) |
| DDR 帶寬 | 15.13GBps (22%) |
| 功耗 (85°C) | 20W |