全球首款具有AI處理功能的CMOS亮相,Sony IMX500和IMX501請求出戰!

5月15日

2020年5月14日,SONY正式亮相了兩款具有AI處理功能的CMOS傳感器——IMX500和IMX501。兩枚傳感器均採用了1/2.3吋尺寸,擁有1230萬有效像素。儘管在像素數和傳感器面積上的數據不算突出,但是作為世界上首款在邏輯芯片上加入AI處理功能的CMOS芯片,IMX500和IMX501未來將會在包括物聯網在內的眾多領域實現更多的可能性。

全球首款具有AI處理功能的CMOS亮相,Sony IMX500和IMX501請求出戰!圖片1



(左: IMX500 右: IMX501)

IMX500和IMX501在應用上的主要創新,是在CMOS上首次加入了AI圖像分析與處理功能,因此可以幫助設備擺脫高性能處理器或外部系統進行運算,從而大大減少了傳輸數據量,得以讓信息更快速、更低延遲的傳輸到其他寫作單元上,減少功耗以及通訊成本。

全球首款具有AI處理功能的CMOS亮相,Sony IMX500和IMX501請求出戰!圖片2



全球首款配備AI處理功能的圖像傳感器

IMX500和IMX501採用背照式結構設計,擁有約1230萬有效像素用於捕捉廣角圖像信息。除了傳統的圖像傳感器運算電路之外,該邏輯芯片還配備了Sony專門用於AI信號處理的DSP(數字信號處理器)和用於AI模型的存儲器。這種配置消除了對高性能處理器或外部存儲器的需求,使其成為Edge AI系統的理想選擇。

全球首款具有AI處理功能的CMOS亮相,Sony IMX500和IMX501請求出戰!圖片3



支持元數據輸出

IMX500和IMX501可以通過ISP在處理階段直接在邏輯芯片上進行AI處理,並直接提取信息作為元數據進行輸出,從而大幅度減少了需要進行處理的數據量。同時元數據輸出還可以有效的降低隱私安全風險。

全球首款具有AI處理功能的CMOS亮相,Sony IMX500和IMX501請求出戰!圖片4



影片高速AI處理

由於在邏輯晶片中增加了高速AI處理核心,使得傳感器可以突破常規CMOS的單獨輸出靜幀進行AI處理的邏輯。在影片拍攝過程中即可通過ISP及AI核心完成運算,並可在影片拍攝時對拍攝對象進行高精度實時跟蹤。

全球首款具有AI處理功能的CMOS亮相,Sony IMX500和IMX501請求出戰!圖片5



可選AI模型

用戶可以將自己選擇的AI模型寫入嵌入式存儲器,並可以根據其要求或使用系統的位置條件對其進行重寫和更新。例如,當在零售地點安裝了使用該產品的多個鏡機時,可以在不同的地點、環境、時間或目的上使用多功能的單一類型的鏡機。安裝在設施入口處時,可用於計算進入設施的遊客人數;當安裝在商店的貨架上時,可用於檢測庫存短缺;當在天花板上時,它可用於熱圖商店訪客等。


發表第一條評論

發布
沒有更多評論