索尼公司今天宣布將發(fā)布兩款智能視覺(jué)傳感器,也是全球首款具備AI(人工智能)處理功能的圖像傳感器。*1圖像傳感器自帶AI處理功能,可在實(shí)現高速的邊緣AI處理的同時(shí)只提取必要數據,從而減少使用云端服務(wù)時(shí)的數據傳輸延遲,保證隱私安全,并降低功耗和通信成本。
新發(fā)布的圖像傳感器極大拓寬了AI攝像頭的研發(fā)空間,將有望廣泛應用于零售和工業(yè)設備行業(yè),并有助于構建與云端連接的優(yōu)化系統。
物聯(lián)網(wǎng)的普及讓所有類(lèi)型的設備都能連接到云端,使得信息處理系統得到廣泛應用,從這些設備獲得的信息需通過(guò)云上的AI進(jìn)行處理。另一方面,云端處理的信息量越來(lái)越大,也帶來(lái)了各種問(wèn)題:數據傳輸延遲的增加,阻礙了實(shí)時(shí)信息處理;在云端存儲個(gè)人身份數據相關(guān)的用戶(hù)隱私安全問(wèn)題;云服務(wù)的使用功耗和通信成本的提高等其它問(wèn)題。
新款傳感器的特點(diǎn)是像素芯片和邏輯芯片組成的堆疊式結構,是全球首款在邏輯芯片上配備AI圖像分析和處理功能的圖像傳感器。像素芯片獲取的信號通過(guò)傳感器上的AI進(jìn)行處理,無(wú)需高性能處理器或外部存儲,可助力邊緣AI系統的開(kāi)發(fā)。傳感器輸出元數據(屬于圖像數據的語(yǔ)義信息)而不是圖像信息,從而減少了數據量并保證了隱私安全。此外,AI能夠為廣泛應用領(lǐng)域提供多樣化的功能,例如高速AI處理下進(jìn)行實(shí)時(shí)對象跟蹤。也可以根據用戶(hù)的需求或系統使用位置重新編寫(xiě)內存來(lái)選擇不同的AI模型。
主要功能
像素芯片是背照式進(jìn)光的,有效像素約為1230萬(wàn),可以捕捉廣闊視角的圖像信息。除了傳統的圖像傳感器操作電路外,其邏輯芯片還配備了索尼原發(fā)的DSP(數字信號處理器),專(zhuān)門(mén)用于A(yíng)I信號處理,并為AI模型存儲。這種配置無(wú)需高性能處理器或外部存儲,使其成為邊緣AI系統的理想選擇。