近期,業內傳聞位元組跳動正在研發的AI智慧眼鏡專案,正考慮採用恆玄2800搭配研極微的ISP晶片方案,儘管這一選擇尚未最終確定。AI智慧眼鏡的核心在於SoC晶片的選擇,它直接決定了產品的體驗上限。例如,meta的Rayban眼鏡採用的是高通AR1晶片方案,但為了滿足拍攝功能,還需額外搭載ISP晶片。
ISP晶片,即圖像信號處理器,並非新鮮事物,但在AI智慧眼鏡領域正逐漸受到重視。ISP的主要功能是處理圖像感測器採集到的原始圖像信號,與CMOS圖像感測器相輔相成。CMOS感測器如同人類的視網膜,負責捕捉光線,而ISP則相當於大腦皮層中處理視覺資訊的部分。
近年來,隨著手機廠商自研晶元的熱潮,ISP晶片成為了焦點之一。vivo自2021年推出自研ISP晶片V1以來,已反覆運算至第三代;小米也推出了自研ISP晶片澎湃C1。ISP晶片對圖像品質的提升至關重要,在同等CMOS條件下,優秀的ISP晶片可使圖像品質改善10%~15%。
ISP晶片分為集成和獨立兩種類型。集成ISP是將ISP功能集成在SoC處理器中,如高通驍龍系列和英偉達Tegra系列。而獨立ISP晶片則獨立於SoC存在,雖然成本較高,但運算能力和成像品質更優,且可根據需求定製,與相機其他元件的契合度更高。
在AI眼鏡領域,高通AR1晶片雖然性能強大,但價格高昂。因此,恆玄等MCU搭配MTK或獨立ISP晶片的方案成為了性價比更高的選擇。外掛ISP晶片的方案不僅成本低廉,還具備低功耗長續航的特點。據XR Vision Pro報導,通過調校ISP晶片,可以達到接近高通AR1的拍攝效果,且整體BOM成本可控制在千元以內,零售價可做到1500元以下。
目前,國內多家企業都在涉足ISP晶片領域。海思從麒麟950開始,就在SoC中集成了自研的ISP模組。而星宸科技作為聯發科間接持股的企業,其ISP晶片廣泛應用於智慧安防、智慧車載等領域。富瀚微、恆玄科技等也在ISP晶片領域有所佈局。
隨著AI技術的不斷發展,AI ISP晶片正逐漸成為新的焦點。AI ISP將人工智慧演算法與ISP技術深度融合,能夠實現對圖像內容的智慧分析和處理。據市場研究機構預測,全球ISP晶片市場銷售額將持續增長,其中AI ISP的應用前景廣闊。
AI ISP在低光成像方面表現出色,能夠顯著提升信噪比。華為海思推出的“越影AI ISP”在低照場景下圖像信噪比提升了4倍。全志科技、國科微、愛芯元智等企業也在AI ISP領域取得了顯著進展,其技術已應用於智能電視、智慧安防、智慧車載等多個領域。
以全志科技為例,其AI ISP技術已應用於多款晶元產品中,實現了AI降噪功能的高效運行,並在客戶產品中實現了量產落地。國科微的4K AI視覺處理晶片也搭載了自研AI ISP,能夠在極低照度下對圖像進行全方位優化和增強。
愛芯元智和飛淩微等企業也在AI ISP領域有所佈局。愛芯元智的“愛芯智眸”採用了混合精度、存算一體的架構設計,能夠在有限功耗下達到高算力。飛淩微發佈的AIoT應用系列高性能端側視覺AI SoC晶片A1也集成了自研的AI ISP部分。
隨著AR、VR、顯示技術以及自動駕駛等領域的不斷發展,對畫質的要求將不斷提升,這將推動AI ISP技術的進一步革新。同時,AI ISP所引領的技術難度降低和成本下降,也將為更廣泛的應用提供可能性。