夢到天花板有個洞周公解夢

頻道:解夢 日期: 瀏覽:2

澎湃新聞記者 張靜

當我們拿起手機拍照時,手機裏的“美顏師”ISP(圖像信號處理器)進行著龐大的計算,以讓圖像呈現效果接近於人眼實際看到的景象。ISP經過十多年疊代,人類對圖像質量的追求卻不會停止,畫質“天花板”再進一步突破還有沒有新方法?

在近期獲得A+輪數億元融資後,AI視覺芯片初創企業愛芯元智(原“愛芯科技”)創始人兼CEO仇肖莘日前對包括澎湃新聞(www.thepaper.cn)在內的媒體表示,ISP已發展了近20年,經過十幾年疊代達到了現在的圖片處理水平,但傳統降噪方式已到了相對極限的地步。而以AI模型替代ISP中的降噪等關鍵模塊,可以通過不斷訓練AI模型提升ISP性能,增強畫質,讓圖像更清晰。仇肖莘表示,這突破了圖片質量提升的“天花板”,“一年疊代的程度可媲美傳統方式十幾年的疊代效果。”

愛芯元智成立於2019年5月,兩年完成三輪融資,總融資金額超10億元人民幣,並在近期宣布完成品牌升級。與目前業內著眼於雲端AI訓練和推理的火熱的GPGPU賽道不同,愛芯元智面向邊緣側和端側研發AI視覺推理芯片,並自主研發面向推理加速的神經網絡處理器。

ISP主要是用來對前端圖像傳感器輸出信號處理的單元。愛芯元智將AI技術引入ISP,其第一顆AI ISP芯片AX630A去年5月流片,去年12月正式量產。第二顆AI ISP芯片AX620A今年5月流片,7月下旬回片並順利點亮。這兩顆SoC(系統級芯片)均采用12nm制程,其中AX630A在INT4情況下等效算力28.8T,功耗約3瓦。

仇肖莘對澎湃新聞表示,與手機成像後再用摳圖、美顏、虛化不同,將AI技術引入ISP是從前端處理圖片,這種方式過去研發較少,原因在於其所需要的算力更大。NPU(嵌入式神經網絡處理器)擅長處理視頻、圖像類的海量多媒體數據,愛芯元智使用特殊的NPU設計,利用混合精度,能在單位面積內提供數倍於傳統NPU的等效算力,同時保持低功耗。

仇肖莘表示,AI視覺芯片應用場景非常廣泛,包括智能穿戴、智能家居、智慧城市、自動駕駛等都。“比如翻譯筆上的攝像頭一掃就能連續拍攝多張圖片,把這些圖片拼成一行,再用AI處理。”

她舉例說,手機短視頻放在4K電視上播放就會顯得畫質差,但如果用AI技術將1080P或720P的視頻源超分成4K或8K,就可以展現出較完美的效果。她說,目前愛芯元智正在研發下一代AI技術,“讓芯片達到更高算力,支持比如8K30幀的圖像處理。”

“視頻一秒鐘30幀,每一幀圖像的處理時間只有33毫秒。怎麼在33毫秒內把降噪、高動態的處理都做完,其實這是最有挑戰性的工作。”

責任編輯:李躍群

校對:欒夢