在安博會上,華為上海海思向業(yè)界展示了越影 AI ISP 芯片,用于物聯(lián)網(wǎng)智能終端的新一代智能圖像處理引擎,以及最新的技術(shù)與解決方案。官方介紹,海思越影是引入 AI 的新一代圖像處理引擎(ISP),實(shí)現(xiàn)畫質(zhì)技術(shù)與 AI 技術(shù)的深度融合,代表著行業(yè)技術(shù)的新方向。在 " 伸手不見五指 " 的暗室體驗(yàn)區(qū)里,越影關(guān)鍵能力之一超感光降噪利用神經(jīng)網(wǎng)絡(luò)深度學(xué)習(xí),實(shí)現(xiàn)低照度場景的智能降噪,畫質(zhì)清晰度業(yè)界領(lǐng)先。還運(yùn)用多光譜融合技術(shù)有效融合可見光與紅外光譜,讓低照圖像達(dá)到色彩與細(xì)節(jié)平衡,重塑色彩斑斕的視覺世界。海思智能分析引擎由 NPU 和 VPU 組成,兩者深度融合,優(yōu)勢互補(bǔ),高效使能端到端的 AI 解決方案。
ISP是對圖像傳感器輸入的原始數(shù)據(jù)進(jìn)行圖像處理的首個環(huán)節(jié),涵蓋數(shù)十種圖像信號處理算法。為了適配各種不同的鏡頭和傳感器,需要優(yōu)化調(diào)整成百上千個參數(shù),保證ISP兼?zhèn)渫ㄓ眯院挽`活性。
同時,ISP中眾多模塊的算法是相互影響的,算法協(xié)同需要大量調(diào)試工作,極其復(fù)雜,也極具挑戰(zhàn)。
面對越來越高的場景復(fù)雜度,基于濾波等傳統(tǒng)圖像處理技術(shù)在暗光、寬動態(tài)等場景下,畫質(zhì)獲得顯著改進(jìn)越來越困難,而且隨著參數(shù)庫逐漸龐大,調(diào)試越發(fā)困難,開發(fā)周期逐步拉長,畫質(zhì)提升的投資收益率也越來越低。
近年來,利用AI進(jìn)行圖像增強(qiáng),逐漸成為行業(yè)研究新熱點(diǎn),并取得了顯著的進(jìn)展,尤其是利用AI對靜態(tài)照片的優(yōu)化,已經(jīng)廣泛應(yīng)用于高端手機(jī)的相機(jī)拍照,并獲得了不錯的效果。
上海海思利用在傳統(tǒng)ISP畫質(zhì)技術(shù)上的積累和經(jīng)驗(yàn),以及在端側(cè)AI架構(gòu)和優(yōu)化上的優(yōu)勢,打造了新一代智能圖像處理引擎——越影AI ISP,將傳統(tǒng)畫質(zhì)優(yōu)化經(jīng)驗(yàn)與AI技術(shù)深度融合,相比海思上一代旗艦ISP在五方面實(shí)現(xiàn)了飛躍。