近日,阿里達(dá)摩宣布推出自主研發(fā)的ISP圖像識(shí)別處理器,可以讓自動(dòng)駕駛汽車(chē)“看”得更清楚。通過(guò)自研的3D降噪和圖像增強(qiáng)算法,可將車(chē)載前端攝像頭的圖像識(shí)別能力提升超過(guò)10%。目前,該ISP處理器已經(jīng)用在自動(dòng)駕駛物流車(chē)上。
到底什么是ISP?
大家都知道,自動(dòng)駕駛技術(shù)目前在科技業(yè)界引起了廣大科技巨頭的注意,其中最重要的一個(gè)環(huán)節(jié)就是保證駕駛安全。人們常說(shuō)未雨綢繆,讓自動(dòng)駕駛汽車(chē)“看”到外界狀況,以便能夠更早的應(yīng)對(duì)各種突發(fā)狀況,是當(dāng)前確保自動(dòng)駕駛安全的重點(diǎn)。
在自動(dòng)駕駛汽車(chē)上,前端攝像頭就好比眼睛,可以采集各種圖像數(shù)據(jù),而ISP技術(shù)就相當(dāng)于汽車(chē)的視力,可以提升采集到的圖像場(chǎng)景特征及準(zhǔn)確性。
ISP是英文Image Signal Processor的縮寫(xiě),全稱是影像處理器,主要用來(lái)對(duì)前端圖像傳感器輸出信號(hào)處理的單元,以匹配不同廠商的圖象傳感器。一般來(lái)說(shuō),ISP的主要功能都與圖像有關(guān),內(nèi)含多個(gè)圖像算法處理模塊,包括線性化處理、去噪處理、白平衡、銳化處理、去壞點(diǎn)、扣暗電流、色彩增強(qiáng)等。
目前人們所能接觸到ISP最多的地方在手機(jī)影像方面,目前市面上絕大多數(shù)手機(jī)都集成了ISP芯片,部分產(chǎn)品則采用了獨(dú)立的ISP芯片,主要應(yīng)用在手機(jī)的拍照功能上,可以對(duì)前端圖像傳感器輸出的信號(hào)做后期處理,ISP芯片還能實(shí)現(xiàn)人臉識(shí)別、自動(dòng)場(chǎng)景識(shí)別等功能。
阿里自研ISP處理器讓車(chē)輛“看”得更清楚
行業(yè)專家指出,由于成本低、技術(shù)成熟,車(chē)載前端攝像頭已成為自動(dòng)駕駛中應(yīng)用最為廣泛的傳感器,性能強(qiáng)大的ISP處理器能夠提高自動(dòng)駕駛產(chǎn)業(yè)鏈的智能化水平。
在車(chē)輛上ISP最主要的作用就是對(duì)前端圖像傳感器CMOS輸出的信號(hào)進(jìn)行運(yùn)算處理,它作為車(chē)載攝像頭的重要構(gòu)成組件,能夠幫助車(chē)輛清晰的“看”到外界環(huán)境圖像。
阿里自研這款I(lǐng)SP處理器的背后,離不開(kāi)達(dá)摩院獨(dú)有的3D降噪和圖像增強(qiáng)算法支持,它能大幅提升車(chē)載攝像頭在白天和夜晚的圖像識(shí)別能力。
達(dá)摩院自動(dòng)駕駛實(shí)驗(yàn)室的路測(cè)結(jié)果顯示,使用達(dá)摩院ISP處理器,車(chē)載攝像頭即使是面對(duì)原本視野不清晰的夜間場(chǎng)景,圖像物體檢測(cè)識(shí)別能力也比業(yè)內(nèi)主流處理器提升超過(guò)10%以上,原本模糊不清的標(biāo)注物也得以清晰識(shí)別,從而讓車(chē)輛實(shí)現(xiàn)更精確的判斷,大幅提升自動(dòng)駕駛安全性。
在阿里達(dá)摩院自動(dòng)駕駛實(shí)驗(yàn)室的研究方向中,第一條就是對(duì)于環(huán)境感知的介紹。其中提到,要研究多傳感器協(xié)同感知及融合技術(shù),實(shí)現(xiàn)自動(dòng)駕駛汽車(chē)對(duì)周?chē)h(huán)境的關(guān)鍵信息收集和知識(shí)提取,其中包括可行駛區(qū)域、車(chē)道線、交通標(biāo)志、交通燈、車(chē)輛、行人及所有障礙物的檢測(cè)識(shí)別,車(chē)輛,行人等障礙物的位姿,運(yùn)動(dòng)狀態(tài)等的預(yù)測(cè);通過(guò)合理的多傳感器布局配置方案來(lái)確保車(chē)周?chē)?60度覆蓋和關(guān)鍵區(qū)域的增強(qiáng)覆蓋;通過(guò)安全冗余設(shè)計(jì)的軟件系統(tǒng)方案來(lái)保障車(chē)輛周?chē)h(huán)境信息的準(zhǔn)確感知,進(jìn)而確保自動(dòng)駕駛汽車(chē)的安全穩(wěn)定運(yùn)行。
因此,阿里自研ISP圖像識(shí)別處理器,能讓自動(dòng)駕駛汽車(chē)“看”得更清楚,對(duì)于車(chē)輛對(duì)圖像實(shí)現(xiàn)準(zhǔn)確判斷意義重大,不僅有利于提高車(chē)輛安全性,更有利于車(chē)輛進(jìn)行下一步?jīng)Q策。
阿里的“中國(guó)芯”布局
當(dāng)然,在自研ISP處理器這條賽道上,阿里所要面對(duì)的對(duì)手實(shí)力都不容小覷,有主要集中在SoC領(lǐng)域的高通、聯(lián)發(fā)科、華為海思、三星、蘋(píng)果這些移動(dòng)產(chǎn)品巨頭,還有其他領(lǐng)域的巨頭比如安霸、TI、NXP、升邁等??傮w來(lái)說(shuō),競(jìng)爭(zhēng)相對(duì)比較激烈。
很多人最早是從天貓、淘寶、支付寶認(rèn)識(shí)到阿里是一家電商巨頭,那么近幾年阿里的轉(zhuǎn)型也在告訴人們,它在布局“中國(guó)芯”的路上一直在進(jìn)步。
從收購(gòu)中天微到組建達(dá)摩院,成立平頭哥半導(dǎo)體公司,再到相繼投資寒武紀(jì)、Barefoot Networks、深鑒、耐能、翱捷科技等5家芯片公司,阿里在芯片方面的戰(zhàn)略布局也漸漸浮出水面。
過(guò)去的一年,阿里先后推出了首款RISC-V處理器玄鐵910、SoC芯片平臺(tái)“無(wú)劍”,以及首款A(yù)I芯片“含光800”,受到了國(guó)內(nèi)廣泛關(guān)注。幾大件的推出也宣告了阿里一往無(wú)前造芯決心。
(圖片源自O(shè)Fweek維科網(wǎng))
正如阿里巴巴集團(tuán)首席技術(shù)官?gòu)埥ㄤh所言:“在全球芯片領(lǐng)域,阿里巴巴是一個(gè)新人,玄鐵和含光800是平頭哥的萬(wàn)里長(zhǎng)征第一步。今天阿里巴巴有足夠的能力去做傳統(tǒng)硬件公司能做到的,包括他們不能做到的。他們能做到的是硬件,不能做到的是,我們拿軟件變成硬件。因?yàn)槲覀兊能浖兴惴?。這兩者的結(jié)合,使我們用硬件的能力、互聯(lián)網(wǎng)公司的速度,只花了一年半的時(shí)間,就完成了芯片的設(shè)計(jì)、驗(yàn)證到流片。我們有充分的信心,阿里巴巴今后會(huì)成為一家真正軟硬件一體化的協(xié)同發(fā)展科技公司”。