2023年6月15日,致力于亞太地區(qū)市場(chǎng)的國(guó)際領(lǐng)先半導(dǎo)體元器件分銷商---大聯(lián)大控股宣布,其旗下世平推出基于耐能(Kneron)KL630系列芯片的AI相機(jī)方案。
圖示1-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機(jī)方案的展示板圖
AI技術(shù)的不斷成熟讓AI相機(jī)的應(yīng)用得到了快速發(fā)展。當(dāng)下,雖然AI相機(jī)的應(yīng)用逐漸從安防監(jiān)控?cái)U(kuò)展到智能家居、醫(yī)療、物流、無(wú)人駕駛等應(yīng)用中,為人們提供更便捷、高效、安全的生活體驗(yàn)。但在攝像機(jī)和AI相機(jī)的開發(fā)過(guò)程中,仍有算法優(yōu)化效率慢、視頻形成質(zhì)量低、數(shù)據(jù)響應(yīng)延遲等諸多問(wèn)題。為此,大聯(lián)大世平基于Kneron KL630系列芯片推出了AI相機(jī)方案。
圖示2-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機(jī)方案的場(chǎng)景應(yīng)用圖
本方案所采用的Kneron KL630系列是專為各種專業(yè)和消費(fèi)IP攝像機(jī)設(shè)計(jì)的新一代SoC,包含了KLM5301S3、KLM550S3、KLM5502S3等產(chǎn)品,可廣泛用于安防、家用以及其他AI相機(jī)的設(shè)計(jì)與制造。
KL630系列采用TSMC 28nm先進(jìn)制造工藝,支持快速開發(fā)高質(zhì)量和多鏡頭相機(jī)應(yīng)用程序,提供多達(dá)4通道視頻輸入、獨(dú)立的高級(jí)多ISP管道(包括多曝光高動(dòng)態(tài)范圍融合)以及專門的視頻質(zhì)量增強(qiáng)功能,適用于多個(gè)寬-角度鏡頭和傳感器,加上片上去扭曲、拼接和混合,所有這些都用于高質(zhì)量的實(shí)時(shí)全景攝像機(jī)視頻處理。其中還內(nèi)嵌Kneron第三代神經(jīng)網(wǎng)絡(luò)架構(gòu)內(nèi)核,能及時(shí)反應(yīng)并分辨特定物件,降低誤判率。
圖示3-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機(jī)方案的方塊圖
Kneron的可重構(gòu)NPU,使本方案支持同時(shí)運(yùn)行CNN和Transformer網(wǎng)絡(luò),既可做機(jī)器視覺,也可運(yùn)行語(yǔ)義分析,且運(yùn)算能效優(yōu)異。與僅面向特定應(yīng)用的普通AI模型不同,Kneron的可重構(gòu)人工神經(jīng)網(wǎng)絡(luò)(RANN)技術(shù)更加靈活,可滿足不同應(yīng)用需求并適應(yīng)各種計(jì)算體系架構(gòu)。并且搭載輕量級(jí)圖像識(shí)別算法,可輕松實(shí)現(xiàn)人臉識(shí)別、身體與手勢(shì)識(shí)別、物體與場(chǎng)景識(shí)別等。不僅如此,第五代ISP技術(shù)可以記錄具有細(xì)節(jié)感知、真實(shí)色調(diào)層次和更低噪聲的圖像和視頻。在系統(tǒng)中搭載的智能HEVC編碼器能顯著減少無(wú)用的數(shù)據(jù),并在不中斷網(wǎng)絡(luò)帶寬的情況下保持高質(zhì)量視頻。不僅如此,支持180°/360°多通道魚眼去扭曲引擎,結(jié)合了高性能硬件加速魚眼去扭曲器,允許實(shí)時(shí)去扭曲過(guò)程以顯著節(jié)省CPU負(fù)載,并靈活支持各種魚眼的幾何校正/廣角鏡頭提供業(yè)界領(lǐng)先的全景視頻形成質(zhì)量。此外,該方案同步提供AP函數(shù),方便客戶快速上手,另外根據(jù)影像的位置可以進(jìn)行不同的配置調(diào)整。
通過(guò)這些優(yōu)勢(shì),本方案能夠?yàn)榻K端用戶提供更高性能、低功耗以及高性價(jià)比特點(diǎn),以卓越成像品質(zhì)賦能AI相機(jī)應(yīng)用。
核心技術(shù)優(yōu)勢(shì):
可重構(gòu)NPU;
影像辨別軟件;
第五代ISP可以記錄具有可感知細(xì)節(jié)、真實(shí)色調(diào)層次和更低噪聲的圖像和視頻;
智能HEVC編碼器盡可能顯著減少無(wú)用或不重要的數(shù)據(jù),并在不中斷網(wǎng)絡(luò)帶寬的情況下保持高質(zhì)量的視頻;
魚眼引擎去扭曲、拼接、混合;
智能視頻分析;
音頻增強(qiáng)和智能;
高效能的應(yīng)用工具PQ Tool跟Fisheye Correction Tool。
方案規(guī)格:
KL630系列之AI相機(jī)KLR5S3 Series(Car DVR)、KLI5S3 Series(Industrial Cam)。
更多精彩內(nèi)容歡迎點(diǎn)擊==>>電子技術(shù)應(yīng)用-AET<<