好玩的嵌入式AI，機(jī)器視覺(jué)和音視頻處理

自從 ChatGPT 問(wèn)世以來(lái)，人工智能技術(shù)的熱度又被推上了一個(gè)臺(tái)階，越來(lái)越多企業(yè)開(kāi)始關(guān)注自身業(yè)務(wù)能否與行業(yè)大模型相互結(jié)合，從而進(jìn)一步提升企業(yè)的業(yè)務(wù)效率。

同時(shí)，越來(lái)越多企業(yè)相信，人工智能將會(huì)掀起一場(chǎng)科技革命，這場(chǎng)科技革命將會(huì)切實(shí)地影響每一位社會(huì)從業(yè)者。

作為一名嵌入式工程師，在平時(shí)工作中從事的都是嵌入式軟件編程，或者嵌入式硬件設(shè)計(jì)工作，似乎跟人工智能沾不上邊，但其實(shí)，嵌入式人工智能已經(jīng)在不知不覺(jué)中，走進(jìn)了我們的生活。

比如：人臉識(shí)別門(mén)禁系統(tǒng)（計(jì)算機(jī)視覺(jué)）、智能交互音箱（自然語(yǔ)言處理）、自動(dòng)駕駛技術(shù)（車(chē)載移動(dòng)偵測(cè)、環(huán)境感知），等等。

要看人工智能在嵌入式領(lǐng)域的熱門(mén)程度，可以觀察一下國(guó)內(nèi)國(guó)外處理器廠家的產(chǎn)品線布局，與Intel和NVIDIA這些國(guó)際高端處理器廠家不同的是，國(guó)內(nèi)已經(jīng)有不少芯片廠家布局帶有NPU神經(jīng)網(wǎng)絡(luò)處理器的MPU芯片了， 如華為海思Ascend系列，瑞芯微RK系列，全志V853，地平線旭日X3，嘉楠K510，等等。

就在上一周，我收到了正點(diǎn)原子自主研發(fā)的首款嵌入式AI開(kāi)發(fā)板，ATK-DLRV1126，這款開(kāi)發(fā)板是正點(diǎn)原子基于瑞芯微RV1126中高端MPU芯片研發(fā)的，正好可以有機(jī)會(huì)學(xué)習(xí)一下嵌入式人工智能的相關(guān)知識(shí)，進(jìn)一步擴(kuò)寬自己的嵌入式知識(shí)領(lǐng)域。

先大概說(shuō)一下ATK-DLRV1126這款開(kāi)發(fā)板的硬件資源，開(kāi)發(fā)板的核心板是采用了Rockchip RV1126作為主CPU，這款CPU是4核Cortex-A7架構(gòu)，最高主頻1.5GHz，帶有2.0TOPS NPU，ISP圖像處理器，內(nèi)置H264/H265硬件編解碼器，等等。

核心板采用8層沉金工藝進(jìn)行設(shè)計(jì)，帶有2GB DDR4內(nèi)存，8GB EMMC存儲(chǔ)芯片，采用標(biāo)準(zhǔn)的260P SODIMM接口與開(kāi)發(fā)板底板進(jìn)行相連接，260P SODIMM接口還可以方便地集成到客戶(hù)的PCB上，滿(mǎn)足各種應(yīng)用需求。

注：關(guān)于功能底板的硬件資源情況，可以參考開(kāi)發(fā)板的配套資料文檔《02【正點(diǎn)原子】ATK-DLRV1126開(kāi)發(fā)板硬件參考手冊(cè)V1.0.pdf》

再來(lái)說(shuō)一下軟件應(yīng)用方面，按照正點(diǎn)原子官方提供的資料文檔，基本上可以從頭開(kāi)始搭建開(kāi)發(fā)環(huán)境，編譯u-boot和Linux內(nèi)核，構(gòu)建buildroot文件系統(tǒng)，然后燒錄固件，運(yùn)行正點(diǎn)原子提供的應(yīng)用程序。

這一系列的操作主要參考以下幾個(gè)文檔：《01【正點(diǎn)原子】ATK-DLRV1126快速體驗(yàn)V1.2.pdf》、《【正點(diǎn)原子】ATK-DLRV1126系統(tǒng)開(kāi)發(fā)手冊(cè)V1.4.pdf》、《【正點(diǎn)原子】ATK-DLRV1126 AI例程測(cè)試指南V1.1（開(kāi)篇）.pdf》，如下圖所示。

在學(xué)習(xí)ATK-DLRV1126開(kāi)發(fā)板之前，需要開(kāi)發(fā)者有一定的嵌入式Linux開(kāi)發(fā)基礎(chǔ)，在這個(gè)前提下，參考《【正點(diǎn)原子】ATK-DLRV1126系統(tǒng)開(kāi)發(fā)手冊(cè)V1.4.pdf》這份文檔，基本上就可以從零開(kāi)始搭建出RV1126的開(kāi)發(fā)環(huán)境，并且進(jìn)行各種固件編譯和燒錄，應(yīng)用程序測(cè)試，等工作。

如果開(kāi)發(fā)者沒(méi)有嵌入式Linux的開(kāi)發(fā)基礎(chǔ)，建議先使用正點(diǎn)原子的imx6ull開(kāi)發(fā)板進(jìn)行入門(mén)，基于這款開(kāi)發(fā)板的學(xué)習(xí)難度，真心不建議零基礎(chǔ)的同學(xué)直接上手學(xué)習(xí)這款開(kāi)發(fā)板，否則很容易就會(huì)被勸退。

ATK-DLRV1126開(kāi)發(fā)板的出廠鏡像，已經(jīng)內(nèi)置了多個(gè)嵌入式AI相關(guān)的應(yīng)用程序，如物體識(shí)別SSD、車(chē)牌識(shí)別、人臉檢測(cè)、人體姿勢(shì)檢測(cè)，也內(nèi)置了多個(gè)跟音視頻相關(guān)的應(yīng)用程序，如視頻解碼、行車(chē)記錄儀、live555推流，等等。

作為正點(diǎn)原子推出的首款嵌入式AI開(kāi)發(fā)板，跟以往那種大而全的開(kāi)發(fā)板不同的是，ATK-DLRV1126開(kāi)發(fā)板設(shè)計(jì)得比較小巧精致，就像是一部掌上電腦。

這款開(kāi)發(fā)板的學(xué)習(xí)定位也比較精確，主要是面向嵌入式AI（機(jī)器視覺(jué)）和音視頻開(kāi)發(fā)的同學(xué)，這款開(kāi)發(fā)板對(duì)外引出的資源，以及正點(diǎn)原子提供的學(xué)習(xí)資料，已經(jīng)足夠讓嵌入式工程師邁入嵌入式AI開(kāi)發(fā)的大門(mén)。