基于嵌入式AI處理器的圖形化編程機(jī)器人設(shè)計(jì)

[22]。實(shí)現(xiàn)人臉口罩識(shí)別與檢測(cè)的前提是要擁有一個(gè)可以部署到嵌入式硬件上的模型文件。如果從零開(kāi)始訓(xùn)練一個(gè)模型，那對(duì)于任何一個(gè)非專(zhuān)業(yè)的人來(lái)說(shuō)，會(huì)是一個(gè)非常漫長(zhǎng)的過(guò)程。本設(shè)計(jì)采用第三方Mx_YOLOv2模型訓(xùn)練器，它是整合集成了官方一些模型訓(xùn)練及轉(zhuǎn)換等工具、以及深度學(xué)習(xí)框架Tensorflow（張量操作庫(kù)）和Keras（基于Python的深度學(xué)習(xí)庫(kù)）等依賴(lài)環(huán)境的一款PC軟件。只需安裝Python，然后使用該軟件內(nèi)置的一鍵配置腳本程序自動(dòng)安裝訓(xùn)練所需依賴(lài)庫(kù)，如圖4.21所示，即可完成環(huán)境配置。而且后續(xù)訓(xùn)練模型的過(guò)程也很方便。圖4.21配置環(huán)境4.6.1準(zhǔn)備訓(xùn)練數(shù)據(jù)集首先要準(zhǔn)備一些沒(méi)戴口罩的人臉圖片以及戴口罩的人臉圖片，訓(xùn)練出一個(gè)實(shí)用的網(wǎng)絡(luò)模型至少要幾萬(wàn)份高質(zhì)量圖片，對(duì)于只是實(shí)驗(yàn)應(yīng)用的話(huà)大概幾百?gòu)垐D片即可，通過(guò)網(wǎng)上爬取或使用開(kāi)源的數(shù)據(jù)集，然后進(jìn)行數(shù)據(jù)清洗（篩選滿(mǎn)意的），再對(duì)圖像預(yù)處理（使用工具批處理圖像分辨率大小為模型可輸入的大小），之后標(biāo)注數(shù)據(jù)集（使用軟件LabelImg框選物體并標(biāo)注名稱(chēng)）生成標(biāo)注文件。最后劃分?jǐn)?shù)據(jù)集，進(jìn)行文件分類(lèi)，數(shù)據(jù)集如表4.3所示。表4.3數(shù)據(jù)集名稱(chēng)描述訓(xùn)練集預(yù)處理后的圖像測(cè)試集驗(yàn)證訓(xùn)練后的模型準(zhǔn)確性驗(yàn)證集用于在訓(xùn)練過(guò)程中驗(yàn)證訓(xùn)練結(jié)果的圖像訓(xùn)練集標(biāo)簽包含了訓(xùn)練集內(nèi)圖像的標(biāo)注文件驗(yàn)證集標(biāo)簽包含了驗(yàn)證集內(nèi)圖像的標(biāo)注文件4.6.2配置訓(xùn)練參數(shù)在訓(xùn)練器軟件中，可以看到物體識(shí)別的參數(shù)調(diào)節(jié)界面，如圖4.22所示。主要修改以下參數(shù)：標(biāo)簽（種類(lèi)名稱(chēng)）、Anchors、訓(xùn)練集、訓(xùn)練集標(biāo)簽、驗(yàn)證集、驗(yàn)證集標(biāo)簽、測(cè)試集、迭代次數(shù)。其中Anchors是在圖像上預(yù)設(shè)好的不同大小的參照框，以提取窗口內(nèi)的特征，再讓分類(lèi)器判斷該窗口是否為要檢測(cè)的對(duì)象。Anchors可以在選擇好訓(xùn)練集、訓(xùn)練集標(biāo)簽、驗(yàn)證集、驗(yàn)證集標(biāo)簽、測(cè)試集文件夾后，即可通過(guò)K-means聚類(lèi)算法計(jì)算出來(lái)。圖4.22配置訓(xùn)練參數(shù)4.6.3訓(xùn)練模型導(dǎo)入剛才的配置文件，并點(diǎn)擊開(kāi)始訓(xùn)練按鈕，訓(xùn)練時(shí)終端顯示信息如圖4.23所示。訓(xùn)練時(shí)終端中顯示的兩個(gè)重要參數(shù)：Epoch（時(shí)期）：輸入所有訓(xùn)練集對(duì)神經(jīng)網(wǎng)絡(luò)模型進(jìn)行一次完整訓(xùn)練，即在網(wǎng)絡(luò)模型中完成一次正向傳播與反向傳播，這個(gè)過(guò)程稱(chēng)為一次訓(xùn)練時(shí)期。Loss（損失函數(shù)）：損失函數(shù)相對(duì)越低說(shuō)明訓(xùn)練的模型越好，但過(guò)低的話(huà)就會(huì)出現(xiàn)過(guò)擬合，這時(shí)就需要適當(dāng)降低迭代次數(shù)，一般loss達(dá)到0.005以下即可。訓(xùn)練完成后生成兩個(gè)模型文件yolov2.h5和yolov2.tflite，h5模型文件可以在PC機(jī)上進(jìn)行測(cè)試驗(yàn)證；tflite模型文件是h5文件經(jīng)過(guò)TensorflowLite轉(zhuǎn)換得到的模型文件，它能夠更好的部署到小型設(shè)備上，例如手機(jī)。圖4.23訓(xùn)練模型4.6.4測(cè)試模型在將模型部署到K210上之前，使用該軟件對(duì)模型的效果進(jìn)行檢測(cè)。首先選擇剛訓(xùn)練好的模型文件yolo.h5，程序會(huì)調(diào)用模型對(duì)測(cè)試集中的圖片進(jìn)行預(yù)測(cè)輸出結(jié)果，如圖4.24所示，1-boxes代表的是圖像中找到一個(gè)對(duì)象，0-boxes代表的是圖像中沒(méi)有找到對(duì)象。圖4.24測(cè)試模型接下來(lái)點(diǎn)擊“打開(kāi)文件夾查看結(jié)果”，程序?qū)?huì)把存有預(yù)測(cè)結(jié)果的文件夾打開(kāi)，如圖4.25所示，可以看到預(yù)測(cè)結(jié)果還是很理想的。圖4.25測(cè)試結(jié)果4.6.5轉(zhuǎn)換模型tflite模型算法往往是基于浮點(diǎn)型運(yùn)算實(shí)現(xiàn)的，而浮點(diǎn)型數(shù)據(jù)在存儲(chǔ)和計(jì)算方面都對(duì)K210芯片等嵌入式平臺(tái)來(lái)說(shuō)難以快速解析且占用內(nèi)存多，需要使用官方的模型轉(zhuǎn)換器工具將tflite模型文件量化為整型數(shù)據(jù)并轉(zhuǎn)換成在K210芯片上能加速運(yùn)行的kmodel模型文件。使用nncase軟件，打開(kāi)選擇需要轉(zhuǎn)換的模型文件、模型輸出保存的地址以及包含部分訓(xùn)練圖片的文件夾，然后點(diǎn)擊轉(zhuǎn)換按鈕，即可完成模型轉(zhuǎn)換，如圖4.26所示。圖4.26模型轉(zhuǎn)換4.6.6部署模型使用官方的燒錄工具將模型下載到K210的flash內(nèi)存地址（自定義），然后根據(jù)模型參數(shù)編寫(xiě)人臉口罩識(shí)別的MicroPython應(yīng)用程序，首先要初始化攝像頭以及網(wǎng)絡(luò)模型，然后在循環(huán)函數(shù)中，獲取攝像頭捕獲的一幀圖像，將其輸入到網(wǎng)絡(luò)模型中進(jìn)行推理計(jì)算，當(dāng)計(jì)算出結(jié)果即識(shí)別出物體，將結(jié)果信息通過(guò)image類(lèi)的函數(shù)繪制識(shí)別框及識(shí)別結(jié)果（識(shí)別為masks類(lèi)及置信度得分），如圖4.27所示，然后繼續(xù)下一幀的圖像處理。由于網(wǎng)絡(luò)模型輸入的圖片大小為224×224，而顯示窗口為320×240，所以少了一部分顯示區(qū)域。圖4.27人臉口罩識(shí)別結(jié)果通過(guò)串口連接REPL模式來(lái)調(diào)試程序，最后將調(diào)試完成的.py文件下載到文件系統(tǒng)，后面即可在板子上直接執(zhí)行文件運(yùn)行程序，程序流程如圖4.28所示。圖4.28人臉口罩識(shí)別程序流程4.6.7推理模型推理模型的過(guò)程為：K210芯片上的CNN加速器KPU片上靜態(tài)隨機(jī)存儲(chǔ)器或外部flash閃存中加載CNN模型到運(yùn)行內(nèi)存上，使用YOLOv2算法對(duì)輸入數(shù)據(jù)進(jìn)行推理。YOLO原理：YOLO模型將輸入圖片劃分為多個(gè)區(qū)域，并針對(duì)每個(gè)區(qū)域計(jì)算并預(yù)測(cè)邊界框、置信度和類(lèi)別概率。主要為以下三個(gè)主要參數(shù)：S（網(wǎng)格）：劃分圖像的網(wǎng)格單元數(shù)，各自尋找目標(biāo)的邊界框位置。B（邊界框）：即每個(gè)網(wǎng)格將預(yù)測(cè)的目標(biāo)框個(gè)數(shù)，邊界框的寬高范圍為整個(gè)圖片。C（類(lèi)別）：可以被每個(gè)網(wǎng)格單元上預(yù)測(cè)的不同類(lèi)別的數(shù)量。圖4.29YOLO原理如圖4.29所示。從圖中的左邊開(kāi)始，將輸入圖像卷積為S×S個(gè)單元格，并針對(duì)每個(gè)網(wǎng)格單元預(yù)測(cè)B個(gè)目標(biāo)邊界框和這些邊界框的置信度，以及C個(gè)類(lèi)別的概率。其中每個(gè)邊界框包括5個(gè)參數(shù)，即邊界框的起點(diǎn)（x，y）、寬高（w，h）、置信度（confidence）。網(wǎng)絡(luò)的輸出結(jié)果為一個(gè)三階張量，張量維度為S×S×（B×5+C）。從圖中可看出圖像被劃分為7×7網(wǎng)格單元（S=7），每個(gè)單元生成兩個(gè)邊界框（B=2），如圖4.30（a）所示。置信度定義邊界框包含一個(gè)對(duì)象的概率（例如，檢查包圍白色汽車(chē)的邊界框），由邊界框的厚度表示描述。但這只能知道圖像中的對(duì)象在哪里，而不知道邊界框里面是什么。因此，通過(guò)每個(gè)單元格預(yù)測(cè)類(lèi)別概率，如果網(wǎng)格單元格預(yù)測(cè)有汽車(chē)，那就意味著：如果此網(wǎng)格單元格中有物體，則該物體就是汽車(chē)。假如某個(gè)物體的中心點(diǎn)落在了某個(gè)網(wǎng)格里面，那該網(wǎng)格將負(fù)責(zé)預(yù)測(cè)這個(gè)物體。如圖4.30（b）所示，設(shè)左下角網(wǎng)格坐標(biāo)為（1，1），小狗所在藍(lán)色矩形框的中心，剛好在坐標(biāo)為（2，3）的網(wǎng)格，則該網(wǎng)格所對(duì)應(yīng)的置信度標(biāo)1，相反則標(biāo)為0。 （a）單元生成兩個(gè)邊界框 （b）中心點(diǎn)負(fù)責(zé)識(shí)別該物體圖4.30YOLO識(shí)別物體原理YOLO模型可以識(shí)別20個(gè)類(lèi)別的對(duì)象（C=20），將邊界框和類(lèi)別預(yù)測(cè)相結(jié)合，得出7×7×（2×5+20）=1470維度的張量。對(duì)張量設(shè)定閾值（例如，置信度大于60％）來(lái)過(guò)濾低于該概率的檢測(cè)結(jié)果。CNN加速器KPU：K210芯片上的KPU抽象化CNN算法執(zhí)行的復(fù)雜性。如圖4.31所示，其使用先進(jìn)先出(FIFO)緩沖器，依次處理神經(jīng)網(wǎng)絡(luò)模型的各層參數(shù)。通過(guò)KPU讀取CNN模型每一層的數(shù)據(jù)及參數(shù)，并使用Tiny-YOLOv2算法調(diào)用該層的核函數(shù)。該處理流水線(xiàn)內(nèi)置的回調(diào)機(jī)制，可在KPU硬件完成整個(gè)處理序列時(shí)執(zhí)行自定義的例程。圖4.31KPU推理過(guò)程

第5章圖形化編程機(jī)器人系統(tǒng)測(cè)試本章在前面對(duì)嵌入式軟硬件平臺(tái)的搭建及應(yīng)用測(cè)試完成的基礎(chǔ)上，結(jié)合圖形化編程軟件進(jìn)行系統(tǒng)測(cè)試。軟件界面如圖5.1所示，左側(cè)為模塊區(qū)，中間為程序構(gòu)建區(qū)，右側(cè)為MicroPython程序顯示區(qū)，左上方橙色欄有“項(xiàng)目”選項(xiàng)和顏色選項(xiàng)，右上方“圓點(diǎn)”圖標(biāo)表示打開(kāi)攝像頭圖傳，“三角形”圖標(biāo)表示保存程序并運(yùn)行傳輸工具。圖5.1圖形化編程軟件界面軟件除了包含循環(huán)、邏輯、運(yùn)算、變量、數(shù)組、函數(shù)等基本程序結(jié)構(gòu)模塊，還有網(wǎng)絡(luò)連接模塊、機(jī)器視覺(jué)模塊等等，也有基本的硬件IO操作，如圖5.2所示。圖5.2IO程序塊下面以人臉口罩識(shí)別與檢測(cè)應(yīng)用為例，使用圖形化軟件搭建程序測(cè)試來(lái)實(shí)現(xiàn)。首先搭建視覺(jué)相關(guān)的初始化模塊，如攝像頭配置、CNN網(wǎng)絡(luò)模型等，然后搭建網(wǎng)絡(luò)連接的模塊，如Wi-Fi連接、Socket創(chuàng)建與連接等，最后通過(guò)各種模塊結(jié)合，搭建循環(huán)程序，完成攝像頭捕獲一幀圖像、yolo算法運(yùn)行網(wǎng)絡(luò)模型對(duì)圖像計(jì)算識(shí)別、將識(shí)別結(jié)果通過(guò)機(jī)器視覺(jué)算法繪制顯示出來(lái)、壓縮一幀圖像并轉(zhuǎn)換字節(jié)數(shù)據(jù)、通過(guò)Socket發(fā)送到PC機(jī)服務(wù)端等一系列循環(huán)任務(wù)。最終圖形化程序如圖5.3所示。圖5.3人臉口罩識(shí)別與檢測(cè)的圖形化程序其對(duì)應(yīng)MicroPython程序的部分顯示如圖5.4所示。圖形化程序搭建完成之后，點(diǎn)擊運(yùn)行按鈕，自動(dòng)保存為Python腳本文件，并打開(kāi)文件傳輸工具，通過(guò)USB線(xiàn)將板子連接到PC機(jī)，點(diǎn)擊工具的Connect按鈕，連接成功后這時(shí)軟件工具右邊顯示了板子上文件系統(tǒng)里面的一些Python腳本文件，這時(shí)可以在左邊主機(jī)文件夾里面選擇自己編寫(xiě)的Python腳本文件，通過(guò)點(diǎn)擊Transfer按鈕將Python腳本文件傳輸?shù)桨遄由系奈募到y(tǒng)，如圖5.5所示。圖5.4人臉口罩識(shí)別與檢測(cè)的MicroPython程序圖5.5傳輸Python腳本文件然后可以雙擊該文件打開(kāi)查看，還可以編輯，最后點(diǎn)擊Exexcute按鈕即可在板子上運(yùn)行該文件，如圖5.6所示。工具還可以打開(kāi)終端查看系統(tǒng)運(yùn)行信息，軟件打開(kāi)圖傳服務(wù)端來(lái)查看視頻流。運(yùn)行效果如圖5.7所示。圖5.6運(yùn)行文件圖5.7運(yùn)行效果如果想要在開(kāi)機(jī)的時(shí)候自動(dòng)運(yùn)行程序，可以將板子上的Python腳本文件保存命名為main.py，效果如圖5.8所示。圖5.8開(kāi)機(jī)運(yùn)行程序

第6章總結(jié)與展望6.1總結(jié)本文的主要工作是設(shè)計(jì)基于嵌入式AI處理器的圖形化編程機(jī)器人。主要特點(diǎn)是融入了AI硬件，支持圖形化編程、MicroPython和Ｃ語(yǔ)言三種方式。采用圖形化的編程方式，降低了學(xué)習(xí)人工智能與機(jī)器人的門(mén)檻，而利用MicroPython腳本語(yǔ)言的特性滿(mǎn)足了平臺(tái)通用性的需求，加上模塊化的工程構(gòu)建方式，提高了嵌入式C語(yǔ)言的開(kāi)發(fā)效率。本文主要設(shè)計(jì)成果總結(jié)如下：研究分析國(guó)內(nèi)外圖形化編程機(jī)器人的現(xiàn)狀和優(yōu)缺點(diǎn)，明確研究?jī)?nèi)容及機(jī)器人系統(tǒng)功能需求，融入嵌入式AI硬件平臺(tái)，設(shè)計(jì)了圖形化編程機(jī)器人系統(tǒng)平臺(tái)。采用RISC-V+FPIOA的AI硬件平臺(tái)滿(mǎn)足了易用性和端口資源可重構(gòu)的需求，任意的IO口可以實(shí)現(xiàn)多種硬件接口功能，即連接硬件不需要“對(duì)號(hào)入座”。搭建了可自定義的開(kāi)發(fā)環(huán)境，采用開(kāi)源C/C++工程框架及其圖形化菜單配置，和模塊化的結(jié)夠，可以很方便的配置整個(gè)工程，用戶(hù)可以通過(guò)C語(yǔ)言快速進(jìn)行二次開(kāi)發(fā)?；贛icroPython的圖形化編程方式實(shí)現(xiàn)語(yǔ)法接口統(tǒng)一，對(duì)于其他支持MicroPython的嵌入式系統(tǒng)或者學(xué)過(guò)Python語(yǔ)言的用戶(hù)同樣適用。實(shí)現(xiàn)了圖形化編程機(jī)器人的低延遲實(shí)時(shí)無(wú)線(xiàn)圖傳。設(shè)計(jì)了人臉口罩識(shí)別的AI應(yīng)用，并可以以圖形化編程的方式實(shí)現(xiàn)AI功能。6.2展望本文設(shè)計(jì)的基于嵌入式AI處理器的圖形化編程機(jī)器人是一個(gè)經(jīng)濟(jì)實(shí)用的機(jī)器人教學(xué)平臺(tái)，不僅是一款學(xué)習(xí)機(jī)器人和AI相關(guān)知識(shí)的有力工具，而且對(duì)AI機(jī)器人的教學(xué)與開(kāi)發(fā)的發(fā)展有一定促進(jìn)作用。但本設(shè)計(jì)仍然存在問(wèn)題與不足的地方，作為一款嵌入式產(chǎn)品在整個(gè)系統(tǒng)方面還有待提高。因此列出以下幾點(diǎn)需要改進(jìn)完成的工作：對(duì)于MicroPython的交互式運(yùn)行（REPL），目前只是通過(guò)有線(xiàn)串口交互，如果可以實(shí)現(xiàn)無(wú)線(xiàn)REPL交互，那將更方便控制機(jī)器人且提高靈活性。目前還可以再優(yōu)化系統(tǒng)內(nèi)存資源，添加更多的MicroPython模塊。目前只開(kāi)啟一個(gè)MicroPython解釋器的進(jìn)程，同一時(shí)間只能運(yùn)行一個(gè)Python腳本程序，后續(xù)可以通過(guò)優(yōu)化運(yùn)存資源，開(kāi)啟兩個(gè)MicroPython解釋器的進(jìn)程，來(lái)滿(mǎn)足用戶(hù)同時(shí)處理兩種任務(wù)的需求。

參考文獻(xiàn)郭歡,王清珍.一種圖形化積木式編程軟件的設(shè)計(jì)[J].人工智能與機(jī)器人研究,2020,9(1):24-31.潘一佩.面向教育機(jī)器人的圖形化編程模塊設(shè)計(jì)及優(yōu)化[D].華南理工大學(xué),2017.殷樹(shù)明.基于圖形化設(shè)計(jì)的教育機(jī)器人開(kāi)發(fā)平臺(tái)[D].蘇州大學(xué),2008.SebastianP,MartinL.EvaluationofmicroPythonasapplicationlayerprogramminglanguageoncubeSats[C]//ARCS.Austria:IEEE.2017:17-25.李嘉瑞.智能教育機(jī)器人硬件系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D].北方工業(yè)大學(xué),2017.楊濤,楊博雄,尹萍,熊純,余俊.基于高性能嵌入式AI計(jì)算平臺(tái)的人機(jī)交互手勢(shì)控制識(shí)別研究[J].信息記錄材料,2019,20(11):175-177.筱原,勇二.在嵌入式設(shè)備中實(shí)現(xiàn)AI性能的e-AI技術(shù)[J].電子產(chǎn)品世界,2017,24(12):21.畢盛.嵌入式人工智能技術(shù)開(kāi)發(fā)及應(yīng)用[J].電子產(chǎn)品世界,2019,26(05):14-16+25.KhamphrooM,KwankeoN,KaemarungsiK,etal.MicroPython-basededucationalmobilerobotforcomputercodinglearning[C]//20178thInternationalConferenceofInformationandCommunicationTechnologyforEmbeddedSystems(IC-ICTES).IEEE,2017.“MicroPythonintroduction”,MicroPython,2016.[Online].Available:/.Accessed:Nov.13,2016.徐志江,饒晨,徐紅,彭宏.MicroPython用于單片機(jī)實(shí)驗(yàn)教學(xué)新模式的設(shè)計(jì)與研究[J].計(jì)算機(jī)教育,2019,(03):168-172.Kendryte.K210datasheet[M].//documents/kendryte_datasheet_20180919020633.pdf,2018-09-19.曾令棟.全方位移動(dòng)機(jī)器人底盤(pán)設(shè)計(jì)與運(yùn)動(dòng)控制實(shí)現(xiàn)[D].西北師范大學(xué),2018.PiccirilloJ.Theartandscienceofselectingrobotmotors[J].Unpublisheddraftpaper.Accessed:March,2009,1:2013.常周林.機(jī)器人云臺(tái)控制中的PID技術(shù)應(yīng)用[J].信息記錄材料,2018,19(02):61-63.趙桂玲,姜雨含,李松.IMU標(biāo)定數(shù)學(xué)建模及誤差分析[J].傳感技術(shù)學(xué)報(bào),2016,29(06):886-891.劉石亮.基于STM32的攝像機(jī)云臺(tái)系統(tǒng)的設(shè)計(jì)[D].湖南大學(xué),2018.Poniszewska-MarandaA,KaczmarekD,KryvinskaN,etal.StudyingusabilityofAIintheIoTsystems/paradigmthroughembeddingNNtechniquesintomobilesmartservicesystem[J].Computing:1-25.HowardAG,ZhuM,ChenB,etal.MobileNets:EfficientConvolutionalNeuralNetworksforMobileVisionApplications[J].2017.嚴(yán)敏佳.CNN目標(biāo)檢測(cè)系統(tǒng)在嵌入式平臺(tái)的設(shè)計(jì)與實(shí)現(xiàn)[D].電子科技大學(xué),2019.J.Redmon,S.Divvala,R.Girshick,etal.YouOnlyLookOnce:Unified,Real-TimeObjectDetection[C].2016IEEEConferenceonComputerVisionandPatternRecognition(CVPR),LasVegas,NV,USA,2016J.Redmon,A.Farhadi.YOLO9000:Better,Faster,Stronger[C].2017IEEEConferenceonComputerVisionandPatternRecognition(CVPR),Honolulu,HI,USA,2017,6517-6525

謝辭大學(xué)四年一轉(zhuǎn)眼即將過(guò)去，我的校園生活也將畫(huà)上句號(hào)，在這里除了日夜相伴的校園，更是有知心的老師和同學(xué)，因?yàn)橛辛怂麄?，才?gòu)成了我大學(xué)生涯的豐富多彩。即將離別之際，除了對(duì)未來(lái)無(wú)限憧憬之外，心中更多了幾份的不舍和無(wú)盡的感激之情。在畢業(yè)設(shè)計(jì)這段時(shí)間里，我學(xué)到了很多知識(shí)也有很多感受。在畢業(yè)設(shè)計(jì)和論文編寫(xiě)的過(guò)程中，我始終得到了李琳導(dǎo)師的幫助和關(guān)心，多次指出程序及論文不當(dāng)之處，幾易其稿。老師淵博的知識(shí)和嚴(yán)謹(jǐn)?shù)闹螌W(xué)作風(fēng)使我受益匪淺，對(duì)順利完成本設(shè)計(jì)起到極大的作用。借此我向?qū)煴硎疚易钫\(chéng)摯的感謝和祝福。本論文的完成也離不開(kāi)其他各位老師、同學(xué)和朋友的關(guān)心與幫助。在此感謝工院各位老師在論文開(kāi)題、初稿、預(yù)答辯期間所提出的寶貴意見(jiàn)與建議，還要感謝同學(xué)們?cè)诳蒲羞^(guò)程中給予我諸多鼓勵(lì)和幫助。回想整個(gè)畢業(yè)設(shè)計(jì)的過(guò)程，雖有不易，卻讓我除卻浮躁，收獲頗多。在此還要感謝父母在我求學(xué)生涯中給予我無(wú)微不至的關(guān)懷和照顧，一如既往地支持我、鼓勵(lì)我，是他們的理解與支持讓我能夠在學(xué)校專(zhuān)心完成我的學(xué)業(yè)。最后，我向母校老師們?cè)俅伪硎局孕牡母兄x和美好的祝福，感謝你們的辛勤栽培，祝老師們幸福健康?！安环e跬步，無(wú)以至千里；不積小流，無(wú)以成江海。在今后的學(xué)習(xí)和工作中，我將繼續(xù)保持良好學(xué)風(fēng)，從點(diǎn)滴中積累，讓自己全面發(fā)展，更上層樓！

附錄附錄1人臉口罩識(shí)別MPython源代碼import

sensor,

image,

time

import

KPU

as

kpu

sensor.reset(dual_buff=True)

sensor.set_pixformat(sensor.RGB565)

sensor.set_framesize(sensor.QVGA)

sensor.set_windowing((224,

224))

sensor.set_hmirror(0)

classes=["Masks","Un_Masks"]

#

模型的標(biāo)簽名稱(chēng)

task

=

kpu.load(0x600000)

#

加載flash內(nèi)存中的模型

anchor

=

(0.83,

1.02,

1.51,

1.8,

2.2,

2.84,

3.02,

3.99,

4.0,

5.2)

#

網(wǎng)絡(luò)對(duì)象、概率閾值、框交疊的門(mén)限、錨點(diǎn)數(shù)、錨點(diǎn)參數(shù)

a

=

kpu.init_yolo2(task,

0.6,

0.3,

5,

anchor)

clock

=

time.clock()

while(True):

clock.tick()

img

=

sensor.snapshot()

#

獲取一幀圖像

code

=

kpu.run_yolo2(task,img)

#

將一幀圖像輸入到網(wǎng)絡(luò)模型計(jì)算

if

code:

#

網(wǎng)絡(luò)計(jì)算出結(jié)果

for

i

in

code:

img.draw_rectangle(i.rect())

#

繪制識(shí)別框及識(shí)別信息

img.draw_string(i.x()+40,i.y()-30,classes[i.classid()],(255,255,255),2)

img.draw_string(i.x()+40,i.y()-10,str(round((i.value()*100),2))+"%",(255,255,255),2)

fps

=

clock.fps()

img.draw_string(2,2,

("%2.1ffps"

%(fps)),

color=(255,255,255),

scale=2)

a

=

kpu.deinit(task)

附錄2圖形化編程軟件附錄3人臉口罩識(shí)別效果ADDINNE.Rep

電腦無(wú)法識(shí)別U盤(pán)該怎么辦HYPERLINK電腦無(wú)法識(shí)別U盤(pán)怎么辦?打開(kāi)我的電腦上單擊右鍵，在快捷菜單里，選擇“管理”，打開(kāi)“計(jì)算機(jī)管理”窗口。在計(jì)算機(jī)管理窗口里，選擇“存儲(chǔ)”下面的“磁盤(pán)管理”，如果看得到?jīng)]有盤(pán)符的U盤(pán)，那么在這個(gè)U盤(pán)上按鼠標(biāo)右鍵，選擇“更改驅(qū)動(dòng)器名稱(chēng)和路徑”選項(xiàng)，就打開(kāi)了“更改……的驅(qū)動(dòng)器號(hào)和路徑”對(duì)話(huà)框。再點(diǎn)擊“更改”按鈕，打開(kāi)“更改驅(qū)動(dòng)器號(hào)和路徑”的對(duì)話(huà)框，在“指定以下驅(qū)動(dòng)器號(hào)”的右邊下拉列表里，選擇你希望分配給U盤(pán)的驅(qū)動(dòng)器號(hào)，盡可能靠后選擇，比如X、Y、Z，選擇好后，單擊確定按鈕，回到上一次“更改……的驅(qū)動(dòng)器號(hào)和路徑”對(duì)話(huà)框窗口，再一次單擊確定，就回到“計(jì)算機(jī)管理”窗口。至此，如果一切正常，就給U盤(pán)單獨(dú)設(shè)置了一個(gè)長(zhǎng)久使用的驅(qū)動(dòng)器號(hào)，并卻，不受虛擬驅(qū)動(dòng)器的影響了。建議將U盤(pán)插到電腦上，看任務(wù)欄中是否顯示圖標(biāo)，如果顯示，在我的電腦點(diǎn)右鍵查看屬性——高級(jí)——硬件——設(shè)備管理器——查看里面是否有問(wèn)號(hào)的設(shè)備，在問(wèn)號(hào)設(shè)備上點(diǎn)右鍵——更新驅(qū)動(dòng)程序然后下一步——否暫時(shí)不連接到網(wǎng)絡(luò)——下一步自動(dòng)安裝軟件（推薦）就可以了另外：系統(tǒng)不認(rèn)U盤(pán)的幾種處理方法1.禁用主板usb設(shè)備。管理員在CMOS設(shè)置里將USB設(shè)備禁用，并且設(shè)置BIOS密碼，這樣U盤(pán)插到電腦上以后，電腦也不會(huì)識(shí)別。這種方法有它的局限性，就是不僅禁用了U盤(pán)，同時(shí)也禁用了其他的usb設(shè)備，比如usb鼠標(biāo)，usb光驅(qū)等。所以這種方法管理員一般不會(huì)用，除非這臺(tái)電腦非常重要，值得他舍棄掉整個(gè)usb總線(xiàn)的功能。但是這種屏蔽也可以破解，即便設(shè)置了密碼。整個(gè)BIOS設(shè)置都存放在CMOS芯片里，而COMS的記憶作用是靠主板上的一個(gè)電容供電的。電容的電來(lái)源于主板電池，所以，只要把主板電池卸下來(lái)，用一根導(dǎo)線(xiàn)將原來(lái)裝電池的地方正負(fù)極短接，瞬間就能清空整個(gè)CMOS設(shè)置，包括BIOS的密碼。隨后只需安回電池，自己重新設(shè)置一下CMOS，就可以使用usb設(shè)備了。（當(dāng)然，這需要打開(kāi)機(jī)箱，一般眾目睽睽之下不大適用~~）2.修改注冊(cè)表項(xiàng)，禁用usb移動(dòng)存儲(chǔ)設(shè)備。打開(kāi)注冊(cè)表文件，依次展開(kāi)"HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Services\usbehci”雙擊右面的“Start”鍵，把編輯窗口中的“數(shù)值數(shù)據(jù)”改為“4”，把基數(shù)選擇為“十六進(jìn)制”就可以了。改好后注銷(xiāo)一下就可以看見(jiàn)效果了。為了防止別人用相同的方法來(lái)破解，我們可以刪除或者改名注冊(cè)表編輯器程序。提示：“Start”這個(gè)鍵是USB設(shè)備的工作開(kāi)關(guān)，默認(rèn)設(shè)置為“3”表示手動(dòng)，“2”是表示自動(dòng)，“4”是表示停用。3.在computermanagement里將removablestorage的使用權(quán)限禁止。computermanagement是一個(gè)windows管理組件，可以在控制面板——管理工具——計(jì)算機(jī)管理打開(kāi)。在該工具窗口中storage——removablestorage——property中，general項(xiàng)，可以控制系統(tǒng)托盤(pán)是否顯示security則可以管理移動(dòng)存儲(chǔ)設(shè)備的使用權(quán)限。在security中將普通用戶(hù)的使用權(quán)限降低，就可以達(dá)到禁用u盤(pán)的目的。破解的方法也很簡(jiǎn)單，管理員降低普通用戶(hù)移動(dòng)存儲(chǔ)設(shè)備的使用權(quán)限，但未必禁用computermanagement的使用權(quán)限。普通用戶(hù)可以通過(guò)這個(gè)工具解除usb移動(dòng)存儲(chǔ)設(shè)備的使用權(quán)限限制。另外，值得一提的是，如果u盤(pán)插到電腦上后可以驅(qū)動(dòng)，但是我的電腦里卻沒(méi)有盤(pán)符，很有可能是管理員改動(dòng)了u盤(pán)的默認(rèn)盤(pán)符，使得我的電腦不能識(shí)別。這種情況，可以在movablestorage中看到u盤(pán)驅(qū)動(dòng)器。可以在u盤(pán)驅(qū)動(dòng)器屬性設(shè)置里為u盤(pán)重新分配一個(gè)盤(pán)符，再重新插拔一次u盤(pán)，就可以在我的電腦里看到u盤(pán)的盤(pán)符了。一、首先可以將該U盤(pán)換到別的機(jī)器上，看使用是否正常。如果排除了硬件損壞的可能，一般就是軟件方面有問(wèn)題。在WindowsXP+SP1操作系統(tǒng)下，有些USB2.0設(shè)備的確常常出現(xiàn)工作不穩(wěn)定的問(wèn)題，可以試試安裝設(shè)備自帶的USB2.0驅(qū)動(dòng)程序。另外最好不要使用USB延長(zhǎng)線(xiàn)，防止因?yàn)楣╇姴蛔愣斐刹环€(wěn)定現(xiàn)象。如果仍無(wú)效，可以在主板BIOS設(shè)定中，將USB接口強(qiáng)行設(shè)置為USB1.1傳輸速率。二、（適用于WIN98）啟動(dòng)計(jì)算機(jī)，進(jìn)入主板BIOS設(shè)置，檢查BIOS中USB的相關(guān)選項(xiàng)是否已經(jīng)打開(kāi)：OnChipUSB設(shè)定為Enabled；USBController設(shè)定為Enabled；PNPOSInstalled設(shè)定為Yes；AssignIRQForUSB設(shè)成Enabled。要正常使用USB設(shè)備首先要開(kāi)啟USB接口，在主板BIOS里可以進(jìn)行此項(xiàng)工作，一般來(lái)說(shuō)只需在BIOS中進(jìn)入ChipsetFeatures設(shè)置，并將USBKeyborad/MouseLegacy選項(xiàng)設(shè)定為Enable，就能夠保證在操作系統(tǒng)下使用USB鍵盤(pán)了。這些選項(xiàng)的作用是打開(kāi)主板芯片組對(duì)USB設(shè)備的完全支持，為系統(tǒng)識(shí)別USB設(shè)備做準(zhǔn)備工作。三、USB口接觸不好處理辦法：拔下，等十秒鐘再插上USB口，使接觸完好；五、閃存盤(pán)驅(qū)動(dòng)程序沒(méi)有安裝完成(WIN98系統(tǒng)下)處理辦法：鼠標(biāo)點(diǎn)“我的電腦”，選擇屬性找到“通用串行總線(xiàn)”，刪除其中的USBMASSSTORAGE項(xiàng)，再點(diǎn)擊“刷新”，然后按照提示重新安裝一次驅(qū)動(dòng)程序。六、接其它USB設(shè)備(如掃描儀、打印機(jī)、數(shù)碼相機(jī))時(shí)可以正常使用，接優(yōu)盤(pán)時(shí)閃指示燈不亮，不能夠使用。1、檢查優(yōu)盤(pán)與電腦的聯(lián)接是否正常，并換用其它USB接口測(cè)試。2、檢查設(shè)備管理器，看是否出現(xiàn)”通用總線(xiàn)設(shè)備控制器”條目，如果沒(méi)有，請(qǐng)將電腦主板BIOS中USB接口條目*激活(ENABLE)。3、如果電腦安裝過(guò)其它類(lèi)型USB設(shè)備，卸載該設(shè)備驅(qū)動(dòng)程序，并首先安裝優(yōu)盤(pán)驅(qū)動(dòng)程序。4、到其它電腦試用此優(yōu)盤(pán)，確認(rèn)是否優(yōu)盤(pán)不良。七、啟動(dòng)型優(yōu)盤(pán)在的電腦上無(wú)法實(shí)現(xiàn)啟動(dòng)，可能是主板型號(hào)不支持。如何判斷一塊主板是否支持閃存盤(pán)啟動(dòng)系統(tǒng)啟動(dòng)型優(yōu)盤(pán)是采用模擬USB軟驅(qū)和USB硬盤(pán)的方式啟動(dòng)電腦的。只要電腦主板支持USB設(shè)備啟動(dòng)，即BIOS的啟動(dòng)選項(xiàng)中有USB-FDD、USB-HDD或是其它類(lèi)似的選項(xiàng)，就可以使用啟動(dòng)型優(yōu)盤(pán)啟動(dòng)電腦。八、第一次在電腦上使用優(yōu)盤(pán)，未出現(xiàn)提示發(fā)現(xiàn)新硬件的窗口，驅(qū)動(dòng)程序無(wú)法安裝的原因可能是：1、主板usbcontroller未啟用解決辦法:在電腦主板BIOS中啟用此功能。2、usbcontroller已經(jīng)啟用但運(yùn)行不正常解決辦法:在設(shè)備管理器中刪除”通用串行控制器”下的相關(guān)設(shè)備并刷新。3、優(yōu)盤(pán)被電腦識(shí)別異常，在設(shè)備管理器中表現(xiàn)為帶有黃色？或！的”其它設(shè)備”或“未知設(shè)備”。解決辦法:刪除此設(shè)備并刷新。九、大容量的U盤(pán)(例如兼具M(jìn)P3播放器或錄音功能的U盤(pán))或移動(dòng)硬盤(pán)在電腦上無(wú)法正常使用，雖然系統(tǒng)提示找到了未知的USB設(shè)備，但無(wú)法正確識(shí)別U盤(pán)或移動(dòng)硬盤(pán)。原因可能是：1．USB接口供電不足:系統(tǒng)為每個(gè)USB接口分配了500mA的最大輸出電流，一般的U盤(pán)只需要100mA的工作電流，因此在使用過(guò)程中不會(huì)出現(xiàn)什么問(wèn)題。大多數(shù)移動(dòng)硬盤(pán)所使用的是普通的2.5英寸硬盤(pán)，其工作電流介于500mA~1000mA之間，此時(shí)假如僅僅通過(guò)USB接口供電，當(dāng)系統(tǒng)中并無(wú)其他USB設(shè)備時(shí)，那么還是可以勉強(qiáng)使用的，但如果電壓不穩(wěn)的話(huà)，就隨時(shí)可能出現(xiàn)供電不足的問(wèn)題。特別是使用支持USB2.0的移動(dòng)硬盤(pán)時(shí)，情況最為嚴(yán)重。另外，如果你的筆記本電腦使用電池供電，那么USB接口所分配的電量就更小了。2．使用了外接的USB擴(kuò)展卡:在筆記本電腦中使用USB2.0的U盤(pán)或移動(dòng)硬盤(pán)時(shí)，如果筆記本電腦不支持USB2.0技術(shù)，一般必須通過(guò)PCMCIA卡轉(zhuǎn)USB2.0的擴(kuò)展卡來(lái)間接實(shí)現(xiàn)支持，這些擴(kuò)展卡基本上都采用NEC公司的D720100AGMUSB控制芯片，少則提供兩個(gè)USB2.0接口，多則提供五個(gè)USB2.0接口，對(duì)一般用戶(hù)而言足夠使用了。由于PCMICA接口提供的電源功率比板載USB接口要小，這樣就會(huì)由于供電不足而導(dǎo)致移動(dòng)硬盤(pán)工作的出現(xiàn)問(wèn)題。解決方案:1.它從USB連接線(xiàn)上接移動(dòng)硬盤(pán)的一端引出一根轉(zhuǎn)接線(xiàn)，可以插入電腦背后的PS/2接口取電，這里可以比USB接口提供更大的電流輸出。2.利用電源補(bǔ)償線(xiàn)(也稱(chēng)“鍵盤(pán)取電線(xiàn)”)，如果U盤(pán)或移動(dòng)硬盤(pán)的包裝盒中提供了選配的電源適配器，你就可以直接使用外接電源，這樣就可以從根本上避免供電不足的情況發(fā)生了前置USB線(xiàn)接錯(cuò)。當(dāng)主板上的USB線(xiàn)和機(jī)箱上的前置USB接口對(duì)應(yīng)相接時(shí)把正負(fù)接反就會(huì)發(fā)生這類(lèi)故障，這也是相當(dāng)危險(xiǎn)的，因?yàn)檎?fù)接反很可能會(huì)使得USB設(shè)備燒毀。所以盡量采用機(jī)箱后置的USB接口,也少用延長(zhǎng)線(xiàn).也可能是斷口有問(wèn)題,換個(gè)USB端口看下.USB接口電壓不足。當(dāng)把<ahref="mobileharddisk">移動(dòng)硬盤(pán)</a>接在前置USB口上時(shí)就有可能發(fā)生系統(tǒng)無(wú)法識(shí)別出設(shè)備的故障。原因是<ahref="">移動(dòng)硬盤(pán)</a>功率比較大要求電壓相對(duì)比較嚴(yán)格，前置接口可能無(wú)法提供足夠的電壓，當(dāng)然劣質(zhì)的電源也可能會(huì)造成這個(gè)問(wèn)題。解決方法是<ahref="">移動(dòng)硬盤(pán)</a>不要接在前置USB接口上，更換劣質(zhì)低功率的電源或盡量使用外接電源的硬盤(pán)盒，假如有條件的話(huà)。主板和系統(tǒng)的兼容性問(wèn)題。呵呵這類(lèi)故障中最著名的就是NF2主板與USB的兼容性問(wèn)題。假如你是在NF2的主板上碰到這個(gè)問(wèn)題的話(huà)，則可以先安裝最新的nForce2專(zhuān)用USB2.0驅(qū)動(dòng)和補(bǔ)丁、最新的主板補(bǔ)丁和操作系統(tǒng)補(bǔ)丁，還是不行的話(huà)嘗試著刷新一下主板的BIOS一般都能解決。系統(tǒng)或BIOS問(wèn)題。當(dāng)你在BIOS或操作系統(tǒng)中禁用了USB時(shí)就會(huì)發(fā)生USB設(shè)備無(wú)法在系統(tǒng)中識(shí)別。解決方法是開(kāi)啟與USB設(shè)備相關(guān)的選項(xiàng)。就是開(kāi)機(jī)按F2或DEL鍵,進(jìn)入BIOS,把enableusbdevice選擇enable。拔插要小心,讀寫(xiě)時(shí)千萬(wàn)不可拔出,不然有可能燒毀芯片。XP中任務(wù)欄中多出USB設(shè)備的圖標(biāo)，打開(kāi)該圖標(biāo)就會(huì)在列表中顯示U盤(pán)設(shè)備，選擇將該設(shè)備停用,然后你再拔出設(shè)備，這樣會(huì)比較安全。

其實(shí)判斷軟件硬件問(wèn)題很簡(jiǎn)單,在別的機(jī)器或換個(gè)系統(tǒng)試試就可以了.有些小的問(wèn)題不妨先用專(zhuān)門(mén)軟件格式化下.還有提醒大家WINDOWS下格式化時(shí)要選擇FAT,不要選FAT32。

提示無(wú)法識(shí)別的USB設(shè)備維修

故障提示如圖：

無(wú)法識(shí)別的USB設(shè)備：UnknownUSBDevice.很多人都遇到過(guò)的一個(gè)問(wèn)題，所謂“無(wú)法識(shí)別”對(duì)于操作系統(tǒng)來(lái)說(shuō)，或者是驅(qū)動(dòng)程度有問(wèn)題，或者是USB設(shè)備出現(xiàn)了問(wèn)題，或者是計(jì)算機(jī)與USB設(shè)備連接出現(xiàn)了故障，解決問(wèn)題的方法也是從這幾處著手。

對(duì)于不同的設(shè)備會(huì)有不同的處理方法，了解USB設(shè)備正常工作需要的條件以及一些可能影響USB設(shè)備正常工作的因素，會(huì)有助于解決問(wèn)題。

下面是保證USB設(shè)備可以正常工作的一些條件：（1）USB設(shè)備本身沒(méi)有任何問(wèn)題——可以通過(guò)在其它計(jì)算機(jī)上進(jìn)行測(cè)試，保證能正常工作；（2）USB接口沒(méi)有任何問(wèn)題——可以通過(guò)連接其它的USB設(shè)備在此接口上進(jìn)行測(cè)試；（3）USB設(shè)備的驅(qū)動(dòng)程序已經(jīng)正確安裝，如果有詳細(xì)說(shuō)明書(shū)的USB設(shè)備，一定要仔細(xì)查看相應(yīng)的說(shuō)明文件，按照說(shuō)明安裝相應(yīng)的驅(qū)動(dòng)程序；Windows2000以后的操作系統(tǒng)以識(shí)別大部分的USB設(shè)備，Windows98以前的操作系統(tǒng)可以安裝USB設(shè)備自帶的驅(qū)動(dòng)或者安裝通用的USB設(shè)備驅(qū)動(dòng)程序。下面是可能影響USB設(shè)備正常工作的一些情形：（1）USB設(shè)備已經(jīng)出現(xiàn)了故障（同樣的條件以前可以正常使用，現(xiàn)在出現(xiàn)了問(wèn)題）；（2）USB接口有問(wèn)題，比如a.USB前置接口極性接反，這可能導(dǎo)致USB設(shè)備燒毀，所以一定要仔細(xì)看一下主板說(shuō)明書(shū)，防止接錯(cuò)；b.接口電壓不足，一些<ahref=".com/mobileharddisk">移動(dòng)硬盤(pán)</a>常會(huì)有這樣的問(wèn)題，主機(jī)后面的USB接口往往會(huì)比前置USB接口更可靠一些；c.主板與操作系統(tǒng)兼容性有問(wèn)題，安裝最新的主板驅(qū)動(dòng)程序可以最大程度地避免此類(lèi)問(wèn)題；d.Bios中禁止了USB設(shè)備，可能通過(guò)更改BIOS中相應(yīng)的設(shè)置來(lái)解決；e.操作系統(tǒng)問(wèn)題，可以通過(guò)重裝操作系統(tǒng)來(lái)解決；（3）USB驅(qū)動(dòng)程序有問(wèn)題：如果懷疑驅(qū)動(dòng)有問(wèn)題時(shí)，應(yīng)當(dāng)保證安裝了該設(shè)備相應(yīng)型號(hào)的最新驅(qū)動(dòng)程序或確認(rèn)操作系統(tǒng)不需要安裝特別的驅(qū)動(dòng)，最新的驅(qū)動(dòng)可以通過(guò)從網(wǎng)上設(shè)備生產(chǎn)商的主頁(yè)上去查找。

當(dāng)USB設(shè)備出現(xiàn)問(wèn)題時(shí)，除了根據(jù)實(shí)際的錯(cuò)誤提示信息尋找解決方案以外，還要仔細(xì)查看USB設(shè)備的具體品牌、型號(hào)、生產(chǎn)商，在搜索結(jié)果時(shí)包括這些信息，可以更容易地找到對(duì)應(yīng)的解決方法。象有些插拔費(fèi)勁需要經(jīng)常處于連接狀態(tài)的USB設(shè)備暫時(shí)出現(xiàn)故障，操作系統(tǒng)不停地出現(xiàn)“無(wú)法識(shí)別的USB設(shè)備”這樣惱人的提示時(shí)，可以在設(shè)備管理器中暫時(shí)關(guān)閉通用串行總線(xiàn)控制器中相應(yīng)的USB端口或者禁止相應(yīng)的USB設(shè)備。關(guān)于無(wú)法識(shí)別的usb設(shè)備

電腦設(shè)置

插入后，就會(huì)在右下角彈出電腦正在嘗試連接此USB設(shè)備的一些信息，有時(shí)就會(huì)彈出對(duì)話(huà)框讓用戶(hù)選擇，有些用戶(hù)還沒(méi)看清就點(diǎn)了否，或者因?yàn)殡娔X一些初始的設(shè)置問(wèn)題，禁止了USB的一些功能。

解決辦法：右鍵點(diǎn)“我的