智能行為識別系統(tǒng)在生產制造環(huán)節(jié)的應用

隨著工業(yè)智能化數字化進程的不斷推進，制造業(yè)的智能化需求已經不僅僅是生產線的智能化，對生產過程中生產線人員行為的智能化管理，也是制造業(yè)智能化進程中重要的環(huán)節(jié)。雖然讓數字化智能化設備賦能傳統(tǒng)生產線，可以實現一定程度上的機器換人，但在很多關鍵生產環(huán)節(jié)，生產線人員是不能被機器所替代的。人的因素影響生產質量和產品良品率在制造業(yè)中占比較大，因此，生產線管理中，生產線一線工作人員操作行為管理是制造企業(yè)生產管理過程中重難點。而目前工業(yè)市場環(huán)境下關于監(jiān)控人員操作步驟是否遺漏的技術仍處于發(fā)展階段，其中監(jiān)控的場景包括工作人員是否漏裝部件、漏打螺釘、遺漏通電測試、遺漏性能檢測、遺漏附件等。針對人員操作步驟的行為防錯技術也依然存在技術困擾，如無法單純通過視覺拍照實現精準檢測、操作步驟監(jiān)控困難、監(jiān)控數據無溯源、企業(yè)管理困難等。以視覺檢測技術為例，通過視覺檢測采集數據的方式可分為圖像處理和視頻圖像處理，圖像處理技術發(fā)展成熟，但單幀圖像的目標會因為形狀大小奇異和部分遮擋等現象無法達到檢測的準確度，而視頻圖像在時序上具有上下文一致性特征，可以根據臨近的高質量圖像判別目標類別和位置，提高檢測質量，同時可以解決視頻中連續(xù)幀之間的大量冗余的情況，提高檢測速度。因此，將視頻目標檢測技術應用于復雜的制造領域是最佳的選擇。海研科技自研的智能行為識別系統(tǒng)是基于AI視覺的視頻目標檢測技術，不僅能監(jiān)測產線工作人員操作異常，還能監(jiān)測產線異常、設備異常、物流輸送異常。01方案功能海研科技智能行為識別系統(tǒng)通過檢測人體關鍵部位骨骼點與關鍵動作目標點，采集人員、設備的運動軌跡并進行數據統(tǒng)計分析，識別員工拿取動作、運動軌跡、插裝位置、動作順序，實現漏放、漏拿、漏打的檢測，達到防錯目的。02方案設計1方案總布局以產品附件防漏行為識別為例，方案配置視覺檢測相機、工控機、報警指示燈、報警器控制按鈕。Part.1視覺檢測相機在工位的頂部安裝視覺檢測攝像機，垂直照攝工位上所有物料料框。Part.2工控機用來運行業(yè)務管理系統(tǒng)，根據現場操作，來控制報警指示燈，接收報警器按鈕信號。Part.3報警指示燈當配料周期的起始物料框識別到抓取事件后開始識別，直至結束位置的物料框抓取結束此配料周期結束，若檢測到漏料事件發(fā)生則紅燈預警。Part.4報警器控制按鈕當狀態(tài)指示紅燈預警后，操作人員檢測配料并確認無誤后，可通過此按鈕解除報警。2工藝流程03方案亮點1技術亮點1.

算法精準度高利用先沿的神經網絡建模推理，類比腦神經系統(tǒng)及腦認知原理精準分析，將人體關鍵部位骨骼點與關鍵動作目標點相結合進行深度邏輯判定。2.

系統(tǒng)兼容性強在高計算能力的GPU上實時監(jiān)測及采集員工所做動作是否合規(guī)。3.

支持邊端云架構云邊協(xié)同收集存儲、分析數據便于產品追溯，端邊協(xié)同算法訓練，便于遠程軟件迭代。2方案優(yōu)勢1.

方案部署方案部署靈活，安裝調試周期短，區(qū)域限制影響極小，可根據現場環(huán)境靈活選擇合適的相機安裝高度和角度，以獲取操作員工連接動作區(qū)域的圖像。2.

軟件設計軟件系統(tǒng)人機界面交互良好，操作流程簡單易上手，降低工作人員學習成本。3.

行業(yè)地位制造行業(yè)首創(chuàng)針對產線工作人員的操作行為防錯識別技術，廣泛適用于各個復雜的制造行業(yè)場景。目前行為識別系統(tǒng)方案已成功應用于百余家家