本發(fā)明涉及一種傳送帶上產(chǎn)品的計數(shù)系統(tǒng)，特別是一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)，以及一種傳送帶上不同產(chǎn)品的自動化計數(shù)方法。

背景技術(shù)：

1、在現(xiàn)代工業(yè)生產(chǎn)中，傳送帶被廣泛應(yīng)用于流水線作業(yè)，特別是在大批量生產(chǎn)的環(huán)境中，用于輸送各種產(chǎn)品。隨著生產(chǎn)效率的不斷提高，如何準確、快速地計數(shù)傳送帶上的產(chǎn)品數(shù)量，已成為企業(yè)提升生產(chǎn)管理水平的關(guān)鍵需求之一。傳統(tǒng)的人工計數(shù)方法不僅耗時費力，而且容易出現(xiàn)誤差，無法滿足高效生產(chǎn)的需要。因此，開發(fā)一種傳送帶上產(chǎn)品的自動化計數(shù)方法，以提高計數(shù)的準確性和生產(chǎn)效率，具有重要的實際意義和應(yīng)用價值。

2、近年來，隨著圖像處理技術(shù)和傳感器技術(shù)的發(fā)展，基于這些技術(shù)的自動計數(shù)系統(tǒng)/方法逐漸成為研究熱點。例如，已有的自動計數(shù)系統(tǒng)/方法相關(guān)專利文件：申請?zhí)朿n202211143455.x的已公布中國發(fā)明專利申請文件中所記載一種用于傳送帶輸送物品的計數(shù)方法及系統(tǒng)；以及，申請?zhí)朿n202310946274.9的已公布中國發(fā)明專利申請文件中所記載一種智能化的傳送帶上雞蛋計數(shù)和分類方法。

3、但是，現(xiàn)有系統(tǒng)及方法仍存在以下的技術(shù)缺陷，具體而言即現(xiàn)有系統(tǒng)及方法通常采用單一的視覺傳感器或者光電傳感器來進行計數(shù)，容易出現(xiàn)產(chǎn)品計數(shù)錯誤，或者只能用于單一產(chǎn)品（比如蛋類）進行計數(shù)，更換產(chǎn)品或者多個產(chǎn)品就會出現(xiàn)無法計數(shù)，也無法判斷產(chǎn)品是否具有明顯的體積缺陷的問題。

4、故此，申請人提出本發(fā)明。

技術(shù)實現(xiàn)思路

1、本發(fā)明的目的是為了解決上述現(xiàn)有技術(shù)的不足而提供一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)及方法。

2、為了實現(xiàn)上述目的，本發(fā)明所提供的一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)，包括：

3、采集2d圖像數(shù)據(jù)的視覺傳感器；

4、采集3d點云數(shù)據(jù)的結(jié)構(gòu)光傳感器；

5、以及，使用2d的深度神經(jīng)網(wǎng)絡(luò)算法對采集到的2d圖像數(shù)據(jù)進行目標檢測與分類，使用3d的深度神經(jīng)網(wǎng)絡(luò)算法對采集到的3d點云數(shù)據(jù)進行目標檢測，并采用2d圖像與3d點云多模態(tài)配準算法將2d圖像數(shù)據(jù)與3d點云數(shù)據(jù)進行準確配準，進一步將2d與3d檢測框通過兩者重疊度去除無效檢測框，再對3d點云數(shù)據(jù)進行點云表面重建，點云分割，計算出相應(yīng)產(chǎn)品的點云體積，對不同的產(chǎn)品體積進行匹配并計數(shù)的計算模塊。

6、上述一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)，其中所述計算模塊還優(yōu)選擇通過體積閾值設(shè)定判斷各個類別產(chǎn)品中具有體積缺陷的合格品與不合格品，并計數(shù)。

7、上述計算模塊，更進一步的優(yōu)選擇為包括：用于檢測2d圖像目標及其分類的人工智能2d檢測分類神經(jīng)網(wǎng)絡(luò)；用于檢測3d點云目標的人工智能3d檢測神經(jīng)網(wǎng)絡(luò)；用于2d圖像與3d點云進行多模態(tài)配準的配準算法；以及，匹配后數(shù)據(jù)預(yù)處理，點云表面重建，點云分割，分割體積計算，通過分類標簽信息對其各個類別產(chǎn)品進行計數(shù)，通過每個產(chǎn)品的體積設(shè)定閾值，閾值內(nèi)的設(shè)置為合格產(chǎn)品，閾值外的設(shè)置為不合格產(chǎn)品的后處理算法。

8、進一步的，上述一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)，其還包括：

9、實現(xiàn)數(shù)據(jù)可視化的顯示模塊。

10、另外，本發(fā)明所提供的一種傳送帶上不同產(chǎn)品的自動化計數(shù)方法，其包括以下的步驟：

11、采用視覺傳感器采集2d圖像數(shù)據(jù)，同時采用結(jié)構(gòu)光傳感器采集3d點云數(shù)據(jù)的步驟一；

12、使用2d的深度神經(jīng)網(wǎng)絡(luò)算法對采集到的2d圖像數(shù)據(jù)進行目標檢測與分類，使用3d的深度神經(jīng)網(wǎng)絡(luò)算法對采集到的3d點云數(shù)據(jù)進行目標檢測，并采用2d圖像與3d點云多模態(tài)配準算法將2d圖像數(shù)據(jù)與3d點云數(shù)據(jù)進行準確配準，進一步將2d與3d檢測框通過兩者重疊度去除無效檢測框，再對3d點云數(shù)據(jù)進行點云表面重建，點云分割，計算出相應(yīng)產(chǎn)品的點云體積，對不同的產(chǎn)品體積進行匹配并計數(shù)的步驟二。

13、上述步驟二中還優(yōu)選擇通過體積閾值設(shè)定判斷判斷各個類別產(chǎn)品中具有體積缺陷的合格品與不合格品，并計數(shù)。

14、與現(xiàn)有技術(shù)相比較，本發(fā)明得到的一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)及方法，其具備以下的技術(shù)效果：

15、本發(fā)明能夠?qū)Σ煌瑫r段中傳送帶上的不同產(chǎn)品進行準確計數(shù)，也能夠?qū)ν粫r段中傳送帶上的多種產(chǎn)品進行同步且準確的計數(shù)，而且還均能夠計算出產(chǎn)品體積有明顯缺陷的合格產(chǎn)品與非合格產(chǎn)品的個數(shù)。

16、也就是說，傳送帶上假如有a，b，c等多種產(chǎn)品在進行傳輸，而且由于工藝或管理問題，這些產(chǎn)品很有可能會出現(xiàn)不合格現(xiàn)象。通過本發(fā)明專利，我們可以對a，b，c等多種產(chǎn)品分別進行計數(shù)，并且還能計算出合格產(chǎn)品與非合格產(chǎn)品的個數(shù)。

技術(shù)特征：

1.一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)，其特征是包括：

2.根據(jù)權(quán)利要求1所述的一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)，其特征在于：

3.根據(jù)權(quán)利要求2所述的一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)，其特征在于所述計算模塊，主要包括：用于檢測2d圖像目標及其分類的人工智能2d檢測分類神經(jīng)網(wǎng)絡(luò)；用于檢測3d點云目標的人工智能3d檢測神經(jīng)網(wǎng)絡(luò)；用于2d圖像與3d點云進行多模態(tài)配準的配準算法；以及，匹配后數(shù)據(jù)預(yù)處理，點云表面重建，點云分割，分割體積計算，通過分類標簽信息對其各個類別產(chǎn)品進行計數(shù)，通過每個產(chǎn)品的體積設(shè)定閾值，閾值內(nèi)的設(shè)置為合格產(chǎn)品，閾值外的設(shè)置為不合格產(chǎn)品的后處理算法。

4.根據(jù)權(quán)利要求1-3中任一項所述的一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)，其特征在于還包括：

5.一種傳送帶上不同產(chǎn)品的自動化計數(shù)方法，其特征是包括以下的步驟：

6.根據(jù)權(quán)利要求5所述的一種傳送帶上不同產(chǎn)品的自動化計數(shù)方法，其特征在于：

技術(shù)總結(jié)
本發(fā)明公開了一種傳送帶上產(chǎn)品的計數(shù)系統(tǒng)，特別是一種傳送帶上不同產(chǎn)品的自動化計數(shù)系統(tǒng)及方法。所述系統(tǒng)包括：采集2D圖像數(shù)據(jù)的視覺傳感器；采集3D點云數(shù)據(jù)的結(jié)構(gòu)光傳感器；分別采用深度學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)算法對采集到的2D圖像數(shù)據(jù)和3D點云數(shù)據(jù)進行目標檢測和分類，并采用2D圖像與3D點云多模態(tài)配準算法將2D圖像數(shù)據(jù)與3D點云數(shù)據(jù)進行準確配準，再對3D點云數(shù)據(jù)進行點云表面重建，點云分割，計算出相應(yīng)產(chǎn)品的點云體積，對不同的產(chǎn)品體積進行匹配并計數(shù)的計算模塊。本發(fā)明解決了“實現(xiàn)傳送帶上的不同產(chǎn)品進行準確計數(shù)”的技術(shù)問題。本發(fā)明能夠?qū)魉蛶系牟挥卯a(chǎn)品進行計數(shù)，并且能夠?qū)Ξa(chǎn)品是否有明顯體積缺陷進行區(qū)分并且對合格品和非合格品分開計數(shù)。

技術(shù)研發(fā)人員：王賢成,方文愷,何宏煒,苗炳義
受保護的技術(shù)使用者：寧波大學(xué)科學(xué)技術(shù)學(xué)院
技術(shù)研發(fā)日：
技術(shù)公布日：2025/1/6