本公開涉及圖像處理,具體地,涉及一種圖像處理方法、裝置、介質(zhì)、設(shè)備及產(chǎn)品。
背景技術(shù):
1、塔筒就是風(fēng)力發(fā)電的塔桿,在風(fēng)力發(fā)電機組中主要起支撐作用。由于長期受變載、鹽霧侵蝕、安裝缺陷等人為或環(huán)境因素的影響,塔筒易出現(xiàn)裂紋、變形或法蘭松動等狀況,導(dǎo)致塔筒偏離健康運行狀態(tài),嚴(yán)重威脅了風(fēng)力發(fā)電機組的運行安全。因此,為保證風(fēng)力發(fā)電機組長年安全、正常運行,需要對塔筒進行振動測量。
2、在現(xiàn)有技術(shù)中,通常是采用計算機視覺采集塔筒圖像進行振動測試,但是在實際應(yīng)用過程中,會因為在采集圖像時受到如車輛行駛或大風(fēng)等外界環(huán)境影響,得到不理想的視頻文件,從而難以獲取到準(zhǔn)確的振動信號,導(dǎo)致振動測量不準(zhǔn)確。
技術(shù)實現(xiàn)思路
1、為了解決上述問題,本公開提供一種圖像處理方法、裝置、介質(zhì)、設(shè)備及產(chǎn)品。
2、第一方面,本公開提供一種圖像處理方法,所述方法包括:
3、獲取待處理的候選圖像,所述候選圖像為包含塔筒對象的圖像;
4、確定所述候選圖像的圖像變化信息,所述圖像變化信息表征所述候選圖像與相鄰幀的相鄰候選圖像的圖像變化;
5、根據(jù)所述圖像變化信息,對所述候選圖像進行圖像旋轉(zhuǎn)和/或圖像平移,以得到目標(biāo)圖像。
6、可選地,所述確定所述候選圖像的圖像變化信息包括:
7、獲取所述候選圖像的相鄰幀的相鄰候選圖像;
8、確定所述候選圖像的第一邊緣結(jié)構(gòu)信息,以及確定所述相鄰候選圖像的第二邊緣結(jié)構(gòu)信息;
9、根據(jù)所述第一邊緣結(jié)構(gòu)信息和所述第二邊緣結(jié)構(gòu)信息,確定所述候選圖像的圖像變化信息。
10、可選地,所述確定所述候選圖像的第一邊緣結(jié)構(gòu)信息包括:
11、確定所述候選圖像中的第一候選區(qū)域,所述第一候選區(qū)域包括靜止的參考對象;
12、將所述第一候選區(qū)域作為預(yù)先生成的邊緣檢測模型的輸入,得到所述第一候選區(qū)域中的第一邊緣結(jié)構(gòu)信息,所第一邊緣結(jié)構(gòu)信息包括所述參考對象的第一邊緣結(jié)構(gòu)區(qū)域。
13、可選地,所述確定所述相鄰候選圖像的第二邊緣結(jié)構(gòu)信息包括:
14、確定所述相鄰候選圖像中的第二候選區(qū)域,所述第二候選區(qū)域包括所述參考對象;
15、將所述第二候選區(qū)域作為預(yù)先生成的所述邊緣檢測模型的輸入,得到所述第二候選區(qū)域中的第二邊緣結(jié)構(gòu)信息,所述第二邊緣結(jié)構(gòu)信息包括所述參考對象的第二邊緣結(jié)構(gòu)區(qū)域。
16、可選地,所述根據(jù)所述第一邊緣結(jié)構(gòu)信息和所述第二邊緣結(jié)構(gòu)信息,確定所述候選圖像的圖像變化信息包括:
17、根據(jù)所述第一邊緣結(jié)構(gòu)信息和所述第二邊緣結(jié)構(gòu)信息,確定所述候選圖像相對于所述相鄰候選圖像的旋轉(zhuǎn)信息和/或平移信息;
18、根據(jù)所述旋轉(zhuǎn)信息和/或所述平移信息,確定所述候選圖像的所述圖像變化信息。
19、可選地,所述根據(jù)所述圖像變化信息,對所述候選圖像進行圖像重建處理包括:
20、在所述圖像變化信息包括旋轉(zhuǎn)信息的情況下,將所述候選圖像按照所述旋轉(zhuǎn)信息進行圖像旋轉(zhuǎn);或,在所述圖像變化信息包括平移信息的情況下,將所述候選圖像按照所述平移信息,進行圖像平移;或,在所述圖像變化信息包括旋轉(zhuǎn)信息和平移信息的情況下,將所述候選圖像按照所述旋轉(zhuǎn)信息和所述平移信息,進行圖像旋轉(zhuǎn)和圖像平移;得到所述目標(biāo)圖像。
21、可選地,所述邊緣檢測模型通過以下步驟進行邊緣檢測:
22、獲取樣本圖像中的多個預(yù)設(shè)尺度的特征圖;
23、將所述多個特征圖輸入預(yù)先訓(xùn)練得到的空間注意力模型,得到融合特征圖,所述融合特征圖上每個像素點的像素信息為多個預(yù)設(shè)尺度的融合像素信息;
24、根據(jù)所述融合特征圖確定所述特征圖對應(yīng)的概率信息和閾值信息,所述概率信息用于表征所述特征圖為邊緣結(jié)構(gòu)的概率,所述閾值信息用于表征所述特征圖為邊緣結(jié)構(gòu)的概率閾值;
25、根據(jù)所述概率信息和所述閾值信息,確定所述樣本圖像的邊緣結(jié)構(gòu)區(qū)域。
26、第二方面,本公開提供一種圖像處理裝置,所述裝置包括:
27、獲取模塊,用于獲取待處理的候選圖像,所述候選圖像為包含塔筒對象的圖像;
28、確定模塊,用于確定所述候選圖像的圖像變化信息,所述圖像變化信息表征所述候選圖像與相鄰幀的相鄰候選圖像的圖像變化;
29、處理模塊,用于根據(jù)所述圖像變化信息,對所述候選圖像進行圖像旋轉(zhuǎn)和/或圖像平移,以得到目標(biāo)圖像。
30、可選地,所述確定模塊包括:
31、獲取子模塊,用于獲取所述候選圖像的相鄰幀的相鄰候選圖像;
32、第一確定子模塊,用于確定所述候選圖像的第一邊緣結(jié)構(gòu)信息,以及確定所述相鄰候選圖像的第二邊緣結(jié)構(gòu)信息;
33、第二確定子模塊,用于根據(jù)所述第一邊緣結(jié)構(gòu)信息和所述第二邊緣結(jié)構(gòu)信息,確定所述候選圖像的圖像變化信息。
34、可選地,所述第一確定子模塊,用于確定所述候選圖像中的第一候選區(qū)域,所述第一候選區(qū)域包括靜止的參考對象;將所述第一候選區(qū)域作為預(yù)先生成的邊緣檢測模型的輸入,得到所述第一候選區(qū)域中的第一邊緣結(jié)構(gòu)信息,所第一邊緣結(jié)構(gòu)信息包括所述參考對象的第一邊緣結(jié)構(gòu)區(qū)域。
35、可選地,所述第一確定子模塊,用于確定所述相鄰候選圖像中的第二候選區(qū)域,所述第二候選區(qū)域包括所述參考對象;將所述第二候選區(qū)域作為預(yù)先生成的所述邊緣檢測模型的輸入,得到所述第二候選區(qū)域中的第二邊緣結(jié)構(gòu)信息,所述第二邊緣結(jié)構(gòu)信息包括所述參考對象的第二邊緣結(jié)構(gòu)區(qū)域。
36、可選地,所述第二確定子模塊,用于根據(jù)所述第一邊緣結(jié)構(gòu)信息和所述第二邊緣結(jié)構(gòu)信息,確定所述候選圖像相對于所述相鄰候選圖像的旋轉(zhuǎn)信息和/或平移信息;根據(jù)所述旋轉(zhuǎn)信息和/或所述平移信息,確定所述候選圖像的所述圖像變化信息。
37、可選地,所述處理模塊用于在所述圖像變化信息包括旋轉(zhuǎn)信息的情況下,將所述候選圖像按照所述旋轉(zhuǎn)信息進行圖像旋轉(zhuǎn);或,在所述圖像變化信息包括平移信息的情況下,將所述候選圖像按照所述平移信息,進行圖像平移;或,在所述圖像變化信息包括旋轉(zhuǎn)信息和平移信息的情況下,將所述候選圖像按照所述旋轉(zhuǎn)信息和所述平移信息,進行圖像旋轉(zhuǎn)和圖像平移;得到所述目標(biāo)圖像。
38、可選地,所述邊緣檢測模型通過以下步驟進行邊緣檢測:
39、獲取樣本圖像中的多個預(yù)設(shè)尺度的特征圖;
40、將所述多個特征圖輸入預(yù)先訓(xùn)練得到的空間注意力模型,得到融合特征圖,所述融合特征圖上每個像素點的像素信息為多個預(yù)設(shè)尺度的融合像素信息;
41、根據(jù)所述融合特征圖確定所述特征圖對應(yīng)的概率信息和閾值信息,所述概率信息用于表征所述特征圖為邊緣結(jié)構(gòu)的概率,所述閾值信息用于表征所述特征圖為邊緣結(jié)構(gòu)的概率閾值;
42、根據(jù)所述概率信息和所述閾值信息,確定所述樣本圖像的邊緣結(jié)構(gòu)區(qū)域。
43、第三方面,本公開提供一種非臨時性計算機可讀存儲介質(zhì),其上存儲有計算機程序,該計算機程序被處理器執(zhí)行時實現(xiàn)本公開第一方面所述方法的步驟。
44、第四方面,本公開提供一種電子設(shè)備,包括:
45、存儲器,其上存儲有計算機程序;
46、處理器,用于執(zhí)行所述存儲器中的所述計算機程序,以實現(xiàn)本公開第一方面所述方法的步驟。
47、第五方面,本公開提供一種計算機程序產(chǎn)品,包括計算機程序,該計算機程序被處理器執(zhí)行時實現(xiàn)本公開第一方面所述方法的步驟。
48、本公開的實施例提供的技術(shù)方案可以包括以下有益效果:
49、通過獲取待處理的候選圖像,所述候選圖像為包含塔筒對象的圖像;確定所述候選圖像的圖像變化信息,所述圖像變化信息表征所述候選圖像與相鄰幀的相鄰候選圖像的圖像變化;根據(jù)所述圖像變化信息,對所述候選圖像進行圖像旋轉(zhuǎn)和/或圖像平移,以得到目標(biāo)圖像。這樣,可以根據(jù)確定出的候選圖像相較于相鄰幀的相鄰候選圖像的圖像變化帶來的誤差振動,消除候選圖像的誤差振動,避免得出的目標(biāo)圖像受到誤差振動的影響,保證目標(biāo)圖像僅表現(xiàn)出塔筒本身的振動信息,提高振動測量的準(zhǔn)確性。
50、應(yīng)當(dāng)理解的是,以上的一般描述和后文的細(xì)節(jié)描述僅是示例性和解釋性的,并不能限制本公開。