本技術(shù)涉及數(shù)據(jù)處理,尤其涉及一種數(shù)據(jù)處理方法、裝置、電子設(shè)備、計(jì)算機(jī)可讀介質(zhì)。
背景技術(shù):
1、關(guān)鍵點(diǎn)預(yù)測是一種計(jì)算機(jī)視覺任務(wù),而且關(guān)鍵點(diǎn)預(yù)測用于針對(duì)一個(gè)圖像數(shù)據(jù)或者一個(gè)圖像序列(比如,視頻數(shù)據(jù)等)中某些關(guān)鍵點(diǎn)(比如,眼角這一關(guān)鍵點(diǎn)等)進(jìn)行定位。
2、對(duì)于一些應(yīng)用場景(比如,訓(xùn)練一個(gè)具有關(guān)鍵點(diǎn)預(yù)測功能的機(jī)器學(xué)習(xí)模型等場景)來說,在針對(duì)一個(gè)圖像序列(比如,視頻數(shù)據(jù))進(jìn)行關(guān)鍵點(diǎn)預(yù)測處理得到關(guān)鍵點(diǎn)預(yù)測序列之后,可能需要進(jìn)一步地評(píng)估該關(guān)鍵點(diǎn)預(yù)測序列在某些方面(比如,穩(wěn)定性等方面)下所呈現(xiàn)的狀態(tài)。
技術(shù)實(shí)現(xiàn)思路
1、本技術(shù)提供了一種數(shù)據(jù)處理方法、裝置、電子設(shè)備、計(jì)算機(jī)可讀介質(zhì)。
2、為了實(shí)現(xiàn)上述目的,本技術(shù)提供的技術(shù)方案如下:
3、本技術(shù)提供一種數(shù)據(jù)處理方法,所述方法包括:
4、獲取圖像序列的關(guān)鍵點(diǎn)預(yù)測序列以及所述圖像序列對(duì)應(yīng)的關(guān)鍵點(diǎn)標(biāo)簽序列;所述關(guān)鍵點(diǎn)預(yù)測序列包括至少一個(gè)關(guān)鍵點(diǎn)的預(yù)測軌跡;所述關(guān)鍵點(diǎn)標(biāo)簽序列包括所述至少一個(gè)關(guān)鍵點(diǎn)的標(biāo)簽軌跡;
5、對(duì)于任一所述關(guān)鍵點(diǎn),確定所述關(guān)鍵點(diǎn)的預(yù)測軌跡與所述關(guān)鍵點(diǎn)的標(biāo)簽軌跡之間的軌跡相似表征數(shù)據(jù);所述軌跡相似表征數(shù)據(jù)用于表示所述關(guān)鍵點(diǎn)的預(yù)測軌跡與所述關(guān)鍵點(diǎn)的標(biāo)簽軌跡之間在軌跡長度和/或軌跡方向上所呈現(xiàn)的相似程度;
6、依據(jù)所述軌跡相似表征數(shù)據(jù),確定所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的關(guān)鍵點(diǎn)預(yù)測性能。
7、在一種可能的實(shí)施方式下,所述圖像序列包括第一圖像和第二圖像,所述第一圖像在所述圖像序列中對(duì)應(yīng)的時(shí)序早于所述第二圖像在所述圖像序列中對(duì)應(yīng)的時(shí)序,所述第一圖像在所述圖像序列中對(duì)應(yīng)的時(shí)序與所述第二圖像在所述圖像序列中對(duì)應(yīng)的時(shí)序相鄰;
8、所述關(guān)鍵點(diǎn)的預(yù)測軌跡包括所述關(guān)鍵點(diǎn)在所述第一圖像下對(duì)應(yīng)的預(yù)測位置和所述關(guān)鍵點(diǎn)在所述第二圖像下對(duì)應(yīng)的預(yù)測位置;
9、所述關(guān)鍵點(diǎn)的標(biāo)簽軌跡包括所述關(guān)鍵點(diǎn)在所述第一圖像下對(duì)應(yīng)的標(biāo)簽位置和所述關(guān)鍵點(diǎn)在所述第二圖像下對(duì)應(yīng)的標(biāo)簽位置;
10、所述軌跡相似表征數(shù)據(jù)的確定過程,包括:
11、計(jì)算所述關(guān)鍵點(diǎn)在所述第二圖像下對(duì)應(yīng)的預(yù)測位置與所述關(guān)鍵點(diǎn)在所述第一圖像下對(duì)應(yīng)的預(yù)測位置之間的距離,得到軌跡段預(yù)測長度;
12、計(jì)算所述關(guān)鍵點(diǎn)在所述第二圖像下對(duì)應(yīng)的標(biāo)簽位置與所述關(guān)鍵點(diǎn)在所述第一圖像下對(duì)應(yīng)的標(biāo)簽位置之間的距離,得到軌跡段標(biāo)簽長度;
13、根據(jù)所述軌跡段預(yù)測長度與所述軌跡段標(biāo)簽長度之間的差值,確定長度相似表征數(shù)據(jù);
14、依據(jù)所述長度相似表征數(shù)據(jù),確定所述軌跡相似表征數(shù)據(jù)。
15、在一種可能的實(shí)施方式下,所述圖像序列包括第一圖像和第二圖像,所述第一圖像在所述圖像序列中對(duì)應(yīng)的時(shí)序早于所述第二圖像在所述圖像序列中對(duì)應(yīng)的時(shí)序,所述第一圖像在所述圖像序列中對(duì)應(yīng)的時(shí)序與所述第二圖像在所述圖像序列中對(duì)應(yīng)的時(shí)序相鄰;
16、所述關(guān)鍵點(diǎn)的預(yù)測軌跡包括所述關(guān)鍵點(diǎn)在所述第一圖像下對(duì)應(yīng)的預(yù)測位置和所述關(guān)鍵點(diǎn)在所述第二圖像下對(duì)應(yīng)的預(yù)測位置;
17、所述關(guān)鍵點(diǎn)的標(biāo)簽軌跡包括所述關(guān)鍵點(diǎn)在所述第一圖像下對(duì)應(yīng)的標(biāo)簽位置和所述關(guān)鍵點(diǎn)在所述第二圖像下對(duì)應(yīng)的標(biāo)簽位置;
18、所述軌跡相似表征數(shù)據(jù)的確定過程,包括:
19、依據(jù)所述關(guān)鍵點(diǎn)在所述第二圖像下對(duì)應(yīng)的預(yù)測位置與所述關(guān)鍵點(diǎn)在所述第一圖像下對(duì)應(yīng)的預(yù)測位置之間的方向表征數(shù)據(jù),確定軌跡段預(yù)測方向表征數(shù)據(jù);
20、依據(jù)所述關(guān)鍵點(diǎn)在所述第二圖像下對(duì)應(yīng)的標(biāo)簽位置與所述關(guān)鍵點(diǎn)在所述第一圖像下對(duì)應(yīng)的標(biāo)簽位置之間的方向表征數(shù)據(jù),確定軌跡段標(biāo)簽方向表征數(shù)據(jù);
21、根據(jù)所述軌跡段預(yù)測方向表征數(shù)據(jù)和所述軌跡段標(biāo)簽方向表征數(shù)據(jù),確定所述方向相似表征數(shù)據(jù);
22、依據(jù)所述方向相似表征數(shù)據(jù),確定所述軌跡相似表征數(shù)據(jù)。
23、在一種可能的實(shí)施方式下,所述軌跡相似表征數(shù)據(jù)包括長度相似表征數(shù)據(jù)和/或方向相似表征數(shù)據(jù);所述長度相似表征數(shù)據(jù)用于表示所述關(guān)鍵點(diǎn)的預(yù)測軌跡與所述關(guān)鍵點(diǎn)的標(biāo)簽軌跡在軌跡長度上所呈現(xiàn)的相似程度;所述方向相似表征數(shù)據(jù)用于表示所述關(guān)鍵點(diǎn)的預(yù)測軌跡與所述關(guān)鍵點(diǎn)的標(biāo)簽軌跡在軌跡方向上所呈現(xiàn)的相似程度。
24、在一種可能的實(shí)施方式下,所述依據(jù)所述軌跡相似表征數(shù)據(jù),確定所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的關(guān)鍵點(diǎn)預(yù)測性能,包括:
25、依據(jù)所述軌跡相似表征數(shù)據(jù),確定所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的預(yù)測穩(wěn)定性表征數(shù)據(jù);
26、根據(jù)所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的預(yù)測穩(wěn)定性表征數(shù)據(jù),確定所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的關(guān)鍵點(diǎn)預(yù)測性能。
27、在一種可能的實(shí)施方式下,所述根據(jù)所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的預(yù)測穩(wěn)定性表征數(shù)據(jù),確定所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的關(guān)鍵點(diǎn)預(yù)測性能之前,所述方法還包括:
28、根據(jù)所述關(guān)鍵點(diǎn)預(yù)測序列和所述關(guān)鍵點(diǎn)標(biāo)簽序列,確定所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的預(yù)測精確性表征數(shù)據(jù);
29、所述根據(jù)所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的預(yù)測穩(wěn)定性表征數(shù)據(jù),確定所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的關(guān)鍵點(diǎn)預(yù)測性能,包括:
30、根據(jù)所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的預(yù)測穩(wěn)定性表征數(shù)據(jù)以及所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的預(yù)測精確性表征數(shù)據(jù),確定所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的關(guān)鍵點(diǎn)預(yù)測性能。
31、在一種可能的實(shí)施方式下,所述獲取圖像序列的關(guān)鍵點(diǎn)預(yù)測序列,包括:
32、利用關(guān)鍵點(diǎn)預(yù)測模型對(duì)所述圖像序列進(jìn)行關(guān)鍵點(diǎn)預(yù)測處理,得到所述圖像序列的關(guān)鍵點(diǎn)預(yù)測序列;
33、所述確定所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的關(guān)鍵點(diǎn)預(yù)測性能之后,所述方法還包括:
34、依據(jù)所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的關(guān)鍵點(diǎn)預(yù)測性能,對(duì)所述關(guān)鍵點(diǎn)預(yù)測模型進(jìn)行更新。
35、本技術(shù)提供了一種數(shù)據(jù)處理裝置,包括:
36、數(shù)據(jù)獲取單元,用于獲取圖像序列的關(guān)鍵點(diǎn)預(yù)測序列以及所述圖像序列對(duì)應(yīng)的關(guān)鍵點(diǎn)標(biāo)簽序列;所述關(guān)鍵點(diǎn)預(yù)測序列包括至少一個(gè)關(guān)鍵點(diǎn)的預(yù)測軌跡;所述關(guān)鍵點(diǎn)標(biāo)簽序列包括所述至少一個(gè)關(guān)鍵點(diǎn)的標(biāo)簽軌跡;
37、第一確定單元,用于對(duì)于任一所述關(guān)鍵點(diǎn),確定所述關(guān)鍵點(diǎn)的預(yù)測軌跡與所述關(guān)鍵點(diǎn)的標(biāo)簽軌跡之間的軌跡相似表征數(shù)據(jù);所述軌跡相似表征數(shù)據(jù)用于表示所述關(guān)鍵點(diǎn)的預(yù)測軌跡與所述關(guān)鍵點(diǎn)的標(biāo)簽軌跡之間在軌跡長度和/或軌跡方向上所呈現(xiàn)的相似程度;
38、第二確定單元,用于依據(jù)所述軌跡相似表征數(shù)據(jù),確定所述關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的關(guān)鍵點(diǎn)預(yù)測性能。
39、本技術(shù)提供了一種電子設(shè)備,所述設(shè)備包括:處理器和存儲(chǔ)器;
40、所述存儲(chǔ)器,用于存儲(chǔ)指令或計(jì)算機(jī)程序;
41、所述處理器,用于執(zhí)行所述存儲(chǔ)器中的所述指令或計(jì)算機(jī)程序,以使得所述電子設(shè)備執(zhí)行本技術(shù)提供的數(shù)據(jù)處理方法。
42、本技術(shù)提供了一種計(jì)算機(jī)可讀介質(zhì),所述計(jì)算機(jī)可讀介質(zhì)中存儲(chǔ)有指令或計(jì)算機(jī)程序,當(dāng)所述指令或計(jì)算機(jī)程序在設(shè)備上運(yùn)行時(shí),使得所述設(shè)備執(zhí)行本技術(shù)提供的數(shù)據(jù)處理方法。
43、本技術(shù)提供了一種計(jì)算機(jī)程序產(chǎn)品,其包括承載在非暫態(tài)計(jì)算機(jī)可讀介質(zhì)上的計(jì)算機(jī)程序,該計(jì)算機(jī)程序包含用于執(zhí)行本技術(shù)提供的數(shù)據(jù)處理方法的程序代碼。
44、與現(xiàn)有技術(shù)相比,本技術(shù)至少具有以下優(yōu)點(diǎn):
45、本技術(shù)提供的技術(shù)方案中,對(duì)于一個(gè)圖像序列來說,先獲取該圖像序列的關(guān)鍵點(diǎn)預(yù)測序列以及該圖像序列對(duì)應(yīng)的關(guān)鍵點(diǎn)標(biāo)簽序列,以使該關(guān)鍵點(diǎn)預(yù)測序列包括至少一個(gè)關(guān)鍵點(diǎn)的預(yù)測軌跡,并使得該關(guān)鍵點(diǎn)標(biāo)簽序列包括至少一個(gè)關(guān)鍵點(diǎn)的標(biāo)簽軌跡;然后,對(duì)于任一關(guān)鍵點(diǎn),確定該關(guān)鍵點(diǎn)的預(yù)測軌跡與該關(guān)鍵點(diǎn)的標(biāo)簽軌跡之間的軌跡相似表征數(shù)據(jù),以使該軌跡相似表征數(shù)據(jù)能夠表示出該關(guān)鍵點(diǎn)的預(yù)測軌跡與該關(guān)鍵點(diǎn)的標(biāo)簽軌跡之間在軌跡長度和/或軌跡方向上所呈現(xiàn)的相似程度,從而使得該軌跡相似表征數(shù)據(jù)能夠更好地表示出該關(guān)鍵點(diǎn)的預(yù)測軌跡相對(duì)于該關(guān)鍵點(diǎn)的標(biāo)簽軌跡所發(fā)生的抖動(dòng)程度;最后,依據(jù)所有關(guān)鍵點(diǎn)對(duì)應(yīng)的軌跡相似表征數(shù)據(jù),確定該關(guān)鍵點(diǎn)預(yù)測序列對(duì)應(yīng)的關(guān)鍵點(diǎn)預(yù)測性能,以使該關(guān)鍵點(diǎn)預(yù)測性能至少能夠更好地表示出每個(gè)關(guān)鍵點(diǎn)的預(yù)測軌跡相對(duì)于其對(duì)應(yīng)的標(biāo)簽軌跡所發(fā)生的抖動(dòng)程度,從而使得該關(guān)鍵點(diǎn)預(yù)測性能至少能夠更好地表示針對(duì)該圖像序列預(yù)測得到該關(guān)鍵點(diǎn)預(yù)測序列時(shí)所呈現(xiàn)的預(yù)測穩(wěn)定性,進(jìn)而使得該關(guān)鍵點(diǎn)預(yù)測性能能夠更好地表示出在針對(duì)一個(gè)圖像序列進(jìn)行關(guān)鍵點(diǎn)預(yù)測處理時(shí)所呈現(xiàn)的預(yù)測性能。