識(shí)別視頻圖像中的商品和展示其信息的方法、裝置及系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本申請(qǐng)涉及圖像識(shí)別領(lǐng)域，具體涉及一種用于識(shí)別暫停視頻圖像中的商品的方法和裝置。本申請(qǐng)同時(shí)提供一種用于在暫停視頻圖像上展示商品信息的方法和裝置，以及一種用于在暫停視頻圖像上展示商品信息的系統(tǒng)。
【背景技術(shù)】
[0002]隨著個(gè)人電腦和手機(jī)等終端設(shè)備的硬件技術(shù)的不斷發(fā)展，越來(lái)越多的人選擇使用個(gè)人電腦或者手機(jī)等終端設(shè)備觀看由視頻網(wǎng)站提供的各種電視節(jié)目。所謂視頻網(wǎng)站是指在相關(guān)的技術(shù)平臺(tái)支持下，讓互聯(lián)網(wǎng)用戶(hù)在線(xiàn)流暢發(fā)布、瀏覽和分享視頻作品的網(wǎng)站，眾所周知的視頻網(wǎng)站有優(yōu)酷網(wǎng)、樂(lè)視網(wǎng)、愛(ài)奇藝等；通常視頻網(wǎng)站也會(huì)推出自己的視頻客戶(hù)端應(yīng)用程序(也稱(chēng)視頻客戶(hù)端)，專(zhuān)門(mén)用于在手機(jī)或者個(gè)人電腦等終端設(shè)備上播放視頻網(wǎng)站提供的視頻作品，例如:優(yōu)酷視頻客戶(hù)端、愛(ài)奇藝視頻客戶(hù)端等。
[0003]在視頻網(wǎng)站快速發(fā)展的同時(shí)，廣告商們開(kāi)始青睞視頻廣告，而廣告投放也成為視頻網(wǎng)站的主要盈利模式之一，視頻網(wǎng)站通常會(huì)在視頻文件播放之前、或者視頻文件播放暫停等時(shí)機(jī)，向終端用戶(hù)推送廣告。
[0004]為了更好地吸引終端用戶(hù)的注意力，讓用戶(hù)更多地關(guān)注視頻廣告，視頻網(wǎng)站開(kāi)始推出與視頻播放內(nèi)容相關(guān)的商品廣告，即:采用人工的方式在視頻中的特定時(shí)間和位置，標(biāo)注與當(dāng)前視頻圖像中的商品相關(guān)的推廣圖片或者鏈接(該過(guò)程也稱(chēng)為打點(diǎn))，并在視頻播放的過(guò)程中顯示上述標(biāo)注好的商品推廣信息，從而能夠定向推廣與當(dāng)前播放視頻深度關(guān)聯(lián)的商品，從而更為有效地吸引用戶(hù)的注意力，提升用戶(hù)對(duì)于廣告投放的觀看體驗(yàn)。
[0005]上述采用人工打點(diǎn)進(jìn)行廣告定向推廣的方式，在具備上述優(yōu)點(diǎn)的同時(shí)，也存在如下缺陷:
[0006]1)過(guò)于耗費(fèi)人力成本，當(dāng)視頻文件中需要添加標(biāo)注信息的商品比較多，或者需要處理的視頻文件比較多的情況下，人工處理效率無(wú)法滿(mǎn)足要求；
[0007]2)通過(guò)人工方式識(shí)別視頻圖像中的商品、并與已有商品進(jìn)行匹配的過(guò)程，取決于個(gè)人的經(jīng)驗(yàn)以及對(duì)已有商品的了解程度，在商品數(shù)量眾多的情況下，上述識(shí)別匹配過(guò)程的準(zhǔn)確性通常無(wú)法控制，因此可能出現(xiàn)在視頻播放過(guò)程中展示的商品信息與視頻圖像中的商品不一致的情況，給用戶(hù)體驗(yàn)帶來(lái)不好的影響。

【發(fā)明內(nèi)容】

[0008]本申請(qǐng)?zhí)峁┮环N用于識(shí)別暫停視頻圖像中的商品的方法和裝置，以解決現(xiàn)有的人工打點(diǎn)方式耗費(fèi)人力而且無(wú)法控制識(shí)別準(zhǔn)確性的問(wèn)題。本申請(qǐng)另外提供一種用于在暫停視頻圖像上展示商品信息方法和裝置，以及一種用于在暫停視頻圖像上展示商品信息的系統(tǒng)。
[0009]本申請(qǐng)?zhí)峁┮环N用于識(shí)別暫停視頻圖像中的商品的方法，包括:
[0010]接收客戶(hù)端發(fā)送的暫停視頻的相關(guān)信息；
[0011]根據(jù)所述暫停視頻的相關(guān)信息，獲取處于暫停狀態(tài)的客戶(hù)端視頻對(duì)應(yīng)的靜態(tài)圖像；
[0012]識(shí)別所述靜態(tài)圖像中的商品并獲取商品信息；
[0013]將識(shí)別出的商品在所述靜態(tài)圖像中的位置信息和對(duì)應(yīng)的商品信息返回給所述客戶(hù)端。
[0014]可選的，所述獲取處于暫停狀態(tài)的客戶(hù)端視頻對(duì)應(yīng)的靜態(tài)圖像是指，從接收到的暫停視頻的相關(guān)信息中提取所述靜態(tài)圖像。
[0015]可選的，所述獲取處于暫停狀態(tài)的客戶(hù)端視頻對(duì)應(yīng)的靜態(tài)圖像包括:
[0016]根據(jù)接收到的暫停視頻相關(guān)信息中包含的暫停時(shí)間點(diǎn)，向提供所述視頻的視頻服務(wù)端發(fā)送獲取所述視頻與暫停時(shí)間點(diǎn)對(duì)應(yīng)的靜態(tài)圖像的請(qǐng)求；
[0017]接收所述視頻服務(wù)端返回的與所述暫停時(shí)間點(diǎn)對(duì)應(yīng)的靜態(tài)圖像。
[0018]可選的，如果接收到的暫停視頻的相關(guān)信息中包含的靜態(tài)圖像或者所述視頻服務(wù)端返回的靜態(tài)圖像的幀數(shù)大于1，執(zhí)行下述操作:
[0019]針對(duì)每一幀靜態(tài)圖像，通過(guò)計(jì)算圖像邊緣點(diǎn)和/或計(jì)算圖像銳度的方式，獲取所述靜態(tài)圖像的清晰度；
[0020]選擇清晰度滿(mǎn)足設(shè)定要求的一幀靜態(tài)圖像作為后續(xù)處理所采用的靜態(tài)圖像。
[0021]可選的，在執(zhí)行所述識(shí)別所述靜態(tài)圖像中的商品并獲取商品信息的步驟前，執(zhí)行下述步驟:
[0022]獲取所述靜態(tài)圖像中包含商品圖像的區(qū)域，作為商品圖像區(qū)域；
[0023]相應(yīng)的，所述識(shí)別所述靜態(tài)圖像中的商品并獲取商品信息是指，在已獲取的商品圖像區(qū)域中識(shí)別商品并獲取商品信息。
[0024]可選的，所述獲取所述靜態(tài)圖像中包含商品圖像的區(qū)域，包括:
[0025]采用圖像分割技術(shù)把所述靜態(tài)圖像劃分成若干個(gè)圖像區(qū)域；
[0026]針對(duì)每一個(gè)圖像區(qū)域，執(zhí)行下述操作:
[0027]獲取用于描述該圖像區(qū)域性質(zhì)的特征值；
[0028]判斷所述特征值是否符合預(yù)先設(shè)定的商品圖像區(qū)域的特征；若是，則判定該圖像區(qū)域?yàn)樯唐穲D像區(qū)域，該區(qū)域在所述靜態(tài)圖像中的位置即為其中包含的商品在所述靜態(tài)圖像中的位置。
[0029]可選的，所述圖像分割技術(shù)包括:基于區(qū)域的分割方法或者基于邊緣的分割方法。
[0030]可選的，所述在已獲取的商品圖像區(qū)域中識(shí)別商品并獲取商品信息，包括:
[0031]提取所述商品圖像區(qū)域中的圖像特征，作為基準(zhǔn)特征；
[0032]在預(yù)先生成的候選商品特征庫(kù)中查找與所述基準(zhǔn)特征相匹配的候選商品特征，并獲取匹配成功的候選商品特征對(duì)應(yīng)的商品索引；
[0033]根據(jù)所述向品索引，獲取該向品的相關(guān)?目息。
[0034]可選的，所述圖像特征包括以下特征中的至少一種:顏色特征、形狀特征、紋理特征、或者語(yǔ)義特征。
[0035]可選的，采用尺度不變特征轉(zhuǎn)換SIFT算法執(zhí)行所述提取所述商品圖像區(qū)域中的圖像特征的步驟。
[0036]可選的，所述在預(yù)先生成的候選商品特征庫(kù)中查找與所述基準(zhǔn)特征相匹配的候選向品特征包括:
[0037]計(jì)算所述基準(zhǔn)特征與所述候選商品特征庫(kù)中的每一個(gè)候選商品特征之間的特征值差異;
[0038]將所述特征值差異滿(mǎn)足設(shè)定要求的候選商品特征，作為與所述基準(zhǔn)特征相匹配的候選商品特征。
[0039]相應(yīng)的，本申請(qǐng)還提供一種用于識(shí)別暫停視頻圖像中的商品的裝置，包括:
[0040]視頻信息接收單元，用于接收客戶(hù)端發(fā)送的暫停視頻的相關(guān)信息；
[0041]靜態(tài)圖像獲取單元，用于根據(jù)所述暫停視頻的相關(guān)信息，獲取處于暫停狀態(tài)的客戶(hù)端視頻對(duì)應(yīng)的靜態(tài)圖像；
[0042]商品識(shí)別單元，用于識(shí)別所述靜態(tài)圖像中的商品并獲取商品信息；
[0043]識(shí)別信息返回單元，用于將識(shí)別出的商品在所述靜態(tài)圖像中的位置信息和對(duì)應(yīng)的商品信息返回給所述客戶(hù)端。
[0044]可選的，所述靜態(tài)圖像獲取單元具體用于，從接收到的暫停視頻的相關(guān)信息中提取所述靜態(tài)圖像。
[0045]可選的，所述靜態(tài)圖像獲取單元包括:
[0046]請(qǐng)求發(fā)送子單元，用于根據(jù)接收到的暫停視頻相關(guān)信息中包含的暫停時(shí)間點(diǎn)，向提供所述視頻的視頻服務(wù)端發(fā)送獲取所述視頻與暫停時(shí)間點(diǎn)對(duì)應(yīng)的靜態(tài)圖像的請(qǐng)求；
[0047]靜態(tài)圖像接收子單元，用于接收所述視頻服務(wù)端返回的與所述暫停時(shí)間點(diǎn)對(duì)應(yīng)的靜態(tài)圖像。
[0048]可選的，所述裝置還包括:
[0049]圖像數(shù)目判斷單元，用于判斷所述靜態(tài)圖像獲取單元獲取的靜態(tài)圖像的幀數(shù)是否大于1 ;
[0050]清晰度計(jì)算單元，用于當(dāng)所述圖像數(shù)目判斷單元的判斷結(jié)果為“是”時(shí)，針對(duì)每一幀靜態(tài)圖像，通過(guò)計(jì)算圖像邊緣點(diǎn)和/或計(jì)算圖像銳度的方式，獲取所述靜態(tài)圖像的清晰度；
[0051]靜態(tài)圖像選擇單元，用于根據(jù)所述清晰度計(jì)算單元的計(jì)算結(jié)果，選擇清晰度滿(mǎn)足設(shè)定要求的一幀靜態(tài)圖像作為后續(xù)處理所采用的靜態(tài)圖像。
[0052]可選的，所述裝置還包括:
[0053]商品圖像區(qū)域獲取單元，用于獲取所述靜態(tài)圖像中包含商品圖像的區(qū)域，作為商品圖像區(qū)域；
[0054]相應(yīng)的，所述商品識(shí)別單元具體用于在所述商品圖像區(qū)域獲取單元輸出的商品圖像區(qū)域中識(shí)別商品并獲取商品信息。
[0055]可選的，所述商品圖像區(qū)域獲取單元包括:
[0056]區(qū)域分割子單元，用于采用圖像分割技術(shù)把所述靜態(tài)圖像劃分成若干個(gè)圖像區(qū)域；
[0057]區(qū)域特征值提取子單元，用于針對(duì)每一個(gè)圖像區(qū)域，獲取描述該圖像區(qū)域性質(zhì)的特征值；
[0058]商品區(qū)域判斷子單元，用于針對(duì)每一個(gè)圖像區(qū)域，判斷該圖像區(qū)域的特征值是否符合預(yù)先設(shè)定的商品圖像區(qū)域的特征；若是，則判定該圖像區(qū)域?yàn)樯唐穲D像區(qū)域，該區(qū)域在所述靜態(tài)圖像中的位置即為其中包含的商品在所述靜態(tài)圖像中的位置。
[0059]可選的，所述區(qū)域分割子單元采用的圖像分割技術(shù)包括:基于區(qū)域的分割方法或者基于邊緣的分割方法。
[0060]可選的，所述商品識(shí)別單元包括:
[0061]特征提取子單元，用于提取所述商品圖像區(qū)域中的圖像特征，作為基準(zhǔn)特征；
[0062]特征匹配子單元，用于在預(yù)先生成的候選商品特征庫(kù)中查找與所述基準(zhǔn)特征相匹配的候選商品特征，并獲取匹配成功的候選商品特征對(duì)應(yīng)的商品索引；
[0063]商品信息獲取子單元，用于根據(jù)所述商品索引，獲取該商品的相關(guān)信息。
[0064]可選的，所述特征提取子單元具體用于，采用尺度不變特征轉(zhuǎn)換SIFT算法提取所述商品圖像區(qū)域中的圖像特征。
[0065]可選的，所述特征匹配子單元包括:
[0066]特征值差異計(jì)算子單元，用于計(jì)算所述基準(zhǔn)特征與所述候選商品特征庫(kù)中的每一個(gè)候選商品特征之間的特征值差異；
[0067]特征值差異判斷子單元，用于將所述特征值差異滿(mǎn)足設(shè)定要求的候選商品特征，作為與所述基準(zhǔn)特征相匹配的候選商品特征。
[0068]此外，本申請(qǐng)還提供一種用于在暫停視頻圖像上展示商品信息的方法，包括:
[0069]接收對(duì)在線(xiàn)播放視頻的暫停指令；
[0070]暫停視頻，并向服務(wù)端發(fā)送暫停視頻的相關(guān)信息；所述服務(wù)端根據(jù)該暫停視頻的相關(guān)信息，能夠獲得暫停視頻的靜態(tài)圖像；
[0071]接收所述服務(wù)端返回的商品在所述暫停視頻的靜態(tài)圖像中的位置信息和商品信息；
[0072]根據(jù)所述位置信息，在暫停視頻的所述靜態(tài)圖像的相應(yīng)位置處顯示對(duì)應(yīng)的商品信肩、Ο
[0073]可選的，所述暫停視頻的相關(guān)信息包括:所述暫停視頻對(duì)應(yīng)的靜態(tài)圖像、或者所述暫停視頻的暫停時(shí)間點(diǎn)。
[0074]可選的，所述服務(wù)端返回的商品信息中包含:商品鏈接信息，所述商品鏈接信息提供訪(fǎng)問(wèn)商品詳情頁(yè)面或者同款商品購(gòu)買(mǎi)頁(yè)面的地址信息；
[0075]相應(yīng)的，在所述暫停視頻圖像的相