專利名稱：提供增強(qiáng)現(xiàn)實(shí)服務(wù)的用戶設(shè)備和方法
技術(shù)領(lǐng)域：
下面的描述涉及ー種提供增強(qiáng)現(xiàn)實(shí)(AR)服務(wù)的用戶設(shè)備和方法，更具體地講，涉及這樣ー種提供服務(wù)的用戶設(shè)備和方法，其中用戶可基于方位角生成AR標(biāo)簽信息。
背景技術(shù)：
增強(qiáng)現(xiàn)實(shí)(AR)是虛擬現(xiàn)實(shí)技術(shù)的ー個(gè)領(lǐng)域，是指將真實(shí)世界環(huán)境的圖像與虛擬對(duì)象或虛擬信息相組合的計(jì)算機(jī)圖形技木。與提供處于虛擬空間中的虛擬對(duì)象的一般虛擬現(xiàn)實(shí)技術(shù)不同，AR技術(shù)將真實(shí)世界環(huán)境與虛擬對(duì)象或信息相組合，從而增加真實(shí)世界環(huán)境中可能難以獲得的補(bǔ)充信息。AR技術(shù)可對(duì)真實(shí)世界環(huán)境的圖像中識(shí)別出的對(duì)象應(yīng)用過(guò)濾器，以過(guò)濾用戶從真實(shí)環(huán)境中找到的目標(biāo)虛擬對(duì)象或虛擬信息。然而，通過(guò)傳統(tǒng)AR服務(wù)提供的信息可能有限。通常，傳統(tǒng)AR服務(wù)可通過(guò)AR技術(shù)利用對(duì)象的全球定位系統(tǒng)(GPQ信息提供基本信息。即，即使對(duì)對(duì)象進(jìn)行注視的用戶的位置改變，傳統(tǒng)AR服務(wù)也可能提供相同的信息。

發(fā)明內(nèi)容
本發(fā)明的示例性實(shí)施方式提供了ー種提供增強(qiáng)現(xiàn)實(shí)(AR)服務(wù)的用戶設(shè)備和方法，其中可基于用戶觀看對(duì)象的方位角來(lái)生成AR標(biāo)簽。本發(fā)明的附加特征將在下面的描述中闡述，并且部分地將通過(guò)該描述而變得明顯，或者可通過(guò)本發(fā)明的實(shí)踐而了解。本發(fā)明的示例性實(shí)施方式提供了ー種提供AR服務(wù)的用戶設(shè)備，所述用戶設(shè)備包括拍攝單元，其捕捉目標(biāo)對(duì)象的圖像；信息收集單元，其收集捕捉的目標(biāo)對(duì)象的圖像的背景(contextual)信息，所述背景信息包括拍攝單元的位置信息以及目標(biāo)對(duì)象和拍攝單元之間的第一方位角信息；標(biāo)簽生成単元，其生成第一方向的AR標(biāo)簽，所述AR標(biāo)簽與所述背景信息對(duì)應(yīng)；顯示單元，其顯示捕捉的目標(biāo)對(duì)象的圖像和所述AR標(biāo)簽。本發(fā)明的示例性實(shí)施方式提供了ー種提供AR服務(wù)的用戶設(shè)備，所述用戶設(shè)備包括拍攝單元，其捕捉目標(biāo)對(duì)象的圖像；信息收集單元，其收集捕捉的目標(biāo)對(duì)象的圖像的背景信息，所述背景信息包括拍攝單元的位置信息和目標(biāo)對(duì)象的圖像數(shù)據(jù)；通信単元，其將收集的背景信息發(fā)送至AR管理服務(wù)器，并從AR管理服務(wù)器接收目標(biāo)對(duì)象的AR信息，其中所述AR管理服務(wù)器基于捕捉的圖像的方位角信息存儲(chǔ)目標(biāo)對(duì)象的AR信息；標(biāo)簽生成単元，其使用與目標(biāo)對(duì)象和拍攝單元之間的第一方位角對(duì)應(yīng)的AR信息生成AR標(biāo)簽；顯示單元，其顯示捕捉的目標(biāo)對(duì)象的圖像和生成的AR標(biāo)簽。本發(fā)明的示例性實(shí)施方式提供了ー種提供AR服務(wù)的方法，所述方法包括用相機(jī)捕捉目標(biāo)對(duì)象的圖像；收集背景信息，所述背景信息包括捕捉的目標(biāo)對(duì)象的圖像的位置信息以及目標(biāo)對(duì)象和相機(jī)之間的第一方位角信息；生成與所述背景信息對(duì)應(yīng)的AR標(biāo)簽；顯示捕捉的目標(biāo)對(duì)象的圖像和生成的AR標(biāo)簽。本發(fā)明的示例性實(shí)施方式提供了ー種提供AR服務(wù)的方法，所述方法包括捕捉目標(biāo)對(duì)象的圖像；收集背景信息，所述背景信息包括從終端捕捉目標(biāo)對(duì)象的相機(jī)的位置信息和來(lái)自所述圖像的目標(biāo)對(duì)象的圖像數(shù)據(jù)；將收集的背景信息發(fā)送至AR管理服務(wù)器，其中所述AR管理服務(wù)器存儲(chǔ)目標(biāo)對(duì)象的針對(duì)第一方位角的AR信息；從AR管理服務(wù)器接收目標(biāo)對(duì)象的AR信息；利用與目標(biāo)對(duì)象和相機(jī)之間的第一方位角對(duì)應(yīng)的AR信息生成AR標(biāo)簽；顯示捕捉的目標(biāo)對(duì)象的圖像和所述AR標(biāo)簽。應(yīng)該理解，前面的一般描述和下面的詳細(xì)描述均是示例性和說(shuō)明性的，意在提供對(duì)要求權(quán)利的發(fā)明的進(jìn)ー步說(shuō)明。其他特征和方面將根據(jù)下面的詳細(xì)描述、附圖和權(quán)利要求而明顯。


附圖用于提供對(duì)本發(fā)明的進(jìn)ー步理解，并且并入且構(gòu)成本說(shuō)明書的一部分，這些附圖示出本發(fā)明的實(shí)施方式，與具體實(shí)施方式
一起用于說(shuō)明本發(fā)明的原理。圖1是示出了根據(jù)本發(fā)明示例性實(shí)施方式的提供增強(qiáng)現(xiàn)實(shí)(AR)服務(wù)的第一用戶設(shè)備的框圖。圖2是示出了根據(jù)本發(fā)明示例性實(shí)施方式的提供AR服務(wù)的第二用戶設(shè)備的框圖。圖3是示出了根據(jù)本發(fā)明示例性實(shí)施方式的第二信息收集單元和第二信息分析単元的框圖。圖4A、圖4B和圖4C是示出了根據(jù)本發(fā)明示例性實(shí)施方式的第二顯示單元上所顯示的AR標(biāo)簽的視圖。圖5是示出了根據(jù)本發(fā)明示例性實(shí)施方式的通過(guò)觸摸AR標(biāo)簽來(lái)顯示AR信息的方法的視圖。圖6是示出了根據(jù)本發(fā)明示例性實(shí)施方式的通過(guò)移動(dòng)第二用戶設(shè)備來(lái)顯示AR標(biāo)簽的AR信息的方法的視圖。圖7是根據(jù)本發(fā)明示例性實(shí)施方式的AR管理服務(wù)器的框圖。圖8是根據(jù)本發(fā)明示例性實(shí)施方式的提供AR服務(wù)的第三用戶設(shè)備的框圖。圖9是根據(jù)本發(fā)明示例性實(shí)施方式的提供AR服務(wù)的第四用戶設(shè)備的框圖。圖10是示出了根據(jù)本發(fā)明示例性實(shí)施方式的在用戶設(shè)備中提供AR服務(wù)的方法的流程圖。圖11是根據(jù)本發(fā)明示例性實(shí)施方式的在用戶設(shè)備中提供AR服務(wù)的方法的流程圖。
具體實(shí)施例方式以下將參照附圖更充分地描述本發(fā)明，附圖中示出了本發(fā)明的實(shí)施方式。然而，本發(fā)明可以許多不同的形式實(shí)施，而不應(yīng)解釋為限于本文所闡述的實(shí)施方式。相反，提供這些實(shí)施方式是為了使本公開全面，并且向本領(lǐng)域技術(shù)人員充分傳達(dá)本發(fā)明的范圍。應(yīng)該理解，
出于本公開的目的，“......中的至少ー個(gè)”將被解釋為表示相應(yīng)語(yǔ)言所列舉要素的任何組
合，包括多個(gè)所列舉要素的組合。例如，“X、Y和Z中的至少ー個(gè)”將被解釋為表示僅X，僅 Y，僅Z，或者兩個(gè)或更多個(gè)項(xiàng)X、Y和Z的任何組合H^^n，XYZ、)(Z、YZ)。貫穿附圖和具體實(shí)施方式
，除非另外說(shuō)明，否則相同附圖標(biāo)號(hào)將被理解為指代相同的元件、特征和結(jié)構(gòu)。為了清晰、說(shuō)明和方便起見(jiàn)，這些元件的相對(duì)尺寸和描繪可能被夸大。另外，應(yīng)該理解，如果一個(gè)元件被描述為“連接至”另一元件，則它可直接連接至另一元件，或者可存在介于其間的元件。相反，如果一個(gè)元件被描述為“直接連接至”另一元件，則不存在介于其間的元件。圖1是示出了根據(jù)本發(fā)明示例性實(shí)施方式的提供增強(qiáng)現(xiàn)實(shí)(AR)服務(wù)的第一用戶設(shè)備100的框圖。參照?qǐng)D1，第一用戶設(shè)備100可為便攜式裝置，例如智能電話、蜂窩電話、膝上型計(jì)算機(jī)、平板計(jì)算機(jī)等。如圖1所示，第一設(shè)備100包括第一拍攝單元110、第一信息收集單元120、第一標(biāo)簽生成單元130和第一顯示單元140。第一拍攝單元110可拍攝或捕捉目標(biāo)對(duì)象的圖像，并且可以是(例如)嵌入式相機(jī)或外部相機(jī)。獲得的圖像可被第一拍攝單元110或單獨(dú)的圖像處理器處理成可顯示信號(hào)。第一信息收集單元120可收集背景信息，背景信息包括關(guān)于第一用戶設(shè)備100的當(dāng)前位置的信息、由第一拍攝單元110拍攝或捕捉的目標(biāo)對(duì)象的位置信息、第一拍攝單元110當(dāng)前觀察的方向信息、以及第一用戶設(shè)備100與目標(biāo)對(duì)象之間的方位角信息。另外，所述位置信息、方向信息、方位角信息等可從與捕捉的圖像關(guān)聯(lián)的數(shù)據(jù)、用戶設(shè)備或其它源收集。方位角信息可包括第一用戶設(shè)備100與目標(biāo)對(duì)象之間的方位角的數(shù)值。在一個(gè)例子中，方位角可指從水平面向上測(cè)量的角度。即，方位角信息可包括相對(duì)于水平面測(cè)量的、從用戶設(shè)備100上的參考點(diǎn)到目標(biāo)對(duì)象的角度。用戶設(shè)備100上的參考點(diǎn)可被定義為上點(diǎn)、上邊緣或上表面，或者下點(diǎn)、下邊緣或下表面，或者可根據(jù)拍攝單元Iio的聚焦鏡頭(focuslens)定義。第一標(biāo)簽生成單元130可生成與第一信息收集單元120所收集到的背景信息對(duì)應(yīng)的AR標(biāo)簽。如上所述，背景信息可包括位置信息、方向信息和方位角信息。AR標(biāo)簽可以窗口的形式或形狀來(lái)生成，以顯示目標(biāo)對(duì)象的AR信息。因此，AR標(biāo)簽可基于拍攝或捕捉目標(biāo)對(duì)象所使用的方位角來(lái)生成。可針對(duì)一個(gè)或更多個(gè)背景信息將目標(biāo)對(duì)象的AR信息存儲(chǔ)在第一用戶設(shè)備100中或AR管理服務(wù)器(未示出)中。第一顯示單元140可顯示生成的AR標(biāo)簽，所述AR標(biāo)簽可疊置在目標(biāo)對(duì)象上。圖2是示出了根據(jù)本發(fā)明示例性實(shí)施方式的提供AR服務(wù)的第二用戶設(shè)備200的框圖。圖3是示出了根據(jù)本發(fā)明示例性實(shí)施方式的第二信息收集單元和第二信息分析單元的詳細(xì)框圖。如圖2所示，第二用戶設(shè)備200包括第二用戶接口(UI)單元210、第二存儲(chǔ)單元220、第二拍攝單元230、第二圖像處理單元M0、第二信息收集單元250、第二信息分析單元沈0、第二通信處理單元270、第二通信單元275、第二標(biāo)簽生成單元280和第二控制單元290。第二 UI單元210可為用戶提供與用戶設(shè)備200交互的能力，并可包括第二用戶輸入單元211和第二顯示單元213。第二用戶輸入單元211可以是接收用戶命令輸入的操縱面板，并且可包括各種接口。例如，接口可包括用于拍攝或捕捉目標(biāo)對(duì)象的按鈕、方向鍵、觸摸面板等。具體地講，用戶可通過(guò)操縱第二用戶輸入單元211來(lái)請(qǐng)求顯示基于方位角的AR標(biāo)簽。另外，如果用戶觸摸顯示在第二顯示單元213上的AR標(biāo)簽，則第二用戶輸入單元211可感測(cè)用戶的觸摸方向。更具體地講，如果用戶觸摸顯示在第二顯示單元213上的具有多面的AR標(biāo)簽，并拖曳AR標(biāo)簽旋轉(zhuǎn)，以查看AR標(biāo)簽的不同面，則第二用戶輸入單元211可感測(cè)所述觸摸和拖曳動(dòng)作。如果從第二拍攝單元230輸入的圖像被處理成信號(hào)，則第二顯示單元213可顯示經(jīng)處理的圖像。如果用戶設(shè)備200提供了基于觸摸的輸入方法，則第二顯示單元213可顯示觸摸面板的UI。第二存儲(chǔ)單元220可存儲(chǔ)用于實(shí)現(xiàn)用戶設(shè)備200的操作的程序、各種數(shù)據(jù)和信息等。另外，第二存儲(chǔ)單元220可存儲(chǔ)映射到目標(biāo)對(duì)象的背景信息的目標(biāo)對(duì)象的AR信息。第二拍攝單元230可拍攝或捕捉目標(biāo)對(duì)象的圖像，以獲得圖像數(shù)據(jù)。在一個(gè)例子中，第二拍攝單元230包括嵌入式相機(jī)或外部相機(jī)。第二圖像處理單元240可分析由第二拍攝單元230獲得的圖像，并可利用分析結(jié)果將該圖像處理成可顯示信號(hào)。在一個(gè)例子中，第二圖像處理單元240可以是圖像處理器。第二信息收集單元250可收集背景信息，背景信息包括與用戶設(shè)備200的位置、傾斜位置和方位角有關(guān)的信息，并可從與捕捉的圖像關(guān)聯(lián)的數(shù)據(jù)、用戶設(shè)備或其它源收集。參照?qǐng)D3，第二信息收集單元250可包括位置信息收集單元251、方位角信息收集單元253和傾斜信息收集單元255。位置信息收集單元251可收集關(guān)于用戶設(shè)備200的當(dāng)前位置的位置信息以及有關(guān)于朝著第二拍攝單元230當(dāng)前所觀察的目標(biāo)對(duì)象的方向的方向信息。另外，位置信息收集單元251還可收集目標(biāo)對(duì)象的位置信息。在一個(gè)例子中，位置信息收集單元251可利用全球定位系統(tǒng)(GPS)、基于位置的服務(wù)(LBS)等感測(cè)并收集當(dāng)前位置。此外，位置信息收集單元251還可利用數(shù)字羅盤感測(cè)并收集方向。位置信息收集單元251所收集的位置信息和方向信息可提供給位置分析單元261。方位角信息收集單元253可收集有關(guān)于用戶設(shè)備200與目標(biāo)對(duì)象之間的方位角的方位角信息。方位角信息收集單元253所收集的方位角信息可提供給方位角分析單元沈3。傾斜信息收集單元255可收集有關(guān)于用戶設(shè)備200的傾斜的傾斜信息。傾斜信息可以是有關(guān)于用戶設(shè)備200的傾斜位置的信息。在用戶設(shè)備200拍攝或捕捉目標(biāo)對(duì)象之前，用戶設(shè)備200常常可能由于用戶的操縱而向各種方向傾斜。在一個(gè)例子中，傾斜信息收集單元255可利用(例如)包括三軸陀螺儀傳感器和三軸(x，y，z)加速度傳感器的六軸運(yùn)動(dòng)傳感器來(lái)感測(cè)并收集傾斜信息。傾斜信息收集單元255所收集的傾斜信息可提供給傾斜分析單元沈5。收集傾斜信息可以是可選的。第二信息分析單元260可分析第二信息收集單元250利用可處理信號(hào)所收集的信息。參照?qǐng)D3，第二信息分析單元260可包括位置分析單元沈1、方位角分析單元263和傾斜分析單元265。位置分析單元261可分析位置信息收集單元251利用可處理信號(hào)所收集的位置信息和方向信息。方位角分析單元263可分析方位角信息收集單元253利用可處理信號(hào)所收集的方位角信息。傾斜分析單元265可分析傾斜信息收集單元255利用可處理信號(hào)所收集的傾斜信息。
返回參照?qǐng)D2，第二通信處理單元270可通過(guò)第二控制單元290將目標(biāo)對(duì)象的經(jīng)分析的背景信息和圖像數(shù)據(jù)轉(zhuǎn)換為基于傳輸協(xié)議的數(shù)據(jù)。第二通信單元275可經(jīng)由通信網(wǎng)絡(luò)10將從第二通信處理單元270輸入的數(shù)據(jù)發(fā)送至AR管理服務(wù)器700。另外，第二通信單元275可從AR管理服務(wù)器700接收與背景信息對(duì)應(yīng)的AR信息。AR管理服務(wù)器700可存儲(chǔ)與不同的背景信息對(duì)應(yīng)的AR信息。AR管理服務(wù)器700將在下面參照?qǐng)D7進(jìn)行描述。第二通信處理單元270可將接收的AR信息轉(zhuǎn)換為第二用戶設(shè)備200中可用的數(shù)據(jù)。第二標(biāo)簽生成單元280可生成與第二信息收集單元250所收集的背景信息對(duì)應(yīng)的AR標(biāo)簽。更具體地講，利用經(jīng)第二通信處理單元270轉(zhuǎn)換的AR信息來(lái)生成AR標(biāo)簽。AR標(biāo)簽可以窗口的形式生成，以顯示目標(biāo)對(duì)象的AR信息。第二標(biāo)簽生成單元280可生成AR標(biāo)簽以顯示目標(biāo)對(duì)象的AR信息和背景信息。另外，第二標(biāo)簽生成單元280可生成具有與目標(biāo)對(duì)象的輪廓相應(yīng)的一個(gè)或更多個(gè)面的AR標(biāo)簽。基于目標(biāo)對(duì)象與第二拍攝單元230之間的方位角的AR信息可顯示在AR標(biāo)簽的一個(gè)或更多個(gè)面上。例如，如果目標(biāo)對(duì)象為建筑，則第二標(biāo)簽生成單元280可生成三維立體的立方體的AR標(biāo)簽，如果目標(biāo)對(duì)象是球體，則第二標(biāo)簽生成單元280可生成球形AR標(biāo)簽。第二顯示單元213可顯示第二標(biāo)簽生成單元280所生成的AR標(biāo)簽。第二控制單元290可控制第二用戶設(shè)備200的操作。具體地講，通過(guò)將對(duì)象的經(jīng)分析的背景信息和圖像數(shù)據(jù)發(fā)送至AR管理服務(wù)器700，第二控制單元290可請(qǐng)求AR管理服務(wù)器700提供目標(biāo)對(duì)象的與背景信息對(duì)應(yīng)的AR信息。在第二控制單元290請(qǐng)求AR管理服務(wù)器700提供AR信息之前，第二控制單元290可檢查第二存儲(chǔ)單元220中是否存儲(chǔ)有與背景信息對(duì)應(yīng)的AR信息。如果第二存儲(chǔ)單元220中存儲(chǔ)有與背景信息對(duì)應(yīng)的AR信息，則第二控制單元290可控制第二標(biāo)簽生成單元280利用存儲(chǔ)在第二存儲(chǔ)單元220中的AR信息生成AR標(biāo)簽。如果第二存儲(chǔ)單元220中沒(méi)有存儲(chǔ)與背景信息對(duì)應(yīng)的AR信息，則第二控制單元四0可請(qǐng)求AR管理服務(wù)器700發(fā)送AR信息。圖4A、圖4B和圖4C是示出了根據(jù)本發(fā)明示例性實(shí)施方式的第二顯示單元上所顯示的AR標(biāo)簽的視圖。參照?qǐng)D4A，如果用戶利用用戶設(shè)備200的第二拍攝單元230拍攝或捕捉目標(biāo)對(duì)象“南大門(Namdaemim) ”，則第二顯示單元213可顯示目標(biāo)對(duì)象“南大門”。如果用戶設(shè)備200接收到在當(dāng)前位置顯示“南大門”的AR標(biāo)簽的用戶請(qǐng)求，則第二信息收集單元250可收集背景信息，包括關(guān)于當(dāng)前位置的位置信息、方向信息、方位角信息和傾斜信息。第二信息分析單元260可分析收集的背景信息，并且第二標(biāo)簽生成單元280可利用與該背景信息對(duì)應(yīng)的AR信息生成AR標(biāo)簽213a。與該背景信息對(duì)應(yīng)的AR信息可存儲(chǔ)在第二存儲(chǔ)單元220中，或者可由AR管理服務(wù)器700提供。如果在用戶移動(dòng)到用戶參觀“南大門”后門的位置之后，用戶請(qǐng)求顯示AR標(biāo)簽，則第二標(biāo)簽生成單元280可利用與移動(dòng)后的位置的背景信息對(duì)應(yīng)的AR信息生成AR標(biāo)簽21北。即，可生成并顯示相同目標(biāo)對(duì)象的基于不同方位角的不同AR標(biāo)簽。
參照?qǐng)D4B，由于目標(biāo)對(duì)象“南大門”為建筑，所以第二標(biāo)簽生成單元280還可生成具有六個(gè)面的立方體AR標(biāo)簽213c。在AR標(biāo)簽213c的每一面上可顯示相同或不同的AR信息。如果顯示不同的AR信息，則第二用戶設(shè)備200可從AR管理服務(wù)器700接收與一個(gè)或更多個(gè)方位角對(duì)應(yīng)的AR信息。因此，用戶可利用AR標(biāo)簽213c檢查在不同方位角處生成的目標(biāo)對(duì)象的AR信息。參照?qǐng)D4C，第二標(biāo)簽生成單元280可在用戶的當(dāng)前位置處生成與目標(biāo)對(duì)象的右面對(duì)應(yīng)的AR標(biāo)簽214d。更具體地講，由于在用戶的當(dāng)前位置沒(méi)有顯示或者部分顯示了目標(biāo)對(duì)象的右面，所以可成一角度顯示AR標(biāo)簽214d。在一個(gè)例子中，用戶可設(shè)定或預(yù)設(shè)用戶可見(jiàn)的方位角范圍，并且第二標(biāo)簽生成單元280可生成與設(shè)定范圍內(nèi)的方位角對(duì)應(yīng)的AR標(biāo)簽。在圖4C中，由于用戶可將方位角設(shè)定為(例如)360°，所以可顯示與目標(biāo)對(duì)象的右面對(duì)應(yīng)的AR標(biāo)簽214d。圖5是示出了根據(jù)本發(fā)明示例性實(shí)施方式的通過(guò)觸摸AR標(biāo)簽顯示AR信息的方法的視圖。參照?qǐng)D5，第二標(biāo)簽生成單元280可生成具有多個(gè)面的立方體形狀的立體AR標(biāo)簽500。第二標(biāo)簽生成單元280可根據(jù)朝著目標(biāo)對(duì)象的方位角在AR標(biāo)簽500的一個(gè)或更多個(gè)面上顯示不同的AR信息。與第二用戶設(shè)備200的當(dāng)前位置與目標(biāo)對(duì)象之間的方位角對(duì)應(yīng)的AR信息可顯示在AR標(biāo)簽500的第一面510上。顯示的AR標(biāo)簽500可被顯示，并且還可向各種方向旋轉(zhuǎn)，包括向上、向下、向左和向右方向。例如，如果用戶觸摸第二面520，或者觸摸顯示的AR標(biāo)簽500并使其向左旋轉(zhuǎn)，則第二用戶輸入單元211可分別感測(cè)被觸摸的面520和/或用戶的觸摸方向。通過(guò)使AR標(biāo)簽500旋轉(zhuǎn)至通過(guò)觸摸選擇的面，和/或根據(jù)用戶輸入的觸摸方向旋轉(zhuǎn)AR標(biāo)簽500，第二標(biāo)簽生成單元280可使與目標(biāo)對(duì)象的第二方位角對(duì)應(yīng)的AR信息能夠顯示在正面方向上。在一個(gè)例子中，AR標(biāo)簽500可如圖5所示根據(jù)感測(cè)的觸摸面520旋轉(zhuǎn)，和/或通過(guò)觸摸并拖曳AR標(biāo)簽500來(lái)使AR標(biāo)簽500沿觸摸方向旋轉(zhuǎn)，使得用戶可看到面520作為正圖。另外，如果用戶請(qǐng)求子視圖，則第二標(biāo)簽生成單元280可生成子視圖，并可允許利用該子視圖的、指示當(dāng)前顯示的AR信息的方位角和/或方向信息的羅盤箭頭，來(lái)檢查AR標(biāo)簽500的當(dāng)前顯示的AR信息的方位角和/或方向。即，子視圖的羅盤箭頭可表示方位角和/或方向。
圖6是示出了根據(jù)本發(fā)明示例性實(shí)施方式的通過(guò)移動(dòng)第二用戶設(shè)備200來(lái)顯示AR標(biāo)簽的AR信息的方法的視圖。參照?qǐng)D6，第二標(biāo)簽生成單元280可將目標(biāo)對(duì)象的AR標(biāo)簽生成為具有多個(gè)面的立方體AR標(biāo)簽600。如果AR標(biāo)簽600的移動(dòng)是困難的或者不方便的，并且拍攝或捕捉目標(biāo)對(duì)象的第二用戶設(shè)備200向任意方向旋轉(zhuǎn)，則第二標(biāo)簽生成單元280可生成與這樣的方位角對(duì)應(yīng)的AR標(biāo)簽，該方位角朝著在相對(duì)于目標(biāo)對(duì)象旋轉(zhuǎn)后的方向上看到的目標(biāo)對(duì)象。例如，在AR標(biāo)簽600的第一面顯示在正面之后，如果第二用戶設(shè)備200向右旋轉(zhuǎn)，或者用戶將其身體向右旋轉(zhuǎn)，則第二標(biāo)簽生成單元280可使與AR標(biāo)簽600的右面610 (或第二面)對(duì)應(yīng)的AR信息顯示在正面。因此，第二標(biāo)簽生成單元280可通過(guò)直接使AR標(biāo)簽600向上、向下、向左和向右旋轉(zhuǎn)來(lái)提供用戶所尋找的目標(biāo)視圖。圖7是根據(jù)本發(fā)明示例性實(shí)施方式的AR管理服務(wù)器700的框圖。參照?qǐng)D7，AR管理服務(wù)器700可存儲(chǔ)并管理由一個(gè)或更多個(gè)用戶設(shè)備生成的AR標(biāo)簽信息以及背景信息。參照?qǐng)D7，AR管理服務(wù)器700可包括數(shù)據(jù)庫(kù)(DB) 710、服務(wù)器通信單元720、發(fā)送/接收處理單元730、信息處理單元740和服務(wù)器控制單元750。DB 710可存儲(chǔ)并管理目標(biāo)對(duì)象的映射到一個(gè)或更多個(gè)背景信息的AR信息。因此，可針對(duì)通過(guò)拍攝或捕捉目標(biāo)對(duì)象收集的一個(gè)或更多個(gè)背景信息存儲(chǔ)并管理相同目標(biāo)對(duì)象的AR信息。如上所述，背景信息可包括有關(guān)于拍攝或捕捉目標(biāo)對(duì)象所使用的位置和方向的信息、以及目標(biāo)對(duì)象的位置信息、方位角信息和傾斜信息。在一個(gè)例子中，在DB 710中所存儲(chǔ)的背景信息中，方位角信息可存儲(chǔ)作為參考范圍。例如，如果存儲(chǔ)的AR信息是與方位角200°對(duì)應(yīng)的信息，則200° 士 α ( α為誤差)可存儲(chǔ)在DB 710中作為與AR信息對(duì)應(yīng)的方位角信息。方位角范圍可由用戶或操作者手動(dòng)設(shè)定，或者可由服務(wù)器控制單元750自動(dòng)設(shè)定。存儲(chǔ)在DB 710中的AR信息可由一個(gè)或更多個(gè)用戶設(shè)備共享。服務(wù)器通信單元720可經(jīng)由通信網(wǎng)絡(luò)與包括第二用戶設(shè)備200在內(nèi)的一個(gè)或更多個(gè)用戶設(shè)備通信。下文中，將以第二用戶設(shè)備200為例進(jìn)行描述。服務(wù)器通信單元720可從第二用戶設(shè)備200接收請(qǐng)求提供AR信息的信號(hào)并可接收背景信息。服務(wù)器通信單元720還可接收目標(biāo)對(duì)象的圖像數(shù)據(jù)。發(fā)送/接收處理單元730可確定接收的AR信息和接收的背景信息是否可用。更具體地講，發(fā)送/接收處理單元730可確定在接收AR信息和背景信息時(shí)是否發(fā)生錯(cuò)誤，或者接收的AR信息和背景信息是否包含不當(dāng)信息。如果AR信息和背景信息可用，則發(fā)送/接收處理單元730可將該信號(hào)和背景信息提供給信息處理單元740。信息處理單元740可在DB 710中搜索與背景信息中的位置信息對(duì)應(yīng)的AR信息。信息處理單元740可包括搜索信息生成單元741和信息搜索單元743。搜索信息生成單元741可對(duì)DB 710設(shè)定查詢用搜索信息?？删完P(guān)于DB 710中是否存儲(chǔ)有與接收的背景信息中的位置信息對(duì)應(yīng)的AR信息的搜索使用搜索信息。搜索信息生成單元741可通過(guò)處理從發(fā)送/接收處理單元730輸入的背景信息來(lái)設(shè)定搜索信息，并可生成標(biāo)題(header)類型的搜索信息。在一個(gè)例子中，搜索信息可以是第二用戶設(shè)備200的位置信息。信息搜索單元743可利用搜索信息搜索DB 710，并可提取與位置信息對(duì)應(yīng)的AR信肩、ο服務(wù)器控制單元750可檢查與背景信息的方位角信息對(duì)應(yīng)的AR信息。服務(wù)器控制單元750可控制發(fā)送/接收處理單元730和服務(wù)器通信單元720將與方位角信息對(duì)應(yīng)的AR信息提供給第二用戶設(shè)備200。如果與提取的AR信息對(duì)應(yīng)的方位角信息被存儲(chǔ)為方位角范圍，則服務(wù)器控制單元750可提供與最接近背景信息的方位角信息的方位角范圍對(duì)應(yīng)的AR信息。另外，服務(wù)器控制單元750可利用與方位角信息對(duì)應(yīng)的AR信息來(lái)配置AR標(biāo)簽，并可將AR標(biāo)簽配置數(shù)據(jù)提供給第二用戶設(shè)備200。如果從第二用戶設(shè)備200接收到方位角信息之外的背景信息，則服務(wù)器控制單元750可配置基本AR標(biāo)簽，并可將AR標(biāo)簽配置數(shù)據(jù)提供給第二用戶設(shè)備200。發(fā)送/接收處理單元730可將與方位角信息對(duì)應(yīng)的AR信息轉(zhuǎn)換為遵循傳輸協(xié)議的數(shù)據(jù)。服務(wù)器通信單元720可將轉(zhuǎn)換后的AR信息發(fā)送至第二用戶設(shè)備200。在第二用戶設(shè)備200接收到AR信息之后，第二用戶設(shè)備200可處理拍攝或捕捉到的目標(biāo)對(duì)象的AR信息以生成AR標(biāo)簽，并可將該AR標(biāo)簽顯示在第二顯示單元213上。圖8是根據(jù)本發(fā)明示例性實(shí)施方式的提供AR服務(wù)的第三用戶設(shè)備800的框圖。參照?qǐng)D8，第三用戶設(shè)備800可包括第三拍攝單元810、第三信息收集單元820、第三標(biāo)簽生成單元830、第三通信單元840和第三顯示單元850。圖8的第三拍攝單元810、第三信息收集單元820、第三標(biāo)簽生成單元830和第三顯示單元850分別類似于圖1的第一拍攝單元110、第一信息收集單元120、第一標(biāo)簽生成單元130和第一顯示單元140，因此本文將省略其詳細(xì)描述。第三通信單元840可通過(guò)向AR管理服務(wù)器700 (圖8中未示出)發(fā)送包括位置信息、方向信息和方位角信息的背景信息，來(lái)請(qǐng)求AR管理服務(wù)器700提供目標(biāo)對(duì)象的AR信息。更具體地講，背景信息可包括由第三信息收集單元820收集的第三用戶設(shè)備800的當(dāng)前位置、由第三拍攝單元810拍攝或捕捉的目標(biāo)對(duì)象的位置信息、關(guān)于朝著第三拍攝單元810所觀察的目標(biāo)對(duì)象的方向的方向信息、以及第三用戶設(shè)備800與目標(biāo)對(duì)象之間的方位角信息。另外，第三通信單元840可從AR管理服務(wù)器700接收目標(biāo)對(duì)象的AR信息。AR管理服務(wù)器700可存儲(chǔ)目標(biāo)對(duì)象的基于方位角的AR信息。因此，AR管理服務(wù)器700可將存儲(chǔ)的目標(biāo)對(duì)象的AR信息中的部分或全部發(fā)送至第三用戶設(shè)備800。第三標(biāo)簽生成單元830可利用接收的目標(biāo)對(duì)象的AR信息中的、與目標(biāo)對(duì)象和第三拍攝單元810之間的方位角信息對(duì)應(yīng)的AR信息來(lái)生成AR標(biāo)簽。圖9是根據(jù)本發(fā)明示例性實(shí)施方式的提供AR服務(wù)的第四用戶設(shè)備900的框圖。參照?qǐng)D9，第四用戶設(shè)備900可包括第四UI單元910、第四存儲(chǔ)單元920、第四拍攝單元930、第四圖像處理單元940、第四信息收集單元950、第四信息分析單元960、第四通信處理單元970、第四通信單元975、第四標(biāo)簽生成單元980和第四控制單元990。圖9的第四存儲(chǔ)單元920、第四拍攝單元930和第四圖像處理單元940的操作與圖2的第二存儲(chǔ)單元220、第二拍攝單元230和第二圖像處理單元240的操作基本相似。因此本文將省略其詳細(xì)描述。第四UI單元910可提供用戶與用戶設(shè)備900之間的交互，以接收用戶輸入并顯示對(duì)接收的用戶輸入的響應(yīng)。此外，第四UI單元910可包括第四用戶輸入單元911和第四顯示單元913。第四存儲(chǔ)單元920可存儲(chǔ)用于實(shí)現(xiàn)用戶設(shè)備900的操作的程序、各種數(shù)據(jù)和信息寸。第四拍攝單元930可拍攝或捕捉目標(biāo)對(duì)象的圖像，以獲得目標(biāo)對(duì)象的圖像數(shù)據(jù)，并可以是(例如)嵌入式相機(jī)或外部相機(jī)。第四圖像處理單元940可分析從第四拍攝單元930獲得的圖像，并可利用分析結(jié)果將圖像處理成可顯示信號(hào)。第四信息收集單元950可收集背景信息，背景信息包括與用戶設(shè)備900的位置、傾斜位置和方位角相關(guān)的信息。在一個(gè)例子中，如果從用戶接收到基于方位角顯示AR標(biāo)簽的請(qǐng)求，則第四信息收集單元950可收集方位角信息。第四信息分析單元960可類似于圖2和圖3中的第二信息分析單元沈0，分析第四信息收集單元950利用可處理信號(hào)所收集的信息。因此，本文將省略其進(jìn)一步的說(shuō)明。通過(guò)第四控制單元990的控制，第四通信處理單元970可將目標(biāo)對(duì)象的位置信息、方向信息和圖像數(shù)據(jù)轉(zhuǎn)換為基于傳輸協(xié)議的數(shù)據(jù)。 第四通信單元975可經(jīng)由通信網(wǎng)絡(luò)(圖9中未示出)將從第四通信處理單元970輸入的數(shù)據(jù)發(fā)送至AR管理服務(wù)器(圖9中未示出)。另外，第四通信單元975可從AR管理服務(wù)器接收目標(biāo)對(duì)象的至少一個(gè)AR信息。AR管理服務(wù)器可存儲(chǔ)與一個(gè)或更多個(gè)背景信息對(duì)應(yīng)的目標(biāo)對(duì)象AR信息。更具體地講，AR管理服務(wù)器可存儲(chǔ)與不同方位角對(duì)應(yīng)的AR信肩、ο 第四通信處理單元970可將接收的AR信息轉(zhuǎn)換為第四用戶設(shè)備900可用的數(shù)據(jù)。第四標(biāo)簽生成單元980可利用經(jīng)第四通信處理單元970轉(zhuǎn)換的AR信息，生成與第四信息收集單元950所收集的背景信息對(duì)應(yīng)的AR標(biāo)簽。如果用戶請(qǐng)求基于方位角顯示AR標(biāo)簽，則第四標(biāo)簽生成單元980可利用與第四信息收集單元950所收集的方位角對(duì)應(yīng)的AR信息生成AR標(biāo)簽。生成的AR標(biāo)簽可顯示在參照?qǐng)D4A、圖4B、圖4C、圖5和圖6描述的UI圖像中。第四顯示單元913可顯示由第四標(biāo)簽生成單元980生成的AR標(biāo)簽。第四控制單元990可控制第四用戶設(shè)備900的整個(gè)操作。具體地講，通過(guò)將包括目標(biāo)對(duì)象的位置信息、方向信息和圖像數(shù)據(jù)的各種信息發(fā)送至AR管理服務(wù)器，第四控制單元990可請(qǐng)求AR管理服務(wù)器提供目標(biāo)對(duì)象的AR信息。如果從用戶接收到基于方位角顯示AR信息的請(qǐng)求，則第四控制單元990可控制第四信息收集單元950收集方位角信息。如果收集了方位角信息，則在從AR管理服務(wù)器接收的一個(gè)或更多個(gè)AR信息中，第四控制單元990可提取與第四信息收集單元950所收集的方位角對(duì)應(yīng)的AR信息，并可將該AR信息提供給第四標(biāo)簽生成單元980。圖10是示出了根據(jù)本發(fā)明示例性實(shí)施方式的在用戶設(shè)備中提供AR服務(wù)的方法的流程圖。圖10方法的一個(gè)或更多個(gè)操作可由圖1的第一用戶設(shè)備100或圖2的第二用戶設(shè)備200的控制單元或處理器執(zhí)行，但不限于此。在操作1010，用戶可利用相機(jī)拍攝或捕捉目標(biāo)對(duì)象的圖像，以獲得目標(biāo)對(duì)象的圖
像數(shù)據(jù)。在操作1020，用戶設(shè)備可收集與目標(biāo)對(duì)象相關(guān)的背景信息。背景信息可包括拍攝或捕捉目標(biāo)對(duì)象所用的用戶設(shè)備的位置信息、目標(biāo)對(duì)象與相機(jī)之間的方位角信息以及用戶設(shè)備的傾斜信息中的至少一個(gè)。在操作1030，用戶設(shè)備可從用戶接收顯示AR標(biāo)簽的請(qǐng)求。在操作1040，用戶設(shè)備可檢查與背景信息對(duì)應(yīng)的AR信息是否存儲(chǔ)在用戶設(shè)備的存儲(chǔ)器中。如果在操作1040確定與背景信息對(duì)應(yīng)的AR信息存儲(chǔ)在用戶設(shè)備的存儲(chǔ)器中，則在操作1050，用戶設(shè)備可利用存儲(chǔ)在存儲(chǔ)器中的AR信息生成并顯示與收集的背景信息對(duì)應(yīng)的AR標(biāo)簽。因此，取決于用戶與目標(biāo)對(duì)象之間的方位角的不同的AR標(biāo)簽可提供給用戶。如果在操作1040確定與背景信息對(duì)應(yīng)的AR信息沒(méi)有預(yù)先存儲(chǔ)在用戶設(shè)備的存儲(chǔ)器中，則在操作1060，用戶設(shè)備可請(qǐng)求AR管理服務(wù)器提供與背景信息對(duì)應(yīng)的AR信息。為了請(qǐng)求AR管理服務(wù)器提供與背景信息對(duì)應(yīng)的AR信息，在操作1060，用戶設(shè)備可將在操作1010中獲得的目標(biāo)對(duì)象的圖像數(shù)據(jù)以及在操作1020收集的背景信息發(fā)送給AR管理服務(wù)
13
在操作1070，用戶設(shè)備可從AR管理服務(wù)器接收包括與背景信息對(duì)應(yīng)的AR信息的AR標(biāo)簽配置數(shù)據(jù)。在操作1080，用戶設(shè)備可利用接收的包括AR信息的AR標(biāo)簽配置數(shù)據(jù)生成并顯示AR標(biāo)簽。如果在操作1070用戶設(shè)備接收到AR信息，則用戶設(shè)備可利用該AR信息生成AR標(biāo)簽。圖11是示出了根據(jù)本發(fā)明示例性實(shí)施方式的在用戶設(shè)備中提供AR服務(wù)的方法的流程圖。圖11方法的各操作可由第三用戶設(shè)備800或第四用戶設(shè)備900的控制單元或處理器來(lái)執(zhí)行。在操作1110，用戶可利用相機(jī)拍攝或捕捉目標(biāo)對(duì)象的圖像，以獲得目標(biāo)對(duì)象的圖像數(shù)據(jù)。在操作1120，用戶設(shè)備可收集與目標(biāo)對(duì)象相關(guān)的背景信息。背景信息可包括拍攝或捕捉目標(biāo)對(duì)象的用戶設(shè)備的位置信息、方向信息和傾斜信息中的至少一個(gè)。然而，各方面不限于此，例如，傾斜信息可省略。在操作1130，用戶設(shè)備可從用戶接收顯示AR標(biāo)簽的請(qǐng)求。在操作1140，用戶設(shè)備可請(qǐng)求AR管理服務(wù)器提供與收集的背景信息對(duì)應(yīng)的AR信息。為了請(qǐng)求AR管理服務(wù)器提供與收集的背景信息對(duì)應(yīng)的AR信息，在操作1160，用戶設(shè)備可將在操作1110中獲得的目標(biāo)對(duì)象的圖像數(shù)據(jù)以及在操作1120中收集的背景信息發(fā)送給AR管理服務(wù)器。在操作1150，用戶設(shè)備可從AR管理服務(wù)器接收與背景信息對(duì)應(yīng)的至少一個(gè)AR信息。例如，如果AR管理服務(wù)器中存儲(chǔ)有相同目標(biāo)對(duì)象的基于方位角的不同AR信息，則用戶設(shè)備可接收存儲(chǔ)的目標(biāo)對(duì)象的AR信息中的部分或全部。如果在操作1160用戶設(shè)備沒(méi)有從用戶接收到基于方位角顯示AR標(biāo)簽的請(qǐng)求，則在操作1170，用戶設(shè)備可利用接收的至少一個(gè)AR信息生成并顯示AR標(biāo)簽。如果接收的AR信息為多個(gè)，則用戶設(shè)備可利用具有高頻率或精度的AR信息來(lái)生成AR標(biāo)簽。如果在操作1160用戶設(shè)備從用戶接收到基于方位角顯示AR標(biāo)簽的請(qǐng)求，則在操作1180，用戶設(shè)備可收集目標(biāo)對(duì)象與相機(jī)之間的方位角信息。在操作1190，在至少一個(gè)收集的AR信息中，用戶設(shè)備可提取與收集的方位角信息對(duì)應(yīng)的AR信息。在操作1195，用戶設(shè)備可利用提取的AR信息生成并顯示AR標(biāo)簽。如果在圖10的操作1080或圖11的操作1195中顯示的AR標(biāo)簽是圖5的AR標(biāo)簽，并且感測(cè)到了用戶對(duì)AR標(biāo)簽的觸摸方向，則用戶設(shè)備可通過(guò)使AR標(biāo)簽旋轉(zhuǎn)至用戶所觸摸的面，或者通過(guò)使AR標(biāo)簽向感測(cè)到的觸摸方向旋轉(zhuǎn)，來(lái)將目標(biāo)對(duì)象的與不同方位角對(duì)應(yīng)的AR信息顯示在正面。在圖10的操作1080或圖11的操作1195中顯示的AR標(biāo)簽可類似于圖6的AR標(biāo)
簽。因此，如果用戶向任意方向旋轉(zhuǎn)用戶設(shè)備，則用戶設(shè)備可使與朝著在所述任意方向上觀察的對(duì)象的方位角對(duì)應(yīng)的AR信息顯示在正面。更具體地講，在一個(gè)例子中，參照?qǐng)D6，如果最初面向第一面的用戶設(shè)備向右旋轉(zhuǎn)以面向第二面，則第二面可作為正面方向觀察。
根據(jù)本發(fā)明的示例性實(shí)施方式，用戶設(shè)備和方法提供了增強(qiáng)現(xiàn)實(shí)(AR)服務(wù)，其中可基于朝著用戶所觀察的對(duì)象的方位角選擇性地提供AR標(biāo)簽，以使得用戶可看到目標(biāo)信肩、ο另外，用戶設(shè)備和方法提供了一種AR服務(wù)，其中可提供三維立體AR標(biāo)簽，并且可根據(jù)接收的用戶輸入旋轉(zhuǎn)AR標(biāo)簽，從而可提供目標(biāo)對(duì)象的不同AR信息(包括以不同視角提供的AR信息)，而無(wú)需用戶移動(dòng)來(lái)物理旋轉(zhuǎn)。另外，用戶設(shè)備和方法提供了一種AR服務(wù)，其中用戶可向任意方向旋轉(zhuǎn)用戶設(shè)備，以提供與旋轉(zhuǎn)到的方向?qū)?yīng)的目標(biāo)對(duì)象的AR信息。根據(jù)如上所述的本發(fā)明的示例性實(shí)施方式，可提供取決于用戶位置與目標(biāo)對(duì)象之間的方位角的不同AR信息。這一特征可有助于提供三維立體AR標(biāo)簽，并且可非限制性地實(shí)現(xiàn)如文中所述的各種應(yīng)用。首先，如果沿與建筑內(nèi)壁相同的方向顯示立方體AR標(biāo)簽，則用戶可從建筑外部看到建筑內(nèi)部。這可通過(guò)使具有六個(gè)面的AR標(biāo)簽的各面與建筑內(nèi)部的各面匹配，并將建筑內(nèi)部的各面顯示在AR標(biāo)簽的各自對(duì)應(yīng)的面上來(lái)實(shí)現(xiàn)。如果用戶通過(guò)用戶設(shè)備的相機(jī)從建筑外部看建筑的一個(gè)面，則在AR標(biāo)簽的多個(gè)可用面中，AR標(biāo)簽面向用戶的正面(第一面)可被透明顯示。另外，AR標(biāo)簽的其他三面，即建筑的右側(cè)面、左側(cè)面和背面，可立體地顯示。另外，如果利用運(yùn)動(dòng)畫面相機(jī)實(shí)時(shí)更新通過(guò)AR標(biāo)簽顯示的畫面，則可實(shí)時(shí)地從建筑外部識(shí)別出建筑內(nèi)部的情況。其次，由于除了方位角之外，本發(fā)明的示例性實(shí)施方式還考慮了傾斜角度(包括水平和/或垂直角度)的信息，即，關(guān)于用戶設(shè)備的傾斜的信息，所以可向用戶提供對(duì)應(yīng)于各種角度的AR標(biāo)簽。另外，如果包括高度信息，則可以以空間布置方式，而非水平布置方式來(lái)顯示AR標(biāo)簽，從而提供逼真的視圖。因此，用戶可看到以水平方向觀察的AR標(biāo)簽，如果用戶通過(guò)相機(jī)向上看目標(biāo)對(duì)象或者向下看目標(biāo)對(duì)象，還可以各種方向和各種角度看到附近的三維空間布置方式設(shè)置的AR標(biāo)簽。第三，AR標(biāo)簽可用作標(biāo)志或提醒。例如，如果圖像標(biāo)志或提醒顯示為基于用戶所站的位置和對(duì)應(yīng)方向的AR標(biāo)簽，則該標(biāo)志或提醒可不被顯示給與該用戶處于相反方向上的用戶，從而避免混淆。在一個(gè)例子中，如果停止標(biāo)志被顯示給面向該停止標(biāo)志的用戶，而不被顯示給經(jīng)過(guò)停止標(biāo)志的其他人或在與具有該停止標(biāo)志的街道相交的快車道上行駛的那些人，則可避免涉及交通標(biāo)志的混淆。第四，用戶設(shè)備可利用傳感器實(shí)時(shí)顯示目標(biāo)對(duì)象與用戶設(shè)備之間的方位角。利用這一特征，如果用戶在特定位置拍攝目標(biāo)對(duì)象的圖像，則用戶可使用由專家推薦的在該特定位置生成的AR標(biāo)簽。更具體地講，用戶可按照專家所推薦的方位角定位相機(jī)并拍攝或捕捉目標(biāo)對(duì)象。由專家生成的AR標(biāo)簽可顯示用于拍攝或捕捉對(duì)象的相機(jī)設(shè)置信息和方位角fn息ο第五，用戶設(shè)備可提供其上疊置有星座的AR標(biāo)簽，該星座是在用戶位置基于朝著夜空的方位角由用戶觀察到的。在這種情況下，用戶設(shè)備可在AR標(biāo)簽上疊置添加了時(shí)間信息的星座。因此，用戶可用用戶的眼睛觀察與星座相關(guān)的信息。第六，在(例如)具有多個(gè)出口的建筑物或地鐵情況下，用戶設(shè)備可基于當(dāng)前位置的方位角顯示AR標(biāo)簽。因此，在當(dāng)前位置，用戶可通過(guò)AR標(biāo)簽識(shí)別出顯示在正前方的出口是前門還是后門。第七，如果用戶在山中迷路，則用戶設(shè)備可提供在當(dāng)前位置朝路徑的方向的信息。另外，用戶設(shè)備可通過(guò)AR標(biāo)簽提供關(guān)于躲避處或附近的地形的信息。第八，如果用戶設(shè)備的相機(jī)面向停車場(chǎng)，則用戶設(shè)備可利用AR標(biāo)簽顯示車可停放的位置。另外，在用戶已經(jīng)停放車之后，其可將用戶引向建筑出口或入口。第九，用戶設(shè)備可根據(jù)方位角顯示各種形狀的AR標(biāo)簽以及各種內(nèi)容的AR標(biāo)簽。因此，用戶可容易地識(shí)別AR標(biāo)簽和方位角。第十，用戶設(shè)備可提供基于方位角顯示的AR標(biāo)簽的AR信息，并且還可提供不考慮方位角的AR標(biāo)簽的一般信息。如果用戶看地圖，則可適用于提供這種信息。第十一，利用基于方位角的AR標(biāo)簽來(lái)顯示單個(gè)面的特征，可在天體和行星上生成各種標(biāo)簽。由于其他行星以及地球沿軌道運(yùn)動(dòng)并繞軸旋轉(zhuǎn)，所以顯示的面可隨時(shí)間改變。在這種情況下，用戶可在所需面上設(shè)定標(biāo)簽。第十二，用戶設(shè)備可根據(jù)方位角將AR標(biāo)簽顯示在各種面上，例如地板、天花板和建筑物屋頂?shù)取＿@可用于壁畫以及大型建筑物的樓層地圖的信息。根據(jù)本發(fā)明的示例性實(shí)施方式可記錄在包括執(zhí)行由計(jì)算機(jī)實(shí)施的各種操作的程序指令的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)中。所述介質(zhì)還可包括(單獨(dú)或與程序指令相組合)數(shù)據(jù)文件、數(shù)據(jù)結(jié)構(gòu)等。所述介質(zhì)和程序指令可以是針對(duì)本發(fā)明的目的專門設(shè)計(jì)和構(gòu)建的那些介質(zhì)和程序指令，或者可以是計(jì)算機(jī)軟件領(lǐng)域技術(shù)人員所熟知且可獲得的類型。非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)的例子包括磁介質(zhì)，例如硬盤、軟盤和磁帶；光學(xué)介質(zhì)，例如CD ROM盤和DVD ；磁光介質(zhì)，例如光盤；以及專門構(gòu)造用于存儲(chǔ)和執(zhí)行程序指令的硬件裝置，例如只讀存儲(chǔ)器(ROM)、隨機(jī)存取存儲(chǔ)器(RAM)、閃存等。程序指令的例子包括諸如編譯程序所生成的機(jī)器代碼、以及包含可由計(jì)算機(jī)利用解釋程序執(zhí)行的更高級(jí)代碼的文件。所述硬件裝置可被構(gòu)造為用作一個(gè)或更多個(gè)軟件模塊，以便執(zhí)行本發(fā)明上述實(shí)施方式的操作。本領(lǐng)域技術(shù)人員將明白，在不脫離本發(fā)明的精神和范圍的情況下，可對(duì)本發(fā)明進(jìn)行各種修改和變型。因此，如果對(duì)本發(fā)明的這些修改和變型落在所附權(quán)利要求及其等同物的范圍內(nèi)，則本發(fā)明意在覆蓋這些修改和改型。相關(guān)申請(qǐng)的交叉引用本申請(qǐng)要求提交于2010年10月13日的韓國(guó)專利申請(qǐng)第10-2010-0100008號(hào)的優(yōu)先權(quán)，該專利申請(qǐng)以引用方式合并于此，用于所有目的，如同在本文中完全闡述了一樣。
權(quán)利要求
1.ー種提供增強(qiáng)現(xiàn)實(shí)服務(wù)的用戶設(shè)備，所述用戶設(shè)備包括 拍攝單元，其捕捉目標(biāo)對(duì)象的圖像；信息收集單元，其收集捕捉的目標(biāo)對(duì)象的圖像的背景信息，所述背景信息包括所述拍攝單元的位置信息以及所述目標(biāo)對(duì)象和所述拍攝単元之間的第一方位角信息；標(biāo)簽生成単元，其生成基于第一方向的增強(qiáng)現(xiàn)實(shí)標(biāo)簽，所述增強(qiáng)現(xiàn)實(shí)標(biāo)簽與所述背景信息對(duì)應(yīng)；顯示單元，其顯示捕捉的目標(biāo)對(duì)象的圖像和所述增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
2.根據(jù)權(quán)利要求1所述的用戶設(shè)備，所述用戶設(shè)備還包括增強(qiáng)現(xiàn)實(shí)信息管理服務(wù)器，其存儲(chǔ)與所述背景信息對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息； 通信単元，其與所述增強(qiáng)現(xiàn)實(shí)管理服務(wù)器通信；以及控制單元，其控制所述通信單元將所述增強(qiáng)現(xiàn)實(shí)信息發(fā)送至所述增強(qiáng)現(xiàn)實(shí)管理服務(wù)器。
3.根據(jù)權(quán)利要求1所述的用戶設(shè)備，所述用戶設(shè)備還包括 存儲(chǔ)單元，其存儲(chǔ)與所述背景信息對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息，其中所述標(biāo)簽生成単元基于從所述存儲(chǔ)單元收集的增強(qiáng)現(xiàn)實(shí)信息來(lái)生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
4.根據(jù)權(quán)利要求1所述的用戶設(shè)備，其中所述標(biāo)簽生成単元基于所述增強(qiáng)現(xiàn)實(shí)信息生成三維增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
5.根據(jù)權(quán)利要求4所述的用戶設(shè)備，其中所述標(biāo)簽生成単元生成具有與目標(biāo)對(duì)象的輪廓相應(yīng)的ー個(gè)或更多個(gè)面的增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
6.根據(jù)權(quán)利要求5所述的用戶設(shè)備，其中基于所述目標(biāo)對(duì)象與所述拍攝単元之間的方位角的不同增強(qiáng)現(xiàn)實(shí)信息顯示在所述增強(qiáng)現(xiàn)實(shí)標(biāo)簽的所述ー個(gè)或更多個(gè)面上。
7.根據(jù)權(quán)利要求4所述的用戶設(shè)備，所述用戶設(shè)備還包括用戶輸入?yún)g元，其接收用以對(duì)顯示的增強(qiáng)現(xiàn)實(shí)標(biāo)簽進(jìn)行旋轉(zhuǎn)的用戶輸入， 其中所述標(biāo)簽生成単元通過(guò)根據(jù)接收的用戶輸入旋轉(zhuǎn)所顯示的增強(qiáng)現(xiàn)實(shí)標(biāo)簽，提供目標(biāo)對(duì)象的與第二方位角對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息。
8.根據(jù)權(quán)利要求4所述的用戶設(shè)備，所述用戶設(shè)備還包括用戶輸入?yún)g元，其接收對(duì)顯示增強(qiáng)現(xiàn)實(shí)標(biāo)簽的第二面的選擇；并且其中所述標(biāo)簽生成単元根據(jù)選擇的所述第二面旋轉(zhuǎn)所述增強(qiáng)現(xiàn)實(shí)標(biāo)簽，以使得所述第 ニ面面向用戶，以在所述第二面上提供目標(biāo)對(duì)象的與第二方位角對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息。
9.根據(jù)權(quán)利要求1所述的用戶設(shè)備，其中如果捕捉目標(biāo)對(duì)象的所述用戶設(shè)備向第二方向移動(dòng)，則所述標(biāo)簽生成単元生成與朝著相對(duì)于目標(biāo)對(duì)象在所述第二方向上觀察的目標(biāo)對(duì)象的第一方位角對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
10.ー種提供增強(qiáng)現(xiàn)實(shí)服務(wù)的用戶設(shè)備，所述用戶設(shè)備包括 拍攝單元，其捕捉目標(biāo)對(duì)象的圖像；信息收集單元，其收集捕捉的目標(biāo)對(duì)象的圖像的背景信息，所述背景信息包括所述拍攝單元的位置信息和所述目標(biāo)對(duì)象的圖像數(shù)據(jù)；通信単元，其將收集的背景信息發(fā)送至增強(qiáng)現(xiàn)實(shí)管理服務(wù)器，并從所述增強(qiáng)現(xiàn)實(shí)管理服務(wù)器接收所述目標(biāo)對(duì)象的增強(qiáng)現(xiàn)實(shí)信息，其中所述增強(qiáng)現(xiàn)實(shí)管理服務(wù)器基于所捕捉的圖像的方位角信息存儲(chǔ)目標(biāo)對(duì)象的增強(qiáng)現(xiàn)實(shí)信息；標(biāo)簽生成単元，其基干與所述目標(biāo)對(duì)象和所述拍攝単元之間的第一方位角對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽；顯示單元，其顯示捕捉的目標(biāo)對(duì)象的圖像和生成的增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
11.根據(jù)權(quán)利要求10所述的用戶設(shè)備，其中所述信息收集單元還收集所述目標(biāo)對(duì)象和所述拍攝単元之間的所述第一方位角的方位角信息，其中如果收集的方位角信息改變，則所述標(biāo)簽生成単元基干與第二方位角信息對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
12.根據(jù)權(quán)利要求10所述的用戶設(shè)備，其中所述標(biāo)簽生成単元基于所述增強(qiáng)現(xiàn)實(shí)信息生成三維增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
13.根據(jù)權(quán)利要求12所述的用戶設(shè)備，其中所述標(biāo)簽生成単元生成具有與所述對(duì)象的輪廓相應(yīng)的ー個(gè)或更多個(gè)面的增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
14.根據(jù)權(quán)利要求13所述的用戶設(shè)備，其中基于所述目標(biāo)對(duì)象與所述拍攝単元之間的方位角的增強(qiáng)現(xiàn)實(shí)信息顯示在所述增強(qiáng)現(xiàn)實(shí)標(biāo)簽的所述ー個(gè)或更多個(gè)面上。
15.根據(jù)權(quán)利要求12所述的用戶設(shè)備，所述用戶設(shè)備還包括用戶輸入?yún)g元，其接收對(duì)顯示的增強(qiáng)現(xiàn)實(shí)標(biāo)簽進(jìn)行旋轉(zhuǎn)的用戶輸入，其中顯示的增強(qiáng)現(xiàn)實(shí)標(biāo)簽根據(jù)接收的用戶輸入旋轉(zhuǎn)至第二位置，以及其中所述標(biāo)簽生成単元提供所述目標(biāo)對(duì)象的、與對(duì)應(yīng)于所述增強(qiáng)現(xiàn)實(shí)標(biāo)簽的所述第二位置的第二方位角相對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息。
16.根據(jù)權(quán)利要求10所述的用戶設(shè)備，其中如果所述用戶設(shè)備旋轉(zhuǎn)，則所述標(biāo)簽生成単元生成與朝著相對(duì)于目標(biāo)對(duì)象在第二方向上觀察的目標(biāo)對(duì)象的第二方位角對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
17.ー種提供增強(qiáng)現(xiàn)實(shí)服務(wù)的方法，所述方法包括 用相機(jī)捕捉目標(biāo)對(duì)象的圖像；收集背景信息，所述背景信息包括捕捉的目標(biāo)對(duì)象的圖像的位置信息以及所述目標(biāo)對(duì)象和所述相機(jī)之間的第一方位角信息；生成與所述背景信息對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)標(biāo)簽；以及顯示捕捉的目標(biāo)對(duì)象的圖像和生成的增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
18.根據(jù)權(quán)利要求17所述的方法，所述方法還包括請(qǐng)求增強(qiáng)現(xiàn)實(shí)管理服務(wù)器提供與所述背景信息對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息，其中所述增強(qiáng)現(xiàn)實(shí)管理服務(wù)器存儲(chǔ)所述增強(qiáng)現(xiàn)實(shí)信息；從所述增強(qiáng)現(xiàn)實(shí)管理服務(wù)器接收所述增強(qiáng)現(xiàn)實(shí)信息。
19.根據(jù)權(quán)利要求17所述的方法，其中生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽包括基干與所述背景信息對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息來(lái)生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽，其中所述背景信息存儲(chǔ)在所述用戶設(shè)備中。
20.根據(jù)權(quán)利要求17所述的方法，其中生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽包括基于所述增強(qiáng)現(xiàn)實(shí)信息生成三維增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
21.根據(jù)權(quán)利要求20所述的方法，其中生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽包括生成具有與所述目標(biāo)對(duì)象的輪廓相應(yīng)的ー個(gè)或更多個(gè)面的增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
22.根據(jù)權(quán)利要求21所述的方法，其中顯示包括在所述增強(qiáng)現(xiàn)實(shí)標(biāo)簽的所述ー個(gè)或更多個(gè)面上顯示基于所述目標(biāo)對(duì)象與所述相機(jī)之間的所述第一方位角的增強(qiáng)現(xiàn)實(shí)信息。
23.根據(jù)權(quán)利要求20所述的方法，所述方法還包括 接收對(duì)顯示的增強(qiáng)現(xiàn)實(shí)標(biāo)簽進(jìn)行旋轉(zhuǎn)的用戶輸入；通過(guò)根據(jù)接收的用戶輸入旋轉(zhuǎn)顯示的增強(qiáng)現(xiàn)實(shí)標(biāo)簽，提供與第二方位角對(duì)應(yīng)的目標(biāo)對(duì)象的增強(qiáng)現(xiàn)實(shí)信息。
24.根據(jù)權(quán)利要求21所述的方法，所述方法還包括 感測(cè)對(duì)生成的增強(qiáng)現(xiàn)實(shí)標(biāo)簽的第二面的選擇；根據(jù)選擇的所述第二面旋轉(zhuǎn)所述增強(qiáng)現(xiàn)實(shí)標(biāo)簽，以使得所述第二面面向用戶；以及在所述第二面上顯示所述目標(biāo)對(duì)象的與第二方位角對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息。
25.根據(jù)權(quán)利要求17所述的方法，所述方法還包括如果捕捉所述目標(biāo)對(duì)象的所述用戶設(shè)備旋轉(zhuǎn)，則生成與朝著相對(duì)于目標(biāo)對(duì)象在第二方向上觀察的目標(biāo)對(duì)象的第二方位角對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
26.ー種提供增強(qiáng)現(xiàn)實(shí)服務(wù)的方法，所述方法包括 捕捉目標(biāo)對(duì)象的圖像；收集背景信息，所述背景信息包括捕捉的圖像的位置信息和捕捉的圖像的圖像數(shù)據(jù)； 將收集的背景信息發(fā)送至增強(qiáng)現(xiàn)實(shí)管理服務(wù)器，其中所述增強(qiáng)現(xiàn)實(shí)管理服務(wù)器存儲(chǔ)所述目標(biāo)對(duì)象的針對(duì)第一方位角的增強(qiáng)現(xiàn)實(shí)信息；從所述增強(qiáng)現(xiàn)實(shí)管理服務(wù)器接收所述目標(biāo)對(duì)象的增強(qiáng)現(xiàn)實(shí)信息； 基干與所述目標(biāo)對(duì)象和相機(jī)之間的所述第一方位角對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽；以及顯示捕捉的目標(biāo)對(duì)象的圖像和所述增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
27.根據(jù)權(quán)利要求沈所述的方法，其中背景信息還包括所述目標(biāo)對(duì)象和相機(jī)之間的第 ニ方位角的方位角信息，以及其中生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽包括基干與所述第二方位角信息對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
28.根據(jù)權(quán)利要求沈所述的方法，其中生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽包括基干與所述背景信息對(duì)應(yīng)的增強(qiáng)現(xiàn)實(shí)信息生成三維增強(qiáng)現(xiàn)實(shí)標(biāo)簽。
29.根據(jù)權(quán)利要求沈所述的方法，其中生成增強(qiáng)現(xiàn)實(shí)標(biāo)簽還包括生成具有與目標(biāo)對(duì)象的輪廓相應(yīng)的ー個(gè)或更多個(gè)面的增強(qiáng)現(xiàn)實(shí)標(biāo)簽，并且在所述增強(qiáng)現(xiàn)實(shí)標(biāo)簽的ー個(gè)或更多個(gè)面上顯示基于所述目標(biāo)對(duì)象與相機(jī)之間的所述第一方位角的增強(qiáng)現(xiàn)實(shí)信息。
全文摘要
本發(fā)明涉及提供了增強(qiáng)現(xiàn)實(shí)服務(wù)的用戶設(shè)備和方法。該提供增強(qiáng)現(xiàn)實(shí)(AR)服務(wù)的用戶設(shè)備包括拍攝單元，其捕捉目標(biāo)對(duì)象的圖像；信息收集單元，其收集捕捉的目標(biāo)對(duì)象的圖像的背景信息；標(biāo)簽生成單元，其生成第一方向的AR標(biāo)簽，所述AR標(biāo)簽與所述背景信息對(duì)應(yīng)；顯示單元，其顯示目標(biāo)對(duì)象的圖像和AR標(biāo)簽。該提供AR服務(wù)的方法包括用相機(jī)捕捉目標(biāo)對(duì)象的圖像；收集背景信息，所述背景信息包括捕捉的目標(biāo)對(duì)象的圖像的位置信息以及目標(biāo)對(duì)象和相機(jī)之間的第一方位角信息；生成與所述背景信息對(duì)應(yīng)的AR標(biāo)簽；顯示捕捉的目標(biāo)對(duì)象的圖像和生成的AR標(biāo)簽。
文檔編號(hào)G06T11/00GK102568012SQ20111028047
公開日2012年7月11日 申請(qǐng)日期2011年9月20日 優(yōu)先權(quán)日2010年10月13日
發(fā)明者黃柱熹 申請(qǐng)人:株式會(huì)社泛泰