頭戴式顯示器及其控制方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及頭戴式顯示器(HMD)及其控制方法相關(guān)的系統(tǒng)，并且更具體地，涉及能夠檢測(cè)具有在其中存儲(chǔ)的票的外部裝置并且將與存儲(chǔ)的票相關(guān)的增強(qiáng)現(xiàn)實(shí)信息顯示在與攜帶外部裝置的個(gè)人接近的地點(diǎn)(locat1n)中以便檢查票的HMD及其控制方法。
【背景技術(shù)】
[0002]隨著數(shù)字裝置正變得更加輕重量和更加尺寸小巧，便攜式裝置的應(yīng)用和使用范圍正在增加。因此，用戶可以使用他的(或她的)便攜式裝置，以便能夠更容易地執(zhí)行無(wú)論他(或她)希望在何時(shí)和何地想要的操作。例如，用戶可以在沒(méi)有任何時(shí)間和空間上的限制的情況下通過(guò)使用他的(或她的)便攜式裝置來(lái)使用票務(wù)(ticketing)服務(wù)。另外，由于可以通過(guò)在用戶的便攜式裝置中安裝的應(yīng)用來(lái)發(fā)放所購(gòu)買(mǎi)的票，因此用戶不需要攜帶實(shí)際的西χΚ ο
[0003]然而，當(dāng)用戶力圖通過(guò)使用他的(或她的)發(fā)放的票進(jìn)入音樂(lè)廳或劇院時(shí)，用戶需要向檢票務(wù)代理(agent)(或票務(wù)代理)出示他的(或她的)票。因此，用戶需要經(jīng)歷必須從他的(或她的)口袋或包中拿出他的(或她的)便攜式裝置并且向票務(wù)代理親自地出示購(gòu)買(mǎi)的數(shù)字票的不便。

【發(fā)明內(nèi)容】

[0004]技術(shù)問(wèn)題
[0005]因此，本公開(kāi)涉及基本上消除由于相關(guān)技術(shù)的局限性和缺點(diǎn)導(dǎo)致的一個(gè)或更多個(gè)問(wèn)題的HMD及其控制方法。
[0006]本公開(kāi)的一個(gè)目的在于提供一種能夠允許票務(wù)代理在不需要用戶出示購(gòu)買(mǎi)的票的情況下檢查票的檢票系統(tǒng)。
[0007]本公開(kāi)的另一目的在于提供一種能夠檢測(cè)具有在其中存儲(chǔ)的票的外部裝置并且將與存儲(chǔ)的票相關(guān)的增強(qiáng)現(xiàn)實(shí)信息顯示在與攜帶外部裝置的人接近的地點(diǎn)中的HMD及其控制方法。
[0008]本公開(kāi)的又一目的在于提供一種基于與票相關(guān)的識(shí)別信息而不是基于地點(diǎn)或圖像而產(chǎn)生的增強(qiáng)現(xiàn)實(shí)信息。
[0009]本發(fā)明的又一目的在于提供一種能夠在人處在與HMD接近的位置時(shí)準(zhǔn)確地識(shí)別攜帶存儲(chǔ)票的便攜式裝置的人的HMD及其控制方法。
[0010]本公開(kāi)的另外的優(yōu)點(diǎn)、目的和特征將部分地在隨后的描述中進(jìn)行闡述并且部分地將對(duì)于本領(lǐng)域普通技術(shù)人員在查看以下內(nèi)容時(shí)而變得顯而易見(jiàn)，或者可以從本公開(kāi)的實(shí)踐而得知?？梢酝ㄟ^(guò)在所撰寫(xiě)的說(shuō)明書(shū)及其權(quán)利要求以及附圖中具體指出的結(jié)構(gòu)來(lái)實(shí)現(xiàn)和獲得本公開(kāi)的這些目的和其它優(yōu)點(diǎn)。
[0011]問(wèn)題的解決方案
[0012]為了實(shí)現(xiàn)這些目的和其它優(yōu)點(diǎn)并且根據(jù)本公開(kāi)的目的，如本文中實(shí)現(xiàn)并且廣泛地描述的，一種HMD包括:相機(jī)單元，其被配置為拍攝(capture)所述HMD的周?chē)鷧^(qū)域的圖像；顯示單元，其被配置為顯示與所拍攝的圖像關(guān)聯(lián)的增強(qiáng)現(xiàn)實(shí)信息；通信單元，其被配置為向外部裝置發(fā)送數(shù)據(jù)以及從外部裝置接收數(shù)據(jù)；傳感器單元，其被配置為感測(cè)所述HMD的位置，并且將所感測(cè)的結(jié)果傳送給處理器；以及所述處理器，其被配置為控制所述相機(jī)單元、所述顯示單元、所述通信單元和所述傳感器單元。本文中，所述處理器可以向外部裝置請(qǐng)求票信息，可以根據(jù)所述請(qǐng)求從所述外部裝置接收包括所述票信息的響應(yīng)，可以獲取與所述票信息關(guān)聯(lián)的所述增強(qiáng)現(xiàn)實(shí)信息，可以檢測(cè)所拍攝的圖像中的、與所述外部裝置相關(guān)的物體，并且可以將與所述票信息關(guān)聯(lián)的所述增強(qiáng)現(xiàn)實(shí)信息顯示在所檢測(cè)的物體的周?chē)鷧^(qū)域上。
[0013]在本公開(kāi)的另一方面，一種用于控制HMD的方法包括以下步驟:向外部裝置請(qǐng)求票信息；根據(jù)所述請(qǐng)求從所述外部裝置接收包括所述票信息的響應(yīng)；獲取與所述票信息關(guān)聯(lián)的增強(qiáng)現(xiàn)實(shí)信息；拍攝所述HMD的周?chē)鷧^(qū)域的圖像；檢測(cè)所拍攝的圖像中的、與所述外部裝置相關(guān)的物體；以及將與所述票信息關(guān)聯(lián)的所述增強(qiáng)現(xiàn)實(shí)信息顯示在所檢測(cè)的物體的周?chē)鷧^(qū)域上。
[0014]本發(fā)明的有益效果
[0015]根據(jù)本公開(kāi)的實(shí)施方式，由于用戶不需要取出在他的(或她的)外部裝置中存儲(chǔ)的票以向票務(wù)代理親自出示所購(gòu)買(mǎi)的票，因此用戶能夠具有他的(或她的)更方便地被檢查的票。另外，根據(jù)本公開(kāi)的另一實(shí)施方式，由于票務(wù)代理配備有HMD，因此票務(wù)代理能夠通過(guò)參考增強(qiáng)現(xiàn)實(shí)信息來(lái)檢查票，該增強(qiáng)現(xiàn)實(shí)信息在攜帶具有在其中存儲(chǔ)的相應(yīng)的票的便攜式外部裝置的人附近的位置處顯示。
[0016]此外，根據(jù)本公開(kāi)的又一實(shí)施方式，通過(guò)提供基于與購(gòu)買(mǎi)的票關(guān)聯(lián)的識(shí)別信息而產(chǎn)生的增強(qiáng)現(xiàn)實(shí)信息，只要能夠驗(yàn)證票信息，就可以通過(guò)使用增強(qiáng)現(xiàn)實(shí)信息在任何地方執(zhí)行檢票程序。
[0017]最后，根據(jù)本公開(kāi)的另外的實(shí)施方式，當(dāng)人彼此靠近緊密地?cái)D在一起時(shí)，由于根據(jù)本公開(kāi)的HMD能夠準(zhǔn)確地識(shí)別真正攜帶具有在其中存儲(chǔ)的購(gòu)買(mǎi)的票的便攜式外部裝置的人，因此可以提高增強(qiáng)現(xiàn)實(shí)信息的清晰度(clarity)。
[0018]將在下文中描述更詳細(xì)的有益效果。
[0019]將要理解的是，前述一般描述和以下詳細(xì)描述二者是示例性和說(shuō)明性的，并且旨在提供對(duì)所要求保護(hù)的本公開(kāi)的進(jìn)一步解釋。
【附圖說(shuō)明】
[0020]附圖被包括進(jìn)來(lái)以提供本公開(kāi)的進(jìn)一步理解，并且被并入本申請(qǐng)且構(gòu)成本申請(qǐng)的一部分，附圖示出了本公開(kāi)的實(shí)施方式，并且與本說(shuō)明書(shū)一起用來(lái)解釋本發(fā)明的原理。在附圖中:
[0021]圖1例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的頭戴式顯示器(HMD)的框圖；
[0022]圖2例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的向HMD和外部裝置發(fā)送數(shù)據(jù)以及從HMD和外部裝置接收數(shù)據(jù)的示例；
[0023]圖3例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的使HMD檢測(cè)外部裝置的地點(diǎn)的示例；
[0024]圖4例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的使HMD從所拍攝的圖像檢測(cè)與外部裝置相關(guān)的物體的示例；
[0025]圖5例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的使HMD根據(jù)所拍攝的圖像識(shí)別物體的示例；
[0026]圖6a至圖6c分別例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的使HMD從所拍攝的圖像提取物體并且確定識(shí)別區(qū)域的示例；
[0027]圖7a至圖7c分別例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的在基于識(shí)別區(qū)域在圖6a至圖6c中決定的與外部裝置相關(guān)的物體的周?chē)鷧^(qū)域中顯示增強(qiáng)現(xiàn)實(shí)信息的示例；
[0028]圖8例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的與票的識(shí)別信息匹配的示例性增強(qiáng)現(xiàn)實(shí)信息；
[0029]圖9例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的顯示接收的認(rèn)證信息的外部裝置；
[0030]圖10例示了根據(jù)本公開(kāi)的另一示例性實(shí)施方式的顯示接收的認(rèn)證信息的外部裝置；
[0031]圖11例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的票務(wù)系統(tǒng)的結(jié)構(gòu)的框圖；
[0032]圖12例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的由配置票務(wù)系統(tǒng)的元件處理的數(shù)據(jù)的流；以及
[0033]圖13例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的示出用于控制HMD的方法的處理步驟的流程圖。
【具體實(shí)施方式】
[0034]盡管在本公開(kāi)中使用的術(shù)語(yǔ)是從通常已知和使用的術(shù)語(yǔ)中選擇，然而在本文中使用的術(shù)語(yǔ)可以根據(jù)任何本領(lǐng)域技術(shù)人員的意圖或?qū)嵺`或者隨著新技術(shù)的出現(xiàn)而改變或修改。另選地，在一些特定情況下，在本公開(kāi)的描述中提到的術(shù)語(yǔ)中的一些可能由本申請(qǐng)人根據(jù)他或她的判斷來(lái)選擇，其詳細(xì)含義在本文中的說(shuō)明書(shū)的相關(guān)部分中進(jìn)行描述。此外，要求不能簡(jiǎn)單地通過(guò)所使用的實(shí)際術(shù)語(yǔ)而是通過(guò)每個(gè)術(shù)語(yǔ)中蘊(yùn)含的含義來(lái)理解本公開(kāi)。
[0035]此外，現(xiàn)在將詳細(xì)地參考本公開(kāi)的優(yōu)選實(shí)施方式，在附圖中例示了本公開(kāi)的這些優(yōu)選實(shí)施方式的示例。然而，本公開(kāi)的描述將不僅限于本文中提供的示例性實(shí)施方式。
[0036]圖1例示了根據(jù)本公開(kāi)的示例性實(shí)施方式的頭戴式顯示器(HMD)的框圖。然而，圖1僅是示例性的。并且，因此，將顯而易見(jiàn)的是，可以去除配置模塊中的一些或者可以按照任何本領(lǐng)域技術(shù)人員的要求將新的配置模塊添加到HMD中。
[0037]如圖1中所示，根據(jù)本公開(kāi)的實(shí)施方式的頭戴式顯示器(HMD) 100可以包括相機(jī)單元110、顯示單元120、通信單元130、傳感器單元140和處理器150。
[0038]首先，相機(jī)單元110可以拍攝HMD 100的周?chē)膱D像。例如，相機(jī)單元110可以拍攝在與穿戴HMD 100的用戶的視野(eyesight)對(duì)應(yīng)的預(yù)定區(qū)域(以下被稱為“視角區(qū)域”)內(nèi)的圖像。此后，相機(jī)單元110可以將所拍攝的圖像提供到處理器150。
[0039]另外，相機(jī)單元110可以包括立體相機(jī)。例如，相機(jī)單元110可以包括至少兩個(gè)透鏡，所述至少兩個(gè)透鏡被配置為彼此分隔開(kāi)預(yù)定距離并且同時(shí)拍攝(film)相同的物體。本文中，所述至少兩個(gè)透鏡的聚焦調(diào)整、曝光調(diào)整和快門(mén)操作可以彼此互相聯(lián)系。因此，在HMD100中，由相機(jī)單元110拍攝的圖像可以包括立體圖像(例如，三維(3D)圖像)。
[0040]在這一點(diǎn)上，處理器150可以產(chǎn)生或存儲(chǔ)包括在所拍攝的圖像中的至少一個(gè)物體的深度信息作為對(duì)應(yīng)圖像的附加信息。此外，處理器150可以基于通過(guò)相機(jī)單元110而獲取的圖像來(lái)檢測(cè)包括票信息的外部裝置。在這一點(diǎn)上，處理器150可以使用深度信息。然而，這將在后面進(jìn)行更詳細(xì)的描述。
[0041]此外，相機(jī)單元110可以作為與傳感器單元140分離的單元而包括在HMD 100中，這將在后面進(jìn)行詳細(xì)描述。然而，相機(jī)單元110也可以與傳感器單元140集成，從而被包括在 HMD 100 中。
[0042]顯示單元120可以將圖像輸出在顯示屏幕上。在這一點(diǎn)上，顯示單元120可以基于由處理器150執(zhí)行的內(nèi)容或者基于處理器150的控制命令來(lái)輸出圖像。
[0043]此外，當(dāng)相機(jī)單元110包括立體相機(jī)時(shí)，顯示單元120可以包括顯示立體圖像的結(jié)構(gòu)，使得穿戴HMD 100的用戶能夠觀看對(duì)應(yīng)的立體圖像。
[0044]此外，顯示單元120可以顯示與從相機(jī)單元110獲取的圖像相關(guān)的增強(qiáng)現(xiàn)實(shí)信息。增強(qiáng)現(xiàn)實(shí)信息可以從外部服務(wù)器接收，并且可以預(yù)先存儲(chǔ)在HMD 100中。將參照?qǐng)D7在后面更詳細(xì)地描述增強(qiáng)現(xiàn)實(shí)信息。
[0045]通信單元130可以通過(guò)使用各種協(xié)議來(lái)與外部裝置進(jìn)行通信，以便向外部裝置發(fā)送數(shù)據(jù)以及從外部裝置接收數(shù)據(jù)。另外，通信單元130可以經(jīng)由有線或無(wú)線通信來(lái)接入網(wǎng)絡(luò)，由此能夠發(fā)送和接收數(shù)字?jǐn)?shù)據(jù)(諸如票信息、增強(qiáng)現(xiàn)實(shí)信息等)。
[0046]因此，通信單元130可以向外部裝置發(fā)送票信息以及從外部裝置接收票信息，該外部裝置對(duì)應(yīng)于發(fā)放相應(yīng)的票的便攜式裝置或服務(wù)器。
[0047]此外，傳感器單元140可以使用在HMD 100中裝備的至少一個(gè)傳感器，以便感測(cè)HMD 100的周?chē)h(huán)境并且將所感測(cè)的信息以信號(hào)的形式傳送到處理器150。此外，傳感器單元140可以感測(cè)用戶輸入，并且可以根據(jù)所感測(cè)的結(jié)果向處理器150傳送輸入信號(hào)。
[0048]因此，傳感器單元140可以包括至少一個(gè)感測(cè)裝置。根據(jù)本公開(kāi)的實(shí)施方式，所述至少一個(gè)感測(cè)裝置可以包括以下項(xiàng)中的至少一個(gè):重力傳感器、地磁(或地磁學(xué))傳感器、運(yùn)動(dòng)傳感器、陀螺儀傳感器、加速度傳感器、紅外線傳感器、傾斜傳感器、亮度傳感器、高度傳感器、氣味傳感器、溫度傳感器(或熱傳感器)、深度傳感器、壓力傳感器、條帶(banding)傳感器、音頻傳感器、視頻傳感器、全球定位系統(tǒng)(GPS)傳感器、觸摸傳感器等。
[0049]此外，當(dāng)傳感器單元140感測(cè)HMD 100的位置或方向時(shí)，處理器150可以檢測(cè)HMD100的位置信息或方向信息。這將參照?qǐng)D3進(jìn)行更加詳細(xì)的描述。
[0050]此外，傳感器單元140集總地表示上述各種傳感裝置。本文中，在感測(cè)到用戶的各種輸入之后并且通過(guò)感測(cè)HDM 100的環(huán)境，感測(cè)單元140可以傳送可以傳送所感測(cè)的結(jié)果，使得處理器150能夠執(zhí)行相應(yīng)的操作