本發(fā)明涉及信息處理裝置以及信息處理方法。

背景技術(shù)：

1、近年來，將對(duì)現(xiàn)實(shí)世界賦予數(shù)字信息并用cg(computer?graphics，計(jì)算機(jī)圖形學(xué))等制作的虛擬空間上的虛擬物體(虛擬目標(biāo))反映到現(xiàn)實(shí)空間并擴(kuò)展的增強(qiáng)現(xiàn)實(shí)(augmented?reality：ar)技術(shù)得到廣泛應(yīng)用。作為利用該技術(shù)的裝置，三維地辨識(shí)現(xiàn)實(shí)空間的同時(shí)簡便地處置虛擬目標(biāo)的信息處理裝置得到普及。而且，作為其一個(gè)例子，可以舉出佩戴到頭部且具有顯示部、攝像機(jī)部等的頭戴式顯示器(head?mounted?display；hmd)。

2、作為進(jìn)行虛擬目標(biāo)的影像(以下有時(shí)稱為影像虛擬目標(biāo))的動(dòng)作的暫停、再現(xiàn)的方法，在專利文獻(xiàn)1中，有下述的記載。即，在專利文獻(xiàn)1中，記載有“再現(xiàn)部107再現(xiàn)存儲(chǔ)于存儲(chǔ)部104的動(dòng)畫數(shù)據(jù)(301)。復(fù)合現(xiàn)實(shí)感處理部103與利用再現(xiàn)部107的再現(xiàn)處理并行地，通過利用自身位置姿勢(shì)推測部106的位置姿勢(shì)推測結(jié)果以及視線跟蹤功能，取得用戶的視點(diǎn)位置(或者用戶的位置)和其視線方向(s302)。復(fù)合現(xiàn)實(shí)感處理部103計(jì)算視線的從動(dòng)畫再現(xiàn)畫面g的偏移φ、以及用戶的自身位置和動(dòng)畫再現(xiàn)畫面g的距離d。再現(xiàn)部107根據(jù)偏移φ以及距離d，調(diào)整再現(xiàn)速度(s303)。例如，再現(xiàn)部107在偏移φ是預(yù)定角度偏移且距離d是預(yù)定值以上的情況下，減小其再現(xiàn)速度或者停止。此外，針對(duì)偏移φ以及距離d的條件也可以為至少任意一方。這是用于判斷用戶是否正觀看動(dòng)畫再現(xiàn)畫面g的基準(zhǔn)?！?。

3、另外，在專利文獻(xiàn)2中，記載有“用戶終端1500具有取得測量用戶終端1500的位置以及姿勢(shì)而得到的測量數(shù)據(jù)的功能，配置到被攝體目標(biāo)、虛擬攝像機(jī)、以及虛擬三維空間，與測量數(shù)據(jù)連動(dòng)地控制虛擬攝像機(jī)的位置以及姿勢(shì)。而且，用戶終端1500生成用虛擬攝像機(jī)拍攝的虛擬空間圖像并顯示為監(jiān)視圖像的同時(shí)，記錄可再現(xiàn)虛擬攝像機(jī)的位置以及姿勢(shì)的攝像機(jī)工作數(shù)據(jù)550?！薄ⅰ霸佻F(xiàn)圖像生成控制部232根據(jù)利用記錄控制部224記錄的攝像機(jī)工作數(shù)據(jù)550，進(jìn)行生成該攝像機(jī)工作的所給的再現(xiàn)定時(shí)下的來自虛擬攝像機(jī)的虛擬三維空間的圖像即再現(xiàn)圖像的控制?！薄?/p>

4、現(xiàn)有技術(shù)文獻(xiàn)

5、專利文獻(xiàn)

6、專利文獻(xiàn)1：國際公開號(hào)wo2021/132168a1

7、專利文獻(xiàn)2：日本特開2020-119334號(hào)公報(bào)

技術(shù)實(shí)現(xiàn)思路

1、如上所述，在專利文獻(xiàn)1中，示出根據(jù)用戶的視線相對(duì)于配置的平面的影像虛擬目標(biāo)的位置/方向的偏移、距離，進(jìn)行影像虛擬目標(biāo)畫面的停止、再現(xiàn)控制。其另一方面，完全未考慮能夠從多個(gè)位置、方向視聽的立體的影像虛擬目標(biāo)的情況。因此，考慮針對(duì)立體的影像虛擬目標(biāo)以適當(dāng)?shù)臓顟B(tài)、定時(shí)停止視聽或者再次開始視聽的課題。

2、如上所述，在專利文獻(xiàn)2中，示出根據(jù)與攝像機(jī)工作(攝像機(jī)的位置/姿勢(shì))有關(guān)的信息，控制影像虛擬目標(biāo)的再現(xiàn)。其另一方面，完全未啟示用戶針對(duì)影像虛擬目標(biāo)的視線、與用戶的距離等。因此，考慮無法根據(jù)用戶的視線相對(duì)于影像虛擬目標(biāo)的位置/方向的偏移/距離進(jìn)行影像虛擬目標(biāo)的停止/再現(xiàn)控制這樣的課題。另外，進(jìn)而，在專利文獻(xiàn)2中，雖然示出與適當(dāng)?shù)摹皠?dòng)畫制作”有關(guān)的技術(shù)，但未示出與適當(dāng)?shù)摹耙暵牎庇嘘P(guān)的技術(shù)，存在難以在適當(dāng)?shù)亩〞r(shí)停止或者再次開始“視聽”這樣的課題。

3、因此，本發(fā)明考慮上述課題，其目的在于提供在視聽立體的影像虛擬目標(biāo)時(shí)，能夠簡便地使用性良好地停止或者再次開始視聽的信息處理裝置以及信息處理方法。

4、如果簡單地說明在本技術(shù)中公開的發(fā)明中的、代表性的發(fā)明的概要，則如下所述。

5、(1)一種信息處理裝置，由用戶佩戴，該信息處理裝置具備：處理器，控制立體的影像虛擬目標(biāo)的再現(xiàn)；測位傳感器，檢測用戶的位置；視線傳感器，檢測用戶的視線方向；以及存儲(chǔ)器。處理器將配置再現(xiàn)的影像虛擬目標(biāo)的配置位置、和包括利用測位傳感器檢測出的用戶的位置和利用視線傳感器檢測出的用戶的視線方向的至少1個(gè)的用戶信息記錄到存儲(chǔ)器。另外，處理器在利用測位傳感器檢測到用戶脫離到從配置位置起預(yù)定距離的范圍之外時(shí)，以停止影像虛擬目標(biāo)的再現(xiàn)的方式控制，在停止影像虛擬目標(biāo)的再現(xiàn)之后用戶進(jìn)入上述范圍內(nèi)時(shí)，根據(jù)記錄于存儲(chǔ)器的用戶信息和利用測位傳感器檢測的位置或者利用視線傳感器檢測出的視線方向，以再次開始影像虛擬目標(biāo)的再現(xiàn)的方式控制。

6、(2)在(1)所述的信息處理裝置中，處理器在停止影像虛擬目標(biāo)的再現(xiàn)之后用戶進(jìn)入上述范圍內(nèi)時(shí)，在利用測位傳感器檢測出的位置以及利用視線傳感器檢測出的視線方向與記錄于存儲(chǔ)器的用戶信息對(duì)應(yīng)的情況下，再次開始影像虛擬目標(biāo)的再現(xiàn)。

7、(3)在(1)所述的信息處理裝置中，處理器在停止影像虛擬目標(biāo)的再現(xiàn)之后用戶進(jìn)入上述范圍內(nèi)時(shí)，在利用測位傳感器檢測出的位置或者利用視線傳感器檢測出的視線方向與記錄于存儲(chǔ)器的用戶信息不同的情況下，以通知用戶的方式控制。

8、(4)在(1)所述的信息處理裝置中，處理器在利用視線傳感器檢測出的用戶的視線方向的變化量在預(yù)定時(shí)間的期間是閾值以下的情況下，將處于視線方向的影像虛擬目標(biāo)的范圍作為注視范圍記錄到存儲(chǔ)器，在停止影像虛擬目標(biāo)的再現(xiàn)之后用戶進(jìn)入上述范圍內(nèi)并且用戶的視線方向進(jìn)入注視范圍時(shí)，再次開始影像虛擬目標(biāo)的再現(xiàn)。

9、(5)在(1)所述的信息處理裝置中，處理器將適合視聽影像虛擬目標(biāo)的位置和方向作為適當(dāng)配置信息記錄到存儲(chǔ)器，在停止影像虛擬目標(biāo)的再現(xiàn)之后用戶進(jìn)入上述范圍內(nèi)時(shí)，將記錄于存儲(chǔ)器的適當(dāng)配置信息通知給用戶。

10、(6)在(1)所述的信息處理裝置中，具備顯示利用處理器再現(xiàn)的影像虛擬目標(biāo)的顯示器，處理器在停止影像虛擬目標(biāo)的再現(xiàn)之后用戶進(jìn)入上述范圍內(nèi)并且利用測位傳感器檢測出的位置或者利用視線傳感器檢測出的視線方向與記錄于存儲(chǔ)器的用戶信息不同時(shí)，以使影像虛擬目標(biāo)旋轉(zhuǎn)而顯示于顯示器的方式控制。

11、(7)在(1)所述的信息處理裝置中，具備顯示器，處理器以將影像虛擬目標(biāo)重疊到實(shí)體物而顯示于顯示器的方式控制，在停止影像虛擬目標(biāo)的再現(xiàn)之后用戶進(jìn)入上述范圍內(nèi)并且利用測位傳感器檢測出的位置或者利用視線傳感器檢測出的視線方向與記錄于存儲(chǔ)器的用戶信息不同時(shí)，以根據(jù)實(shí)體物的形狀或者大小使影像虛擬目標(biāo)旋轉(zhuǎn)而顯示于顯示器的方式控制。

12、(8)在(1)所述的信息處理裝置中，處理器在停止影像虛擬目標(biāo)的再現(xiàn)之后用戶進(jìn)入上述范圍內(nèi)時(shí)，以返回到比停止影像虛擬目標(biāo)的再現(xiàn)的位置提前預(yù)定時(shí)間的位置而再次開始影像虛擬目標(biāo)的再現(xiàn)的方式控制。

13、(9)在(1)所述的信息處理裝置中，處理器將多個(gè)再現(xiàn)位置作為進(jìn)行影像虛擬目標(biāo)的再現(xiàn)的位置記錄到存儲(chǔ)器，在停止影像虛擬目標(biāo)的再現(xiàn)之后用戶進(jìn)入上述范圍內(nèi)時(shí)，將多個(gè)再現(xiàn)位置通知給用戶，以從用戶選擇的再現(xiàn)位置再次開始影像虛擬目標(biāo)的再現(xiàn)的方式控制。

14、(10)在(1)所述的信息處理裝置中，處理器在停止影像虛擬目標(biāo)的再現(xiàn)之后即使經(jīng)過預(yù)定時(shí)間用戶也未進(jìn)入范圍內(nèi)時(shí)，對(duì)用戶通知是否使影像虛擬目標(biāo)的再現(xiàn)再次開始，在用戶選擇再次開始再現(xiàn)時(shí)，以將再次開始再現(xiàn)的影像虛擬目標(biāo)配置到與記錄于存儲(chǔ)器的配置位置不同的位置的方式控制。

15、(11)一種信息處理裝置，具有生成并顯示立體的影像虛擬目標(biāo)的功能，由用戶佩戴，其中，該信息處理裝置具備處理器和存儲(chǔ)部，處理器將作為影像虛擬目標(biāo)與用戶的位置以及視線的相互的位置方向關(guān)系的相互配置信息記錄到存儲(chǔ)部，在用戶離開影像虛擬目標(biāo)而影像虛擬目標(biāo)和用戶的距離成為預(yù)定距離以上時(shí)，停止影像虛擬目標(biāo)的再現(xiàn)，在從停止經(jīng)過預(yù)定的經(jīng)過時(shí)間后，以在基于記錄于存儲(chǔ)部的相互配置信息的狀態(tài)下追隨信息處理裝置的活動(dòng)的方式配置影像虛擬目標(biāo)，控制配置的影像虛擬目標(biāo)的再現(xiàn)動(dòng)作。

16、(12)在(11)所述的信息處理裝置中，處理器對(duì)用戶通知是否使配置的影像虛擬目標(biāo)的動(dòng)作再現(xiàn)，在收到通知的用戶選擇使配置的影像虛擬目標(biāo)的動(dòng)作再現(xiàn)的情況下，執(zhí)行配置的影像虛擬目標(biāo)的再現(xiàn)動(dòng)作。

17、(13)在(11)所述的信息處理裝置中，處理器在識(shí)別到影像虛擬目標(biāo)的大小大于預(yù)定的閾值的情況下，將影像虛擬目標(biāo)的大小縮小而配置。

18、(14)在(11)所述的信息處理裝置中，處理器在停止之前，將用戶針對(duì)影像虛擬目標(biāo)注視的注視部位記錄到存儲(chǔ)部，在識(shí)別到影像虛擬目標(biāo)的大小大于預(yù)定的閾值的情況下，配置摘取包括記錄于存儲(chǔ)部的注視部位的預(yù)定區(qū)域的范圍的影像虛擬目標(biāo)。

19、(15)一種由用戶佩戴使用的裝置的信息處理方法，其中，再現(xiàn)立體的影像虛擬目標(biāo)，以與實(shí)體物重疊的方式配置并顯示所再現(xiàn)的影像虛擬目標(biāo)，記錄配置影像虛擬目標(biāo)的配置位置、和包括用戶的位置和用戶的視線方向的至少1個(gè)的用戶信息，在檢測到用戶脫離到從配置位置起預(yù)定距離的范圍之外時(shí)，停止影像虛擬目標(biāo)的再現(xiàn)。在停止影像虛擬目標(biāo)的再現(xiàn)之后用戶進(jìn)入上述范圍內(nèi)時(shí)，根據(jù)記錄的用戶信息再次開始影像虛擬目標(biāo)的再現(xiàn)。

20、通過使用本發(fā)明的技術(shù)，具有能夠?qū)崿F(xiàn)在視聽立體的影像虛擬目標(biāo)時(shí)能夠簡便地使用性良好地停止或者再次開始視聽的信息處理裝置以及信息處理方法這樣的效果。

21、另外，上述以外的課題、結(jié)構(gòu)以及效果通過以下的實(shí)施方式的說明將更加明確。