信息處理裝置和程序的制作方法
【專利摘要】本發(fā)明的目的是在GUI中預(yù)先顯示轉(zhuǎn)變之后的畫面信息。該信息處理裝置包括：畫面識(shí)別單元，用于識(shí)別畫面中包括的輸入元素；輸入信息生成單元，用于生成對(duì)應(yīng)于輸入元素的輸入信息；轉(zhuǎn)變目標(biāo)信息獲取單元，用于獲取關(guān)于畫面的轉(zhuǎn)變目標(biāo)的信息，關(guān)于轉(zhuǎn)變目標(biāo)的信息對(duì)應(yīng)于輸入信息；以及轉(zhuǎn)變目標(biāo)信息輸出單元，用于輸出轉(zhuǎn)變目標(biāo)信息以與畫面分離地顯示轉(zhuǎn)變目標(biāo)信息。
【專利說明】信息處理裝置和程序

【技術(shù)領(lǐng)域】
[0001] 本公開涉及信息處理裝置和程序。

【背景技術(shù)】
[0002] 圖形用戶接口（GUI)常被用作提供給用戶用于操作裝置的接口。例如，用戶執(zhí)行 如下預(yù)定操作，按下諸如按鈕的操作元素并且將項(xiàng)目輸入到顯示在作為⑶I的裝置的顯示 單元上的畫面上的諸如文本框的輸入?yún)^(qū)域，以向裝置提供多種輸入。
[0003] -般而言，所顯示的畫面根據(jù)來自用戶的輸入轉(zhuǎn)變到這種⑶I上的其他畫面。諸 如移動(dòng)電話和家用電器的電子裝置的操作畫面通常從示意性顯示功能的主菜單轉(zhuǎn)變成顯 示在主菜單上選擇的功能的詳細(xì)菜單。例如，輸入的地址和所選擇的鏈接使計(jì)算機(jī)的web 瀏覽器依次獲取并顯示新的網(wǎng)頁。
[0004] 盡管顯示在⑶I上的畫面轉(zhuǎn)變到其他畫面，但是相當(dāng)多的用戶經(jīng)常希望不止一次 地觀看轉(zhuǎn)變之前的畫面。例如，電子裝置的操作畫面頻繁地具有位于其上的"后退"按鈕以 允許詳細(xì)的菜單轉(zhuǎn)變?yōu)樗鼈兊闹鞑藛?。web瀏覽器也具有位于其上的"后退"按鈕，使得web 瀏覽器能夠再次顯示由裝置緩存的轉(zhuǎn)變之前的網(wǎng)頁。
[0005] 專利文獻(xiàn)1描述了一種用于改進(jìn)在web瀏覽器上顯示轉(zhuǎn)變之前的網(wǎng)頁的功能的技 術(shù)。例如，該技術(shù)具有被存儲(chǔ)的所顯示的網(wǎng)頁的圖像以允許用戶檢查關(guān)于甚至在轉(zhuǎn)變之后 未緩存的頁面的顯示信息。
[0006] 引用文獻(xiàn)列表
[0007] 專利文獻(xiàn)
[0008] 專利文獻(xiàn) 1 :JP 2011_2〇4158A


【發(fā)明內(nèi)容】

[0009] 技術(shù)問題
[0010] 一些用戶希望觀看轉(zhuǎn)變之前的畫面，并且其他用戶希望觀看轉(zhuǎn)變之后的畫面。然 而，上述技術(shù)不能滿足這些需求。此外，沒有提供用于滿足這些需求的其他技術(shù)。
[0011] 因而本公開設(shè)計(jì)了新型的和改進(jìn)的信息處理裝置和程序，其能夠預(yù)先在⑶I上顯 示關(guān)于轉(zhuǎn)變之后的畫面的信息。
[0012] 對(duì)問題的解決方案
[0013] 根據(jù)本公開，提供了一種信息處理裝置，其包括：畫面識(shí)別單元，被配置成識(shí)別畫 面中包括的輸入元素；輸入信息生成單元，被配置成生成對(duì)應(yīng)于輸入元素的輸入信息；轉(zhuǎn) 變目標(biāo)信息獲取單元，被配置成獲取關(guān)于畫面的轉(zhuǎn)變目標(biāo)的信息，關(guān)于轉(zhuǎn)變目標(biāo)的信息對(duì) 應(yīng)于輸入信息；以及轉(zhuǎn)變目標(biāo)信息輸出單元，被配置成輸出關(guān)于轉(zhuǎn)變目標(biāo)的信息以與畫面 分離地顯示關(guān)于轉(zhuǎn)變目標(biāo)的信息。
[0014] 此外，根據(jù)本公開，提供了一種程序，用于使計(jì)算機(jī)執(zhí)行：識(shí)別畫面中包括的輸入 元素的功能；生成與輸入元素對(duì)應(yīng)的輸入信息的功能；獲取關(guān)于畫面的轉(zhuǎn)變目標(biāo)的信息的 功能，關(guān)于轉(zhuǎn)變目標(biāo)的信息與輸入信息對(duì)應(yīng)；以及輸出關(guān)于轉(zhuǎn)變目標(biāo)的信息以與畫面分離 地顯示關(guān)于轉(zhuǎn)變目標(biāo)的信息的功能。
[0015] 用戶生成對(duì)應(yīng)于用戶的輸入元素的輸入信息以在⑶I上提供輸入。基于輸入信息 預(yù)先獲取并輸出關(guān)于畫面的轉(zhuǎn)變目標(biāo)的信息。這在用戶實(shí)際輸入信息以使畫面轉(zhuǎn)變到轉(zhuǎn)變 之后的畫面之前，允許用戶獲取關(guān)于轉(zhuǎn)變之后的畫面的信息。
[0016] 本發(fā)明的有利效果
[0017] 根據(jù)如上文所述的本公開，可以顯示在⑶I上預(yù)先顯示關(guān)于轉(zhuǎn)變之后的畫面的信 息。

【專利附圖】

【附圖說明】
[0018] 圖1是圖示根據(jù)本公開的第一實(shí)施例的信息處理裝置的外觀的示圖。
[0019] 圖2是圖示在本公開的第一實(shí)施例中顯示的畫面的示例的示圖。
[0020] 圖3是示出在圖2的示例中在沒有任何轉(zhuǎn)變目標(biāo)顯示的情況下畫面轉(zhuǎn)變的示圖。
[0021] 圖4是圖示本公開的第一實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的示例的示圖。
[0022] 圖5是圖示本公開的第一實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的示例的示圖。
[0023] 圖6是圖示根據(jù)本公開的第一實(shí)施例的信息處理裝置的示意性功能配置的框圖。
[0024] 圖7是圖示本公開的第一實(shí)施例中的處理示例的流程圖。
[0025] 圖8是圖示本公開的第二實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的第一示例的示圖。
[0026] 圖9是圖示本公開的第二實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的第二示例的示圖。
[0027] 圖10是圖示本公開的第二實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的第三示例的示圖。
[0028] 圖11是圖示本公開的第二實(shí)施例中的處理示例的流程圖。
[0029] 圖12是示出在圖2的示例中在沒有任何轉(zhuǎn)變目標(biāo)顯示的情況下畫面轉(zhuǎn)變的示圖。
[0030] 圖13是示出在圖2的示例中在沒有任何轉(zhuǎn)變目標(biāo)顯示的情況下畫面轉(zhuǎn)變的示圖。
[0031] 圖14是圖示本公開的第三實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的示例的示圖。
[0032] 圖15是圖示根據(jù)本公開的第四實(shí)施例的信息處理裝置的外觀的示圖。
[0033] 圖16是圖示本公開的第四實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的第一示例的示圖。
[0034] 圖17是圖示本公開的第四實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的第二示例的示圖。
[0035] 圖18是圖示根據(jù)本公開的第四實(shí)施例的信息處理裝置的示意性功能配置的框 圖。
[0036] 圖19是圖示根據(jù)本公開的第五實(shí)施例的裝置的外觀的示圖。
[0037] 圖20是圖示在本公開的第五實(shí)施例中顯示的操作畫面的示例的示圖。
[0038] 圖21是圖示在本公開的第五實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的示例的示圖。
[0039] 圖22是圖示在本公開的第五實(shí)施例中顯示的操作畫面的另一示例的示圖。
[0040] 圖23是圖示根據(jù)本公開的第五實(shí)施例的信息處理裝置的示意性功能配置的框 圖。
[0041] 圖24是圖示根據(jù)本公開的第五實(shí)施例的信息處理裝置的替選功能配置的框圖。
[0042] 圖25是用于描述信息處理裝置的硬件配置的框圖。

【具體實(shí)施方式】
[0043] 以下將參照附圖詳細(xì)描述本發(fā)明的優(yōu)選實(shí)施例。注意，在本說明書和附圖中，具有 基本上相同的功能和結(jié)構(gòu)的元素由相同的附圖標(biāo)記表示，并且省略了重復(fù)的說明。
[0044] 描述將按以下順序進(jìn)行。
[0045] 1.第一實(shí)施例：web瀏覽器上的轉(zhuǎn)變目標(biāo)顯示
[0046] 2.第二實(shí)施例：轉(zhuǎn)變目標(biāo)顯示
[0047] 3.第三實(shí)施例：轉(zhuǎn)變目標(biāo)序列的顯示
[0048] 4.第四實(shí)施例：顯示單元
[0049] 5.第五實(shí)施例：與顯示畫面的裝置不同的裝置上的顯示
[0050] 6.硬件配置
[0051] 7.補(bǔ)充
[0052] (1.第一實(shí)施例：web瀏覽器上的轉(zhuǎn)變目標(biāo)顯示）
[0053] 首先，將參照?qǐng)D1至7描述本公開的第一實(shí)施例。
[0054] (裝置配置）
[0055] 圖1是圖示根據(jù)本公開的第一實(shí)施例的信息處理裝置的外觀的示圖。根據(jù)本實(shí)施 例的信息處理裝置是如圖中所示的筆記本個(gè)人計(jì)算機(jī)（PC) 100。除了圖示示例之外，根據(jù)本 實(shí)施例的信息處理裝置的示例可以包括多種裝置，諸如平板PC、桌面型PC和移動(dòng)電話（智 能電話），只要它們具有如下文討論的web瀏覽器的功能即可。
[0056] PC 100包括顯示單元110。例如，顯示單元110由液晶顯示器（IXD)、有機(jī)電致發(fā) 光（EL)顯示器等。將在本實(shí)施例中描述顯示單元110上顯示的web瀏覽器，但是顯示單元 110可以進(jìn)一步顯示關(guān)于PC 100的處理的諸如多種圖像和文本的信息。
[0057] (畫面顯示的示例）
[0058] 圖2是圖示在本公開的第一實(shí)施例中顯示的畫面的示例的示圖。PC100的顯示單 元110顯示web瀏覽器畫面1101。例如，web瀏覽器畫面1101根據(jù)輸入地址和所選鏈接轉(zhuǎn) 變到其他畫面。在圖示示例中用于航線預(yù)定的頁面顯示在web瀏覽器畫面1101中。然而， 毋庸贅言，可以顯示任何其他頁面。圖示web瀏覽器畫面1101的設(shè)計(jì)完全不限制本公開的 實(shí)施例。
[0059] web瀏覽器畫面1101包括作為輸入元素的按鈕1102。在圖示示例中，按鈕1102 包括與諸如"預(yù)定"和"空座搜索"的功能對(duì)應(yīng)的四個(gè)按鈕1102a至1102d。一旦用戶按下 任何按鈕1102(更具體地，用戶用鼠標(biāo)、觸摸板等點(diǎn)擊、雙擊或輕叩按鈕），web瀏覽器畫面 1101轉(zhuǎn)變到與每個(gè)功能對(duì)應(yīng)的頁面。用于使畫面轉(zhuǎn)變的如按鈕1102的輸入元素在下文中 還將被稱為提交元素。
[0060] 當(dāng)用戶按下按鈕1102時(shí)，PC 100向web服務(wù)器傳送指示"按鈕1102已被按下"的 信息。該信息可以被視為與作為輸入元素的按鈕1102對(duì)應(yīng)的輸入信息。該信息也是指示 作為提交元素的按鈕1102已執(zhí)行提交操作的輸入信息。
[0061] 接收到指示"按鈕1102已被按下"的輸入信息的web服務(wù)器生成關(guān)于與該輸入 信息對(duì)應(yīng)的web瀏覽器畫面1101的轉(zhuǎn)變目標(biāo)的信息，并且隨后將所生成的信息傳送到PC 100。PC 100根據(jù)從web服務(wù)器接收到的信息使web瀏覽器畫面1101轉(zhuǎn)變。
[0062](無轉(zhuǎn)變目標(biāo)顯示）
[0063] 圖3是示出在圖2的示例中在沒有任何轉(zhuǎn)變目標(biāo)顯示的情況下畫面轉(zhuǎn)變的示圖。 在圖示示例中關(guān)于"預(yù)定"的按鈕1102a已被按下。由于在該示例中用戶仍未登錄，因此顯 示錯(cuò)誤消息，指示"您必須登錄以進(jìn)行在線預(yù)定"。
[0064] 在該情況下，用戶可以例如通過按下"后退"按鈕等返回轉(zhuǎn)變之前的畫面。然而， 例如，在畫面已轉(zhuǎn)變之后，無緩存頁面等有時(shí)不允許用戶返回。在該情況下，用戶除了關(guān)閉 瀏覽器并且隨后再次訪問該頁面以外沒有其他選擇。這種情形會(huì)浪費(fèi)用戶的時(shí)間并且困擾 用戶。然而，在沒有如下文討論的任何轉(zhuǎn)變目標(biāo)顯示的情況下，用戶難于預(yù)測(cè)這些情形。 [0065] 毋庸贅言，理想的是涉及一種網(wǎng)頁，其中例如對(duì)于仍未登錄的用戶禁用關(guān)于"預(yù) 定"的按鈕1102a等以便防止上述情形。然而，從所有網(wǎng)頁預(yù)見該最優(yōu)設(shè)計(jì)總是不現(xiàn)實(shí)的。 [0066] 因此，在本實(shí)施例中預(yù)先顯示關(guān)于在按鈕1102被按下的情況下顯示的轉(zhuǎn)變目標(biāo) 的信息以在用戶實(shí)際按下按鈕1102之前，允許用戶了解按下按鈕1102是否帶來期望的結(jié) 果。
[0067](轉(zhuǎn)變目標(biāo)顯示的示例）
[0068] 圖4和5是均圖示根據(jù)本公開的第一實(shí)施例的轉(zhuǎn)變目標(biāo)顯示的示例的示圖。在圖 4的示例中，在光標(biāo)位于按鈕1102a上時(shí)（按鈕1102a仍未被按下），顯示在關(guān)于"預(yù)定"的 按鈕1102a被按下的情況下顯示的轉(zhuǎn)變目標(biāo)的畫面圖像（圖3中的錯(cuò)誤畫面）作為轉(zhuǎn)變目 標(biāo)顯示1103。
[0069] 例如，當(dāng)PC 100新發(fā)起與其中在web瀏覽器畫面1101上顯示頁面的會(huì)話（以下 還將稱為主會(huì)話）不同的會(huì)話（以下將稱為子會(huì)話），并且隨后在該會(huì)話中向web服務(wù)器傳 送指示"按鈕1102a已被按下"的輸入信息時(shí)，可以獲取用于顯示轉(zhuǎn)變目標(biāo)顯示1103的信 息。在子會(huì)話中傳送的輸入信息實(shí)際上不是用戶輸入的，而是由PC 100生成。
[0070] 這預(yù)先向用戶通知如果用戶按下按鈕1102a，則用戶將使畫面轉(zhuǎn)變到如圖3中所 示的錯(cuò)誤畫面并且陷入麻煩，使得用戶可以避免按下按鈕1102a。
[0071] 同時(shí)，在圖5的示例中，在指針位于按鈕1102b上時(shí)（按鈕1102b仍未被按下），顯 示在關(guān)于"空座搜索"的按鈕1102b被按下的情況下顯示的轉(zhuǎn)變目標(biāo)的畫面圖像，作為轉(zhuǎn)變 目標(biāo)顯示1103。
[0072] 這允許用戶預(yù)先識(shí)別，即使當(dāng)用戶仍未登錄時(shí)，仍可以使用在按動(dòng)按鈕1102b被 按下的情況下顯示的轉(zhuǎn)變目標(biāo)，使得用戶可以沒有拘束地按動(dòng)按鈕1102b。
[0073] (功能塊）
[0074] 圖6是圖示根據(jù)本公開的第一實(shí)施例的信息處理裝置的示意性功能配置的框圖。
[0075] PC 100包括顯示單元110、顯示控制單元120、畫面識(shí)別單元130、輸入信息生成單 元140、轉(zhuǎn)變目標(biāo)信息獲取單元150和轉(zhuǎn)變目標(biāo)信息輸出單元160。除顯示單元110以外的 結(jié)構(gòu)元件可以使用例如中央處理單元（CPU)、隨機(jī)存取存儲(chǔ)器（RAM)和只讀存儲(chǔ)器（ROM)被 實(shí)現(xiàn)為軟件。
[0076] 顯示控制單元120控制顯示單元110以在顯示單元110上顯示web瀏覽器畫面 1101和轉(zhuǎn)變目標(biāo)顯示1103。顯示控制單元120根據(jù)從圖中未示出的操作單元獲取的用戶 操作從web服務(wù)器200獲取用于顯示web瀏覽器畫面1101的信息。例如，獲取實(shí)際按下在 web瀏覽器畫面1101上顯示的按鈕1102的用戶操作，將基于該操作的輸入信息（指示按鈕 1102已被按下）傳送到web服務(wù)器200,并且從web服務(wù)器傳送與輸入信息對(duì)應(yīng)的關(guān)于畫 面的轉(zhuǎn)變目標(biāo)的信息，這允許獲取用于顯示web瀏覽器畫面1101的信息。此外，在關(guān)于本 實(shí)施例的描述中省略了關(guān)于這種"通常畫面轉(zhuǎn)變"的功能配置，因?yàn)樵摴δ芘渲檬浅Ｓ玫摹?br> [0077] 同時(shí)，顯示控制單元120從轉(zhuǎn)變目標(biāo)信息輸出單元160獲取用于顯示轉(zhuǎn)變目標(biāo)顯 示1103的關(guān)于轉(zhuǎn)變目標(biāo)的信息?；陉P(guān)于當(dāng)前顯示的web瀏覽器畫面1101中包括的諸如 按鈕1102的輸入元素的信息來獲取關(guān)于轉(zhuǎn)變目標(biāo)的信息。因此，顯示控制單元120還向畫 面識(shí)別單元130提供用于顯示web瀏覽器畫面1101的信息，允許獲取關(guān)于轉(zhuǎn)變目標(biāo)的信 息。
[0078] 畫面識(shí)別單元130基于從顯示控制單元120獲取的信息識(shí)別作為web瀏覽器畫面 1101中包括的輸入元素的按鈕1102。從顯示控制單元120提供給畫面識(shí)別單元130的信 息可以是例如網(wǎng)頁的源代碼。例如，畫面識(shí)別單元130可以通過檢測(cè)來自源代碼的字符串 來識(shí)別按鈕1102和針對(duì)按鈕1102設(shè)定的屬性，該字符串表示按鈕1102。
[0079] 作為示例，當(dāng)以超文本標(biāo)記語言（HTML)編寫網(wǎng)頁時(shí)，畫面識(shí)別單元130從源代碼 中提取表不諸如"〈a href = "reserve. html">〈img src = ''reserve, gif" ·· .X/a〉" 的 鏈接的字符串。此外，該字符串被顯示為web瀏覽器畫面1101上的按鈕1102。畫面識(shí)別單 元130可以進(jìn)一步獲取諸如"href (指示去往其他頁面等的鏈接）"和"reserve, html (鏈 接目標(biāo)的統(tǒng)一資源定位符（URL))"的信息作為按鈕1102的屬性。
[0080] 輸入信息生成單元140生成與畫面識(shí)別單元130識(shí)別的輸入元素對(duì)應(yīng)的輸入信 息。如上文討論的，與作為提交元素的按鈕1102對(duì)應(yīng)的輸入信息可以指示按鈕1102已執(zhí)行 提交操作。在HTML的示例中這可以是指定URL "reserve, html"的請(qǐng)求。就是說，在本實(shí) 施例中，輸入信息生成單元140生成在按鈕1102被按下的情況下將傳送到web服務(wù)器200 的信息作為輸入信息。
[0081] 轉(zhuǎn)變目標(biāo)信息獲取單元150從web服務(wù)器200獲取關(guān)于與輸入信息生成單元140 生成的輸入信息對(duì)應(yīng)的轉(zhuǎn)變目標(biāo)的信息。更具體地，例如，轉(zhuǎn)變目標(biāo)信息獲取單元150向 web服務(wù)器200傳送包括所生成的輸入信息的請(qǐng)求，并且隨后從web服務(wù)器200接收作為對(duì) 該請(qǐng)求的響應(yīng)的關(guān)于轉(zhuǎn)變目標(biāo)的畫面的信息。如上文討論的，當(dāng)轉(zhuǎn)變目標(biāo)被顯示時(shí)，web瀏 覽器畫面1101自身不轉(zhuǎn)變。轉(zhuǎn)變目標(biāo)信息獲取單元150因此可以使用與用于顯示web瀏 覽器畫面1101的主會(huì)話不同的子會(huì)話與web服務(wù)器200通信。
[0082] 轉(zhuǎn)變目標(biāo)信息輸出單元160向顯示控制單元120輸出由轉(zhuǎn)變目標(biāo)信息獲取單元 150獲取的關(guān)于轉(zhuǎn)變目標(biāo)的信息以便與web瀏覽器畫面1101分離地顯示由轉(zhuǎn)變目標(biāo)信息獲 取單元150獲取的關(guān)于轉(zhuǎn)變目標(biāo)的信息作為轉(zhuǎn)變顯示1103。與web瀏覽器畫面1101分離 地顯示由轉(zhuǎn)變目標(biāo)信息獲取單元150獲取的關(guān)于轉(zhuǎn)變目標(biāo)的信息意味著，在保持顯示web 瀏覽器畫面1101的同時(shí)，分離地顯示由轉(zhuǎn)變目標(biāo)信息獲取單元150獲取的關(guān)于轉(zhuǎn)變目標(biāo)的 信息。例如，如上述示例中的那樣，轉(zhuǎn)變目標(biāo)顯示1103可以與web瀏覽器畫面1101的一部 分重疊。替選地，轉(zhuǎn)變目標(biāo)顯示1103可以被顯示成不與web瀏覽器畫面1101重疊，或者可 以與全部web瀏覽器畫面1101重疊以臨時(shí)使web瀏覽器畫面1101不可見。
[0083] (處理過程）
[0084] 圖7是圖示本公開的第一實(shí)施例中的處理示例的流程圖。
[0085] 首先，畫面識(shí)別單元130識(shí)別作為輸入元素的按鈕1102,參考關(guān)于顯示單元110上 的光標(biāo)位置的信息，并且確定光標(biāo)是否位于按鈕1102上（步驟S101)。
[0086] 接下來，輸入信息生成單元140生成與光標(biāo)所在的按鈕1102對(duì)應(yīng)的輸入信息（步 驟S103)。這里生成的輸入信息可以例如指示"按鈕1102已被按下"。
[0087] 接下來，轉(zhuǎn)變目標(biāo)信息獲取單元150將由輸入信息生成單元140生成的輸入信息 傳送到web服務(wù)器200 (步驟S105)。如上文討論的，轉(zhuǎn)變目標(biāo)信息獲取單元150可以在與 主會(huì)話不同的子會(huì)話中傳送輸入信息。例如，如圖4和5的示例中的那樣，如果在web瀏覽 器畫面1101上顯示頁面的同時(shí)新顯示轉(zhuǎn)變目標(biāo)顯示1103,則轉(zhuǎn)變目標(biāo)信息獲取單元150新 發(fā)起子會(huì)話并且傳送輸入信息。
[0088] 接下來，轉(zhuǎn)變目標(biāo)信息獲取單元150從web服務(wù)器200接收轉(zhuǎn)變目標(biāo)信息（步驟 S107)。轉(zhuǎn)變目標(biāo)信息是關(guān)于web服務(wù)器200基于在步驟S105中傳送的輸入信息生成的畫 面的信息，并且在轉(zhuǎn)變目標(biāo)信息直接顯示在web瀏覽器畫面1101上的情況下可以引起正常 畫面轉(zhuǎn)變。
[0089] 接下來，轉(zhuǎn)變目標(biāo)信息輸出單元160將接收到的轉(zhuǎn)變目標(biāo)信息提供給顯示控制單 元120,并且顯示控制單元120將轉(zhuǎn)變目標(biāo)顯示1103顯示在顯示單元110上（步驟S109)。 如上文討論的，在本實(shí)施例中與web瀏覽器畫面1101分離地顯示轉(zhuǎn)變目標(biāo)顯示1103。
[0090] (2.第二實(shí)施例：轉(zhuǎn)變目標(biāo)顯示）
[0091] 接下來，將參照?qǐng)D8至11描述本公開的第二實(shí)施例。
[0092] 由于本實(shí)施例具有與第一實(shí)施例相同的裝置配置和相同的功能塊，因此將省略詳 細(xì)描述。
[0093] (轉(zhuǎn)變目標(biāo)顯示的示例）
[0094] 圖8是圖示本公開的第二實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的第一示例的示圖。在圖示示 例中光標(biāo)位于關(guān)于"預(yù)定"的按鈕1102a和關(guān)于"空座搜索"的按鈕1102b之間的空間周圍。 一旦按鈕1102a和1102b被按下，則分別顯示下一畫面作為轉(zhuǎn)變目標(biāo)顯示1103a和1103b。
[0095] 這樣，在本實(shí)施例中針對(duì)在web瀏覽器畫面1101上顯示的每個(gè)按鈕1102顯示第 一實(shí)施例中描述的相同的轉(zhuǎn)變目標(biāo)顯示1103?？梢匀鐖D中所示顯示用于使每個(gè)按鈕1102 與轉(zhuǎn)變目標(biāo)顯示1103相關(guān)聯(lián)的鏈接，以指示每個(gè)按鈕1102和轉(zhuǎn)變目標(biāo)顯示1103之間的關(guān) 系。替選地，轉(zhuǎn)變目標(biāo)顯示1103也可以與相應(yīng)的按鈕1102重疊。
[0096] 在上述示例中針對(duì)光標(biāo)附近的按鈕1102顯示轉(zhuǎn)變目標(biāo)顯示1103,并且被顯示轉(zhuǎn) 變目標(biāo)顯示1103的按鈕1102仍不必受限。例如，可以針對(duì)所有按鈕1102a至1102d顯示 轉(zhuǎn)變目標(biāo)顯示1103。
[0097] 圖9是圖示本公開的第二實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的第二示例的示圖。在圖示示 例中，當(dāng)web瀏覽器畫面1101上顯示的每個(gè)按鈕1102a至1102d被按下時(shí)，轉(zhuǎn)變目標(biāo)被顯 示為轉(zhuǎn)變目標(biāo)顯示ll〇3e。例如，在轉(zhuǎn)變目標(biāo)顯示1103e中，一旦每個(gè)按鈕1102被按下，可 以通過切換具有按鈕1102的名稱的選項(xiàng)卡來顯示下一畫面。
[0098] 即使當(dāng)例如在顯示單元110中剩下少量區(qū)域時(shí)，這仍允許顯示關(guān)于按鈕1102的轉(zhuǎn) 變目標(biāo)顯示ll〇3e。此外,被顯示轉(zhuǎn)變目標(biāo)顯示1103e的按鈕1102不必是web瀏覽器畫面 1101中包括的所有按鈕1102。例如，不必針對(duì)畫面的頁頭、頁腳等上顯示的典型按鈕（諸 如用于返回主頁的按鈕和用于切換語言的按鈕）顯示轉(zhuǎn)變目標(biāo)顯示ll〇3e，盡管圖9沒有示 出它們中的任何一個(gè)。
[0099] 圖10是圖示本公開的第二實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的第三示例的示圖。在圖示 示例中，當(dāng)web瀏覽器畫面1101上顯示的按鈕1102a至1102d被按下時(shí)，轉(zhuǎn)變目標(biāo)分別被 顯示為轉(zhuǎn)變目標(biāo)代碼1104a至1104d。轉(zhuǎn)變目標(biāo)代碼1104被包括顯示單元110的用于獲取 捕獲圖像的其他設(shè)備轉(zhuǎn)換成轉(zhuǎn)變目標(biāo)的畫面圖像。在圖示示例中二維碼被顯示為轉(zhuǎn)變目標(biāo) 代碼1104,并且也可以使用其他類型的代碼。
[0100] 作為信息處理裝置100和包括顯示單元110的用于獲取捕獲圖像的其他設(shè)備的具 體示例，信息處理裝置100包括例如桌面型PC和電視機(jī)，并且該其他設(shè)備包括智能電話。在 該情況下，智能電話利用相機(jī)（成像設(shè)備）獲取圖像，即示出PC或電視機(jī)的顯示單元的圖 像，識(shí)別該圖像中包括的轉(zhuǎn)變目標(biāo)代碼1104,并且使用轉(zhuǎn)變目標(biāo)代碼1104中包括的信息來 顯示轉(zhuǎn)變目標(biāo)的畫面圖像。該顯示可以被顯示為例如增強(qiáng)現(xiàn)實(shí)（AR)。
[0101] 上述捕獲圖像可以甚至使用顯示單元110周圍的空間來顯示轉(zhuǎn)變目標(biāo)的畫面圖 像。例如，較之在顯示單元110自身上顯示，這樣可以顯示更多的畫面圖像。因此，例如即使 當(dāng)在顯示單元110中留下少量區(qū)域時(shí)，仍可以顯示關(guān)于按鈕1102的轉(zhuǎn)變目標(biāo)的畫面圖像。
[0102] 因此，甚至在其中顯示轉(zhuǎn)變目標(biāo)的畫面圖像的其他實(shí)施例中，使用轉(zhuǎn)變目標(biāo)代碼 1104而非顯示畫面圖像，通過這種方式也還可以顯示轉(zhuǎn)變目標(biāo)信息。
[0103] (處理過程）
[0104] 圖11是圖示本公開的第二實(shí)施例中的處理示例的流程圖。
[0105] 首先，畫面識(shí)別單元130識(shí)別作為輸入元素的按鈕1102 (步驟S201)。在本實(shí)施例 中畫面識(shí)別單元130識(shí)別多個(gè)按鈕1102。web瀏覽器畫面1101中包括的所有按鈕1102或 其一部分可以被識(shí)別。例如，識(shí)別的按鈕1102可以限于位于顯示單元110上的光標(biāo)周圍的 按鈕1102?？梢詮淖R(shí)別目標(biāo)中排除除了畫面的頁頭和頁腳以外的區(qū)域中包括的按鈕1102。
[0106] 接下來，輸入信息生成單元140生成與識(shí)別的按鈕1102對(duì)應(yīng)的輸入信息（步驟 S203)。由于在本實(shí)施例中識(shí)別多個(gè)按鈕1102,因此輸入信息生成單元140生成關(guān)于每個(gè)按 鈕1102的輸入信息。更具體地，這里生成的輸入信息可以指示被識(shí)別為提交元素的每個(gè)按 鈕1102已執(zhí)行提交操作。
[0107] 接下來，轉(zhuǎn)變目標(biāo)信息獲取單元150將由輸入信息生成單元140生成的輸入信息 傳送到web服務(wù)器200 (步驟S205)。轉(zhuǎn)變目標(biāo)信息獲取單元150可以在關(guān)于各個(gè)按鈕1102 的分立的子會(huì)話中傳送輸入信息。例如，如圖8的示例中的那樣，當(dāng)檢測(cè)到兩個(gè)按鈕1102a 和1102b時(shí)，轉(zhuǎn)變目標(biāo)信息獲取單元150新發(fā)起兩個(gè)子會(huì)話并且傳送輸入信息。
[0108] 接下來，轉(zhuǎn)變目標(biāo)信息獲取單元150從web服務(wù)器200接收轉(zhuǎn)變目標(biāo)信息（步驟 S207)。轉(zhuǎn)變目標(biāo)信息是關(guān)于在web服務(wù)器200中基于在步驟S205中傳送的輸入信息生成 的畫面的信息。如果轉(zhuǎn)變目標(biāo)信息顯示在web瀏覽器畫面1101上，則畫面將正常轉(zhuǎn)變。由 于在本實(shí)施例中針對(duì)多個(gè)按鈕1102生成并傳送輸入信息，因此轉(zhuǎn)變目標(biāo)信息獲取單元150 接收關(guān)于各個(gè)按鈕1102的轉(zhuǎn)變目標(biāo)信息。
[0109] 接下來，轉(zhuǎn)變目標(biāo)信息輸出單元160將接收到的轉(zhuǎn)變目標(biāo)信息提供給顯示控制單 元120,并且顯示控制單元120將轉(zhuǎn)變目標(biāo)顯示1103(或者轉(zhuǎn)變目標(biāo)代碼1104)顯示在顯示 單元110上（步驟S209)。如上文討論的，在本實(shí)施例中以某種方式與相應(yīng)的按鈕1102相 關(guān)聯(lián)地顯示轉(zhuǎn)變目標(biāo)顯示1103 (或者轉(zhuǎn)變目標(biāo)代碼1104)。
[0110] (3.第三實(shí)施例：轉(zhuǎn)變目標(biāo)序列的顯示）
[0111] 接下來，將參照?qǐng)D12至14描述本公開的第三實(shí)施例。
[0112] 由于本實(shí)施例具有與第一實(shí)施例或第二實(shí)施例相同的裝置配置，因此將省略詳細(xì) 描述。
[0113] (無轉(zhuǎn)變目標(biāo)顯示）
[0114] 圖12和13是均示出在圖2的上述示例中在沒有任何轉(zhuǎn)變目標(biāo)顯示的情況下畫面 轉(zhuǎn)變的示圖。在圖示示例中關(guān)于"會(huì)員注冊(cè)"的按鈕ll〇2d被按下。在該情況下，web瀏覽 器畫面1101顯示圖12中所示的關(guān)于會(huì)員注冊(cè)的第一頁面作為轉(zhuǎn)變目標(biāo)。第一頁面包括姓 名、年齡和地址的輸入框1105。在用戶將預(yù)定項(xiàng)輸入到輸入框1105之后，用戶按下"下一 步"按鈕1102n。web瀏覽器畫面1101隨后轉(zhuǎn)變到圖13中所示的關(guān)于會(huì)員注冊(cè)的第二頁 面。
[0115] 圖13中所示的關(guān)于會(huì)員注冊(cè)的第二頁面包括關(guān)于信用卡號(hào)碼和有效期的輸入框 1105。在用戶將預(yù)定項(xiàng)輸入到輸入框1105之后，用戶按下"下一步"按鈕1102η。
[0116] 在上述畫面轉(zhuǎn)變中直到每個(gè)頁面被顯示之前用戶不了解要求用戶輸入什么類型 的項(xiàng)。因此，例如不喜歡用他們的信用卡在線支付的用戶在第一頁面上輸入他們的姓名和 地址，但是直到第二頁面被顯示之前不知道要求信用卡交易。結(jié)果，用戶放棄會(huì)員注冊(cè)（用 戶將例如最終選擇通過電話預(yù)定）。在該情況下，用戶徒然在第一頁面上輸入他們的姓名 等。包括姓名的個(gè)人信息被傳送到web服務(wù)器200,這最終也完全無用。
[0117] (轉(zhuǎn)變目標(biāo)顯示的示例）
[0118] 圖14是圖示本公開的第三實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的示例的示圖。當(dāng)利用位于 按鈕1102d上的光標(biāo)按下"會(huì)員注冊(cè)"按鈕1102d時(shí)（按鈕1102d仍未被按下），轉(zhuǎn)變目標(biāo) (圖12中所示的關(guān)于會(huì)員注冊(cè)的第一頁面）被顯示為圖14的示例中的第一轉(zhuǎn)變目標(biāo)顯示 1103dl。
[0119] 此外，當(dāng)光標(biāo)移動(dòng)到第一轉(zhuǎn)變目標(biāo)顯示1103dl上包括的按鈕1102η時(shí)，在關(guān)于會(huì) 員注冊(cè)的第一頁面上按下按鈕1102d的情況下顯示的轉(zhuǎn)變目標(biāo)（圖13中所示的關(guān)于會(huì)員 注冊(cè)的第二頁面）被顯示為第二轉(zhuǎn)變目標(biāo)顯示1103d2。此外，關(guān)于包括第一轉(zhuǎn)變目標(biāo)顯示 1103dl和第二轉(zhuǎn)變目標(biāo)顯示1103d2的畫面序列的信息不必如示例那樣逐一顯示。這些信 息可以被同時(shí)顯不。
[0120] 姓名、年齡和地址是關(guān)于會(huì)員注冊(cè)的第一頁面上的基本輸入項(xiàng)。在沒有輸入這些 項(xiàng)的情況下將顯示錯(cuò)誤，即便按下了"下一步"按鈕1102η。因此，當(dāng)在輸入信息生成單元 140顯示第一轉(zhuǎn)變目標(biāo)顯示1103a之后顯示第二轉(zhuǎn)變目標(biāo)顯示1103b時(shí)，輸入信息生成單 元140生成第一轉(zhuǎn)變目標(biāo)顯示1103a上的輸入項(xiàng)的偽項(xiàng)1106(圖中的姓名"AB⑶EF"、年齡 "30"和地址"AB⑶EFGH"）并且隨后連同指示"按鈕1102η已被按下"的信息一起將它們傳 送到web服務(wù)器200作為輸入信息。
[0121] 這允許用戶知曉在用戶按下按鈕1102的情況下顯示的畫面的轉(zhuǎn)變，同時(shí)用戶不 必陷入輸入這些項(xiàng)的麻煩并且避免了將不必要的信息傳送到web服務(wù)器的風(fēng)險(xiǎn)。因此，如 在不喜歡在線支付的用戶的示例中的那樣，如果按鈕1102被按下之后的畫面轉(zhuǎn)變導(dǎo)致失 望的結(jié)果，則用戶可以在沒有任何麻煩和風(fēng)險(xiǎn)的情況下避免按下某個(gè)按鈕1102。
[0122] (功能塊）
[0123] 返回圖6,將主要描述本實(shí)施例中的信息處理裝置的功能塊和第一實(shí)施例的功能 塊之間的區(qū)別。
[0124] 在本實(shí)施例中畫面識(shí)別單元130基于從顯示控制單元120獲取的信息來識(shí)別web 瀏覽器畫面1101中包括的作為輸入元素的按鈕1102,并且還識(shí)別輸入框1105。在本實(shí)施 例中輸入框1105也是輸入兀素。用于輸入諸如文本的項(xiàng)的輸入兀素如輸入框1105在下文 中也可被稱為錄入元素。
[0125] 畫面識(shí)別單元130不僅獲取關(guān)于被顯示為web瀏覽器畫面1101的畫面的信息，而 且還從顯示控制單元120獲取關(guān)于被顯示為轉(zhuǎn)變目標(biāo)顯示1103的畫面的信息，并且隨后識(shí) 別轉(zhuǎn)變目標(biāo)顯示1103的畫面圖像中包括的按鈕1102和輸入框1105。此外，可以從轉(zhuǎn)變目 標(biāo)信息輸出單元160提供關(guān)于被顯示為轉(zhuǎn)變目標(biāo)顯示1103的畫面的信息。
[0126] 輸入信息生成單元140不僅生成與作為提交元素的按鈕1102對(duì)應(yīng)的輸入信息，而 且還生成與作為錄入兀素的輸入框1105對(duì)應(yīng)的輸入信息。與輸入框1105對(duì)應(yīng)的輸入信息 對(duì)應(yīng)于輸入到輸入框1105中的項(xiàng)，即諸如上述示例中的姓名和地址的文本信息。如上文討 論的，輸入信息生成單元140可以生成關(guān)于該項(xiàng)的信息的預(yù)先限定的偽項(xiàng)1106,作為輸入 信息。
[0127] 在本實(shí)施例中，畫面識(shí)別單元130不僅識(shí)別被顯示為web瀏覽器畫面1101的畫面 中的輸入元素，而且還識(shí)別被顯示為轉(zhuǎn)變目標(biāo)顯示1103的畫面中的輸入元素。因此，輸入 信息生成單元140不僅還生成關(guān)于被顯示為web瀏覽器畫面1101的畫面的輸入信息，而且 還生成關(guān)于被顯示為轉(zhuǎn)變目標(biāo)顯示1103的畫面的輸入信息。
[0128] 轉(zhuǎn)變目標(biāo)信息獲取單元150從web服務(wù)器200獲取關(guān)于與輸入信息生成單元140 生成的輸入信息對(duì)應(yīng)的轉(zhuǎn)變目標(biāo)的信息。如上文討論的，在本實(shí)施例中針對(duì)錄入元素設(shè)定 輸入信息。因此，例如在已設(shè)定基本輸入項(xiàng)的畫面中可以獲取關(guān)于轉(zhuǎn)變目標(biāo)的信息。
[0129] 當(dāng)轉(zhuǎn)變目標(biāo)信息獲取單元150獲取關(guān)于針對(duì)被顯示為轉(zhuǎn)變目標(biāo)顯示1103的畫面 而生成的輸入信息所對(duì)應(yīng)的轉(zhuǎn)變目標(biāo)的信息時(shí)，轉(zhuǎn)變目標(biāo)信息獲取單元150可以保持使用 子會(huì)話，其中轉(zhuǎn)變目標(biāo)信息獲取單元150已獲取關(guān)于原始轉(zhuǎn)變目標(biāo)的畫面的信息。例如，在 上述示例中轉(zhuǎn)變目標(biāo)信息獲取單元150可以通過使用子會(huì)話與web服務(wù)器200通信，在子 會(huì)話中轉(zhuǎn)變目標(biāo)信息獲取單元150已獲取用于顯示轉(zhuǎn)變目標(biāo)顯示1103dl的信息。
[0130] 轉(zhuǎn)變目標(biāo)信息輸出單元160將由轉(zhuǎn)變目標(biāo)信息獲取單元150獲取的關(guān)于轉(zhuǎn)變目標(biāo) 的信息輸出到顯示控制單元120,以與web瀏覽器畫面1101分離地顯示由轉(zhuǎn)變目標(biāo)信息獲 取單元150獲取的關(guān)于轉(zhuǎn)變目標(biāo)的信息，作為轉(zhuǎn)變目標(biāo)顯示1103。如上文討論的，在本實(shí)施 例中，除了作為當(dāng)前瀏覽器畫面1101的下一轉(zhuǎn)變目標(biāo)的轉(zhuǎn)變目標(biāo)顯示ll〇3dl之外，還顯示 作為進(jìn)一步接下來的轉(zhuǎn)變目標(biāo)的轉(zhuǎn)變目標(biāo)顯示1103d2,作為關(guān)于轉(zhuǎn)變目標(biāo)的信息。轉(zhuǎn)變目 標(biāo)信息輸出單元160逐個(gè)獲取關(guān)于這些轉(zhuǎn)變目標(biāo)的信息，并且隨后將所獲取的信息提供給 顯示控制單元120。
[0131] 例如，在本公開的每個(gè)實(shí)施例中，當(dāng)用戶對(duì)轉(zhuǎn)變目標(biāo)信息指示的轉(zhuǎn)變結(jié)果滿意時(shí)， 信息處理裝置1〇〇可以具有根據(jù)用戶操作如轉(zhuǎn)變目標(biāo)信息指示的那樣引起實(shí)際web瀏覽器 畫面1101轉(zhuǎn)變的功能。在該情況下，轉(zhuǎn)變目標(biāo)信息獲取單元150可以使用例如主會(huì)話，其 中使web瀏覽器畫面1101顯示用于將輸入信息序列再次傳送到web服務(wù)器的頁面，并且隨 后使web瀏覽器畫面1101轉(zhuǎn)變。如果存在針對(duì)錄入項(xiàng)設(shè)定的偽項(xiàng)1106,則將偽項(xiàng)1106替 換為已預(yù)先登記的真實(shí)項(xiàng)。
[0132] (4.第四實(shí)施例：顯示單元）
[0133] 接下來，將參照?qǐng)D15至18描述本公開的第四實(shí)施例。
[0134] (裝置配置）
[0135] 圖15是圖示根據(jù)本公開的第四實(shí)施例的信息處理裝置的外觀的示圖。如圖中所 示，根據(jù)本實(shí)施例的PC 300是折疊式平板PC。此外，根據(jù)本實(shí)施例的信息處理裝置的示例 可以包括多種裝置，諸如移動(dòng)電話（智能電話），其配備有如下文討論的多個(gè)顯示單元并且 除了圖示示例以外具有web瀏覽器的功能。
[0136] PC 200包括兩個(gè)顯示單元310a和310b。這些顯示單元310由例如IXD或有機(jī)EL 顯示器形成。在本實(shí)施例中將描述顯示單元310上顯示的web瀏覽器，并且顯示單元310 仍可以額外顯示多種信息，諸如與PC300的處理相關(guān)的圖像和文本。
[0137] (畫面顯示和轉(zhuǎn)變目標(biāo)顯示的示例）
[0138] 圖16是圖示本公開的第四實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的第一示例的示圖。在圖示 示例中顯示單元310a顯示與圖2中所示相同的web瀏覽器畫面1101。同時(shí)，顯示單元310b 顯示轉(zhuǎn)變目標(biāo)顯示ll〇3f，其示出了在web瀏覽器畫面1101上顯示的按鈕1102a至1102d 均被按下的情況下顯示的轉(zhuǎn)變目標(biāo)。轉(zhuǎn)變目標(biāo)顯示ll〇3f可以顯示與按鈕1102a至1102d 對(duì)應(yīng)的圖標(biāo)（示為"預(yù)定"、"空座搜索"等）以便示出轉(zhuǎn)變目標(biāo)顯示1103f與各個(gè)按鈕1102 的關(guān)系。
[0139] 該示例與第二實(shí)施例的相同之處在于顯示關(guān)于與多個(gè)按鈕1102對(duì)應(yīng)的多個(gè)目標(biāo) 的信息。因此，用于顯示關(guān)于多個(gè)目標(biāo)的信息的第二實(shí)施例中的配置也可以應(yīng)用于本實(shí)施 例。
[0140] 在上述示例中用于顯示web瀏覽器畫面1101的顯示單元310a與用于顯示轉(zhuǎn)變目 標(biāo)顯示1103的顯示單元310b分離。因此，即便web瀏覽器畫面1101包括例如多個(gè)按鈕 1102,仍可以顯示具有足夠空間的轉(zhuǎn)變目標(biāo)顯示1103。
[0141] 圖17是圖示本公開的第四實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的第二示例的示圖。在圖示 示例中顯示單元310a顯示與圖2中所示相同的web瀏覽器畫面1101。同時(shí)，顯示單元310b 顯示畫面轉(zhuǎn)變序列作為轉(zhuǎn)變目標(biāo)顯示1103dl至1103d4,當(dāng)web瀏覽器畫面1101上顯示的 "會(huì)員注冊(cè)"按鈕ll〇2d被按下時(shí)顯示該畫面轉(zhuǎn)變序列。轉(zhuǎn)變目標(biāo)顯示1103dl至1103d4 可以顯示與按鈕1102d對(duì)應(yīng)的圖標(biāo)（圖示為"會(huì)員注冊(cè)"）以示出轉(zhuǎn)變目標(biāo)顯示1103dl至 1103d4和按鈕1102d之間的關(guān)系。
[0142] 該示例與第三實(shí)施例的相同之處在于顯示關(guān)于與按鈕1102對(duì)應(yīng)的轉(zhuǎn)變目標(biāo)序列 的信息。因此，用于顯示關(guān)于轉(zhuǎn)變目標(biāo)序列的信息的第三實(shí)施例中的配置也可以應(yīng)用于本 實(shí)施例。
[0143] 在上述示例中用于顯示web瀏覽器畫面1101的顯示單元310a與用于顯示轉(zhuǎn)變目 標(biāo)顯示1103的顯示單元310b分離。因此，即便按鈕1102引起許多畫面上的畫面轉(zhuǎn)變，仍 可以顯示具有足夠空間的轉(zhuǎn)變目標(biāo)顯示1103。
[0144] 被顯示為轉(zhuǎn)變目標(biāo)顯示1103的畫面轉(zhuǎn)變序列可以例如保持顯示在按鈕1102被按 下之后轉(zhuǎn)變的畫面，直到處理序列完成為止。例如，如圖示示例顯示"主頁"按鈕，并且隨后 web瀏覽器畫面1101上當(dāng)前顯示（或web瀏覽器畫面1101上曾經(jīng)顯示）的其中呈現(xiàn)轉(zhuǎn)變 回到畫面的畫面被執(zhí)行，允許識(shí)別處理序列的完成。
[0145] 被顯示為轉(zhuǎn)變目標(biāo)顯示1103的畫面轉(zhuǎn)變序列可以指示預(yù)定數(shù)目的畫面轉(zhuǎn)變。例 如，在圖示示例中當(dāng)用戶操作將畫面轉(zhuǎn)變的數(shù)目限定為兩次時(shí)，顯示轉(zhuǎn)變目標(biāo)顯示1103dl 至 1103d2。
[0146] 此外，如果畫面轉(zhuǎn)變序列包括分支，意味著畫面包括可以被按下的按鈕1102,并且 轉(zhuǎn)變畫面對(duì)于要被按下的每個(gè)按鈕1102是不同的，則轉(zhuǎn)變目標(biāo)顯示1103可以在圖中分叉。 替選地，轉(zhuǎn)變目標(biāo)顯示1103g可以限于與預(yù)先限定的主要使用情況對(duì)應(yīng)的按鈕1102。
[0147] 例如，如圖示示例那樣，該畫面轉(zhuǎn)變序列可以被顯示為排列的靜止圖像，這些靜止 圖像是轉(zhuǎn)變目標(biāo)的畫面圖像。畫面轉(zhuǎn)變序列也可以被顯示為包括連續(xù)的靜止圖像的移動(dòng)圖 像，這些靜止圖像是轉(zhuǎn)變目標(biāo)的畫面圖像。
[0148] 此外，如上文說明的用于顯示畫面轉(zhuǎn)變序列的配置也可以被應(yīng)用于第三實(shí)施例。
[0149] (功能塊）
[0150] 圖18是圖示根據(jù)本公開的第四實(shí)施例的信息處理裝置的示意性功能配置的框 圖。
[0151] PC 300包括顯示單元310a和310b、顯示控制單元320a和320b、畫面識(shí)別單元 130、輸入信息生成單元140、轉(zhuǎn)變目標(biāo)信息獲取單元150和轉(zhuǎn)變目標(biāo)信息輸出單元160。除 顯示單元310a和310b以外的結(jié)構(gòu)元件可以使用例如CPU、RAM和ROM被實(shí)現(xiàn)為軟件。
[0152] 可以與第一至第三實(shí)施例中的任一個(gè)相同的功能配置部分被分配相同的標(biāo)記，省 略了詳細(xì)描述。
[0153] 顯示控制單元320a控制顯示單元310a以在顯示單元310a上顯示web瀏覽器畫 面1101。顯示控制單元320a根據(jù)由圖中未示出的操作單元獲取的用戶操作從web服務(wù)器 200獲取用于顯示web瀏覽器畫面1101的信息。顯示控制單元320a將用于顯示web瀏覽 器畫面1101的信息提供給畫面識(shí)別單元130,允許獲取關(guān)于轉(zhuǎn)變目標(biāo)的信息。
[0154] 顯示控制單元320b控制顯示單元320b以在顯示單元310b上顯示轉(zhuǎn)變目標(biāo)顯示 1103。顯示控制單元320b從轉(zhuǎn)變目標(biāo)信息輸出單元160獲取用于顯示轉(zhuǎn)變目標(biāo)顯示1103 的關(guān)于轉(zhuǎn)變目標(biāo)的信息。
[0155] 如上文所述的配置允許根據(jù)本實(shí)施例的PC 400在顯示單元310a和顯示單元310b 上分別分離地顯示web瀏覽器畫面1101和轉(zhuǎn)變目標(biāo)顯示1103。此外,web瀏覽器畫面1101 和轉(zhuǎn)變目標(biāo)顯示1103中的每個(gè)不總是必須顯示在同一顯示單元310上，而是其上顯示它們 中的每個(gè)的顯示單元310可以按照需要自動(dòng)地切換或者通過用戶操作切換。
[0156] (5.第五實(shí)施例：與顯示畫面的裝置不同的裝置上的顯示）
[0157] 接下來，將參照?qǐng)D19至25描述本公開的第五實(shí)施例。
[0158] (裝置配置）
[0159] 圖19是圖示根據(jù)本公開的第五實(shí)施例的裝置的外觀的示圖。如圖中所示，根據(jù)本 實(shí)施例的信息處理裝置是智能電話400。除了圖示示例之外，根據(jù)本實(shí)施例的信息處理裝置 可以包括配備有如下文討論的成像單元和顯示單元的多種裝置。
[0160] 智能電話400包括顯示單元410和成像單元470。例如，顯示單元410由液晶顯示 器（LCD)、有機(jī)電致發(fā)光（EL)顯示器等形成。顯示單元410具有附于其上的觸摸傳感器。 用戶在預(yù)定區(qū)域內(nèi)與顯示單元410的接觸可以作為操作而被獲取。例如，成像單元470由 圖像傳感器和透鏡以及其驅(qū)動(dòng)機(jī)構(gòu)形成。成像單元470拍攝包括ATM 500的顯示單元510 的區(qū)域的圖像。
[0161] 如圖中所示，根據(jù)本實(shí)施例的另一裝置是自動(dòng)出納機(jī)（ATM)。除了用于插入和取出 現(xiàn)金、卡等的槽之外，ATM 500包括顯示單元510。例如，顯示單元510由IXD等形成，并且 顯示關(guān)于ATM 500上的操作的多種信息。顯示單元510具有附于其上的觸摸傳感器，并且 獲取用戶在預(yù)定區(qū)域內(nèi)與顯示單元510的接觸作為操作。
[0162] ATM 500不限于ATM，并且也可以是多種裝置，諸如售票機(jī)和票價(jià)調(diào)整機(jī)，只要它 們中的每個(gè)包括如顯示單元510的、顯示關(guān)于操作的信息的顯示單元即可。
[0163] (畫面顯示的示例）
[0164] 圖20是圖示在本公開的第五實(shí)施例中顯示的操作畫面的示例的示圖。操作畫面 5101顯示在ATM 500的顯示單元510上。操作畫面5101包括按鈕5102。用戶接觸與顯示 單元510上的按鈕5102對(duì)應(yīng)的位置，并且隨后可以向ATM 500提供操作輸入。操作畫面 5101響應(yīng)于通過使用按鈕5102從用戶提供的操作輸入而進(jìn)行轉(zhuǎn)變。
[0165] 在圖示示例中ATM在操作畫面5101上顯示交易內(nèi)容，并且諸如售票機(jī)和票價(jià)調(diào)整 機(jī)的其他裝置也必然顯示不同的內(nèi)容。即使裝置是ATM，仍可以顯示不同的操作內(nèi)容。換言 之，操作畫面5101的顯示內(nèi)容和設(shè)計(jì)完全不限制本公開的實(shí)施例。
[0166] 如上文討論的，操作畫面5101包括作為輸入元素的按鈕5102。在圖示示例中按鈕 5102包括與諸如"取款"和"存款"的功能對(duì)應(yīng)的四個(gè)按鈕5102a至5102d。一旦用戶按下 任何一個(gè)按鈕5102(更具體地，用戶在按鈕5102的區(qū)域內(nèi)接觸顯示單元510)，則ATM 500 使操作畫面5101轉(zhuǎn)變。由于按鈕5102也是使畫面轉(zhuǎn)變的輸入元素，因此它們也是提交元 素。
[0167] 當(dāng)用戶按下按鈕5102時(shí)，ATM 500獲取指示"按鈕5102已被按下"的信息。該信 息被視為與作為輸入元素的按鈕5102對(duì)應(yīng)的輸入信息。該信息也是指示作為提交元素的 按鈕5102已執(zhí)行提交操作的輸入信息。
[0168] 已獲取指示"按鈕5102已被按下"的輸入信息的ATM 500獲取與該信息對(duì)應(yīng)的關(guān) 于操作畫面5101的轉(zhuǎn)變目標(biāo)的信息。ATM 500可以根據(jù)其中存儲(chǔ)的程序操作并且生成關(guān)于 轉(zhuǎn)變目標(biāo)的信息。ATM 500可以與諸如主機(jī)計(jì)算機(jī)的另一裝置通信以獲取關(guān)于轉(zhuǎn)變目標(biāo)的 信息。
[0169] 在圖示示例中，當(dāng)按鈕5102a至5102d均被按下時(shí)，ATM 500獲取對(duì)于每個(gè)按鈕 5102a至5102d不同的輸入信息。結(jié)果，ATM 500可以顯示對(duì)于每個(gè)按鈕5102a至5102d不 同的下一操作畫面。然而，用戶不了解當(dāng)用戶選擇每個(gè)按鈕5102時(shí)顯示什么類型的下一操 作畫面。
[0170] 在本實(shí)施例中，在每個(gè)按鈕5102被選擇的情況下顯示的下一操作畫面隨后被呈 現(xiàn)給用戶，作為轉(zhuǎn)變目標(biāo)顯示。然而，本實(shí)施例與第一實(shí)施例的不同之處在于，在本實(shí)施例 中，并非由ATM 500的顯示單元510,而是由智能電話400的顯示單元410來顯示轉(zhuǎn)變目標(biāo) 顯不。
[0171] (轉(zhuǎn)變目標(biāo)顯示的示例）
[0172] 圖21是圖示在本公開的第五實(shí)施例中的轉(zhuǎn)變目標(biāo)顯示的示例的示圖。在圖示示 例中，智能電話400的顯示單元410顯示由成像單元470獲取的ATM 500的顯示單元510 的圖像。顯示單元510顯示包括按鈕5102a至5102d的操作畫面5101。
[0173] 顯示單元410進(jìn)一步顯示疊置在ATM 500的顯示單元510的圖像上的轉(zhuǎn)變目標(biāo)顯 示4103。智能電話400將成像單元470獲取的圖像中包括的按鈕5102識(shí)別為標(biāo)記，并且隨 后獲取與每個(gè)按鈕5102對(duì)應(yīng)的下一畫面信息，從而顯示轉(zhuǎn)變目標(biāo)顯示4103。
[0174] 在圖示示例中顯示與各個(gè)按鈕5102a至5102d對(duì)應(yīng)的轉(zhuǎn)變目標(biāo)顯示4103a至 4103d。例如，轉(zhuǎn)變目標(biāo)顯示4103a示出了在"取款"按鈕5102a被選擇的情況下顯示的下 一操作畫面（用于輸入取款金額的畫面）。同樣，轉(zhuǎn)變目標(biāo)顯示4103b至4103d也示出了在 各個(gè)按鈕5102b至5102d被選擇的情況下顯示的下一操作畫面。
[0175] 這允許用戶預(yù)先了解當(dāng)用戶選擇顯示單元310上顯示的每個(gè)按鈕5102時(shí)有什么 畫面顯示在ATM 500上，并且隨后操作ATM 500。
[0176] 此外，不必針對(duì)所有按鈕5102顯示轉(zhuǎn)變目標(biāo)顯示4103。例如，可以僅針對(duì)接觸智 能電話400的顯示單元410的用戶指定的按鈕5102顯示轉(zhuǎn)變目標(biāo)顯示4103。例如，如第三 實(shí)施例中那樣，當(dāng)一個(gè)或更多個(gè)按鈕5102被選擇時(shí)，關(guān)于該一個(gè)或更多個(gè)按鈕5102的畫面 轉(zhuǎn)變序列可以被顯示為靜止圖像或移動(dòng)圖像。
[0177] (畫面顯示的修改示例）
[0178] 圖22是圖示在本公開的第五實(shí)施例中顯示的操作畫面的另一示例的示圖。除了 如圖中所示的按鈕5102之外，操作畫面5101可以顯示標(biāo)記5105。該標(biāo)記5105被智能電 話400識(shí)別為標(biāo)記而非按鈕5102的圖像。這允許智能電話400在顯示單元410上顯示轉(zhuǎn) 變目標(biāo)4103,該轉(zhuǎn)變目標(biāo)4103與圖像中包括的每個(gè)按鈕5102對(duì)應(yīng)。
[0179] 此外，較之將按鈕5102識(shí)別為標(biāo)記，以這種方式顯示與每個(gè)按鈕5102對(duì)應(yīng)的標(biāo)記 5105可以使識(shí)別更簡(jiǎn)單和更準(zhǔn)確。
[0180] (功能塊）
[0181] 圖23是圖示根據(jù)本公開的第五實(shí)施例的信息處理裝置的示意性功能配置的框 圖。
[0182] 智能電話400包括顯示單元410、顯示控制單元420、畫面識(shí)別單元430、輸入信息 生成單元140、轉(zhuǎn)變目標(biāo)信息獲取單元450、轉(zhuǎn)變目標(biāo)信息輸出單元160和成像單元470。除 顯示單元410和成像單元470以外的結(jié)構(gòu)元件可以使用例如CPU、RAM和ROM被實(shí)現(xiàn)為軟 件。
[0183] 可以與第一至第四實(shí)施例中的任一個(gè)相同的上述功能配置部分被分配相同的標(biāo) 記，省略了詳細(xì)描述。
[0184] 畫面識(shí)別單元430對(duì)從成像單元470提供的捕獲圖像執(zhí)行圖像識(shí)別處理，并且識(shí) 別作為操作畫面5101中包括的輸入元素的按鈕5102。例如，畫面識(shí)別單元430基于關(guān)于按 鈕5102的圖像的預(yù)先限定的特征量對(duì)捕獲圖像進(jìn)行搜索以尋找按鈕5102的圖像。畫面識(shí) 別單元430可以不僅識(shí)別如按鈕5102的提交元素，而且可以識(shí)別諸如用于輸入金額的框的 錄入元素，然而這沒有在圖示示例中示出。畫面識(shí)別單元430向輸入信息生成單元140提 供關(guān)于所識(shí)別的輸入元素的信息。畫面識(shí)別單元430可以向顯示控制單元420輸出關(guān)于所 識(shí)別的輸入元素在捕獲圖像中的位置的信息。
[0185] 轉(zhuǎn)變目標(biāo)信息獲取單元450參考轉(zhuǎn)變目標(biāo)數(shù)據(jù)庫(kù)（DB) 452以獲取與輸入信息生成 單元140生成的輸入信息對(duì)應(yīng)的關(guān)于轉(zhuǎn)變目標(biāo)的信息。轉(zhuǎn)變目標(biāo)DB 452可以連同例如用 于ATM 500的操作輔助應(yīng)用軟件一起由管理ATM 500的公司（金融機(jī)構(gòu)）提供。在該情況 下，轉(zhuǎn)變目標(biāo)信息獲取單元450可以使用輸入信息搜索可以被顯示為操作畫面5101的畫面 庫(kù)，并且隨后從其獲取關(guān)于轉(zhuǎn)變目標(biāo)的信息。
[0186] 顯示控制單元420控制顯示單元410的顯示。顯示控制單元220使顯示單元410 顯示包括從成像單元470提供的ATM 500的操作畫面5101的捕獲圖像，并且使顯示單元 410根據(jù)從轉(zhuǎn)變目標(biāo)信息輸出單元160提供的轉(zhuǎn)變目標(biāo)信息顯示轉(zhuǎn)變目標(biāo)顯示4103。顯示 控制單元420可以基于已從例如畫面識(shí)別單元430提供的、關(guān)于輸入元素在捕獲圖像中的 位置的信息來決定轉(zhuǎn)變目標(biāo)顯示4103的顯示位置。
[0187] 圖24是圖示根據(jù)本公開的第五實(shí)施例的信息處理裝置的替選功能配置的框圖。
[0188] 在如圖23的示例中描述的同一功能配置中，服務(wù)器裝置600提供圖示示例中的畫 面識(shí)別單元430、輸入信息生成單元140、轉(zhuǎn)變目標(biāo)信息獲取單元450和轉(zhuǎn)變目標(biāo)信息輸出 單元160。在該示例中智能電話400向服務(wù)器裝置600傳送關(guān)于成像單元470獲取的捕獲 圖像的信息。服務(wù)器裝置600使用畫面識(shí)別單元430、輸入信息生成單元140、轉(zhuǎn)變目標(biāo)信息 獲取單元450和轉(zhuǎn)變目標(biāo)信息輸出單元160的功能輸出關(guān)于轉(zhuǎn)變目標(biāo)的信息并將其傳送到 智能電話400。智能電話400根據(jù)接收到的信息使顯示控制單元120將轉(zhuǎn)變目標(biāo)顯示4103 顯示在顯示單元410上。
[0189] 在本實(shí)施例中服務(wù)器裝置600可以以這種方式執(zhí)行用于使智能電話400顯示轉(zhuǎn)變 目標(biāo)顯示4103的至少部分處理。同樣地，服務(wù)器裝置可以執(zhí)行第一至第四實(shí)施例中的PC 100和PC 300的至少部分處理。在該情況下，服務(wù)器裝置可以是web服務(wù)器200或任何其 他服務(wù)器裝置。
[0190] 盡管畫面識(shí)別單元430、轉(zhuǎn)變目標(biāo)信息獲取單元450等的處理的具體操作是不同 的，但是在本實(shí)施例中整體處理過程與第一至第四實(shí)施例相同。第一至第四實(shí)施例的配置 和修改不例也可以應(yīng)用于本實(shí)施例。
[0191] (6.硬件配置）
[0192] 最后，將參照?qǐng)D25描述根據(jù)本公開的實(shí)施例的信息處理裝置的硬件配置。圖25 是用于描述信息處理裝置的硬件配置的框圖。例如，該圖中所示的信息處理裝置900可以 被實(shí)現(xiàn)為根據(jù)上述實(shí)施例的PC 100、PC300、智能電話400和服務(wù)器設(shè)備600。
[0193] 信息處理裝置900包括中央處理單元（CPU) 901、只讀存儲(chǔ)器（ROM) 903和隨機(jī)存取 存儲(chǔ)器（RAM)905。此外，信息處理裝置900可以包括主機(jī)總線907、橋909、外部總線911、 接口 913、輸入設(shè)備915、輸出設(shè)備917、存儲(chǔ)設(shè)備919、驅(qū)動(dòng)器921、連接端口 923和通信設(shè) 備925。此外，信息處理裝置900可以按照需要包括成像設(shè)備933和傳感器935。除了 CPU 901之外或者作為其替代，信息處理裝置900可以包括諸如數(shù)字信號(hào)處理器（DSP)的處理電 路。
[0194] CPU 901用作操作處理器和控制器，并且根據(jù)ROM 903、RAM 905、存儲(chǔ)設(shè)備919或 可移動(dòng)記錄介質(zhì)927上記錄的多種程序來控制信息處理裝置900中的所有或一些操作。ROM 903存儲(chǔ)CPU 901使用的程序和操作參數(shù)。RAM 905主要存儲(chǔ)在CPU 901的執(zhí)行中使用的 程序以及在執(zhí)行中適當(dāng)修改的參數(shù)。CPU 901、R0M 903和RAM 905通過包括諸如CPU總線 的內(nèi)部總線的主機(jī)總線907彼此連接。此外，主機(jī)總線907經(jīng)由橋909連接到諸如外圍部 件互連/接口（PCI)總線的外部總線911。
[0195] 輸入設(shè)備915是用戶操作的設(shè)備，諸如鼠標(biāo)、鍵盤、觸摸板、按鈕、開關(guān)和操縱桿。 輸入設(shè)備915可以是例如使用紅外光或其他無線電波的遙控單元，或者可以是能夠響應(yīng)于 信息處理裝置900的操作進(jìn)行操作的諸如移動(dòng)電話的外部連接設(shè)備929。輸入設(shè)備915包 括基于用戶輸入的信息生成輸入信號(hào)并且將輸入信號(hào)輸出到CPU 901的輸入控制電路。通 過操作輸入設(shè)備915,用戶向信息處理裝置900輸入各種類型的數(shù)據(jù)或者需要處理操作。
[0196] 輸出設(shè)備917包括能夠視覺地或聽覺地向用戶通知所獲取的信息的設(shè)備。輸出設(shè) 備917可以包括諸如液晶顯示器（LCD)、等離子體顯示面板（PDP)和有機(jī)電致發(fā)光（EL)顯 示器的顯示設(shè)備，諸如揚(yáng)聲器和耳機(jī)的音頻輸出設(shè)備，以及打印機(jī)。輸出設(shè)備917可以以諸 如文本和圖像的視頻形式以及諸如語音和聲音的音頻形式輸出從信息處理裝置900的處 理獲得的結(jié)果。
[0197] 存儲(chǔ)設(shè)備919是用于數(shù)據(jù)存儲(chǔ)的設(shè)備，其被配置為信息處理裝置900的存儲(chǔ)單元 的示例。存儲(chǔ)設(shè)備919包括例如諸如硬盤驅(qū)動(dòng)器（HDD)的磁存儲(chǔ)設(shè)備、半導(dǎo)體存儲(chǔ)設(shè)備、光 存儲(chǔ)設(shè)備或磁-光存儲(chǔ)設(shè)備。存儲(chǔ)設(shè)備919存儲(chǔ)CPU 901要執(zhí)行的程序、各種數(shù)據(jù)以及從 外部獲得的數(shù)據(jù)。
[0198] 驅(qū)動(dòng)器921是用于諸如磁盤、光盤、磁-光盤和半導(dǎo)體存儲(chǔ)器的可移動(dòng)記錄介質(zhì) 927,并且內(nèi)建在信息處理裝置900中或者與其外部附接。驅(qū)動(dòng)器921讀出附接于其的可移 動(dòng)記錄介質(zhì)927中記錄的信息，并且將讀出的信息輸出到RAM 905。此外，驅(qū)動(dòng)器921可以 在附接于其的可移動(dòng)記錄介質(zhì)927中寫入記錄。
[0199] 連接端口 923是用于將設(shè)備直接連接到信息處理裝置900的端口。連接端口 923 可以包括例如通用串行總線（USB)端口、IEEE1394端口和小型計(jì)算機(jī)系統(tǒng)接口（SCSI) 端口。連接端口 923可以進(jìn)一步包括RS-232C端口、光學(xué)音頻端子、高清晰度多媒體接口 (HDMI)端口等。外部連接設(shè)備929與連接端口 923的連接使得可以在信息處理裝置900和 外部連接設(shè)備929之間交換各種數(shù)據(jù)。
[0200] 通信設(shè)備925是例如包括用于連接到通信網(wǎng)絡(luò)931的通信設(shè)備等的通信接口。 通信設(shè)備925可以是例如用于有線或無線局域網(wǎng)（LAN)、Bluetooth (注冊(cè)商標(biāo)）、無線 USB(WUSB)等的通信卡。此外，通信設(shè)備925可以是用于光學(xué)通信的路由器、用于非對(duì)稱數(shù) 字訂戶線路（ADSL)的路由器、用于各種類型的通信的調(diào)制解調(diào)器等。通信設(shè)備925基于諸 如TCP/IP的預(yù)定協(xié)議向例如互聯(lián)網(wǎng)或其他通信設(shè)備傳送信號(hào)和從其接收信號(hào)。此外，連接 到通信設(shè)備925的通信網(wǎng)絡(luò)931可以是以有線或無線方式連接的網(wǎng)絡(luò)，并且可以是例如互 聯(lián)網(wǎng)、家庭LAN、紅外通信、無線電波通信、衛(wèi)星通信等。
[0201] 成像設(shè)備933是例如通過使用諸如電荷耦合器件（CCD)或互補(bǔ)金屬氧化物半導(dǎo) 體（CMOS)的圖像傳感器以及諸如用于控制物體圖像在圖像傳感器上的形成的透鏡的各種 部件拍攝真實(shí)空間的圖像來生成捕獲圖像的設(shè)備。成像設(shè)備933可以是拍攝靜止圖像的設(shè) 備，并且也可以是拍攝移動(dòng)圖像的設(shè)備。
[0202] 傳感器935包括例如各種傳感器，諸如加速度傳感器、陀螺儀傳感器、地磁傳感 器、光學(xué)傳感器和聲音傳感器。傳感器935獲取例如關(guān)于信息處理裝置900的狀態(tài)的信息， 諸如信息處理裝置900的外殼的取向；以及關(guān)于信息處理裝置900周圍的環(huán)境的信息，諸 如信息處理裝置900周圍的亮度和噪聲。傳感器935也可以包括全球定位系統(tǒng)（GPS)傳感 器，其接收GPS信號(hào)并且測(cè)量裝置的緯度、經(jīng)度和海拔。
[0203] 到此為止已描述了信息處理裝置900的硬件配置的示例。每個(gè)上述結(jié)構(gòu)元件可以 使用通用部件來構(gòu)造，并且也可以使用專用于每個(gè)結(jié)構(gòu)元件的功能的硬件來構(gòu)造。該配置 也可以根據(jù)實(shí)現(xiàn)時(shí)的技術(shù)水平而被適當(dāng)修改。
[0204] (7.補(bǔ)充）
[0205] 下文將總結(jié)本公開的實(shí)施例。
[0206] 用戶正在操作的信息處理裝置或者向用戶正在操作的裝置提供服務(wù)的服務(wù)器裝 置可以生成轉(zhuǎn)變目標(biāo)信息。換言之，生成轉(zhuǎn)變目標(biāo)信息的信息處理裝置不必限于本公開的 實(shí)施例中的由用戶操作的裝置。
[0207] 轉(zhuǎn)變目標(biāo)信息可以是在畫面轉(zhuǎn)變期間的特定時(shí)刻作為后繼用戶操作的結(jié)果顯示 的圖像。所顯示的圖像對(duì)于每個(gè)用戶操作可以是不同的。在該情況下，轉(zhuǎn)變目標(biāo)信息可以 涉及使用某個(gè)標(biāo)準(zhǔn)從多個(gè)不同的轉(zhuǎn)變目標(biāo)中選擇的一個(gè)或更多個(gè)轉(zhuǎn)變目標(biāo)，或者涉及可以 顯示的所有轉(zhuǎn)變目標(biāo)。
[0208] 轉(zhuǎn)變目標(biāo)信息可以是在畫面轉(zhuǎn)變期間的特定時(shí)刻或之后通過用戶操作顯示的圖 像序列。在該情況下，該圖像序列可以被顯示為排列的靜止圖像，或者作為移動(dòng)圖像被逐一 顯示。以這種方式提供轉(zhuǎn)變信息可以被視為用于模擬在特定時(shí)刻或之后因用戶操作導(dǎo)致的 處理的服務(wù)。此外，轉(zhuǎn)變目標(biāo)信息不必被直接顯示為圖像（諸如靜止圖像和移動(dòng)圖像）。轉(zhuǎn) 變目標(biāo)信息也可以被顯示為唯一對(duì)應(yīng)于圖像并且通過預(yù)定的轉(zhuǎn)換處理獲得的代碼（諸如 AR標(biāo)記和QR代碼（注冊(cè)商標(biāo)））。例如，拍攝并顯示代碼的圖像的裝置可以將代碼轉(zhuǎn)換成 圖像。
[0209] 例如,在顯示單元上顯示轉(zhuǎn)變目標(biāo)信息的位置位于畫面（諸如上述示例中的web 瀏覽器畫面和操作畫面）內(nèi)的頁邊區(qū)域中，或者在與畫面相同的顯示單元上顯示轉(zhuǎn)變目標(biāo) 信息的情況下位于該畫面周圍的區(qū)域。替選地，轉(zhuǎn)變目標(biāo)信息可以至少部分地疊置在畫面 中包括的諸如按鈕的輸入元素（操作目標(biāo)）上。轉(zhuǎn)變目標(biāo)信息可以顯示在作為包括顯示畫 面的顯示單元的同一裝置的裝置的顯示單元上。
[0210] 轉(zhuǎn)變目標(biāo)信息也可以顯示在經(jīng)由專用線纜或者諸如互聯(lián)網(wǎng)的網(wǎng)絡(luò)連接到包括用 于顯示畫面的顯示單元的其他裝置的裝置的顯示單元上。在每種情況下，轉(zhuǎn)變目標(biāo)信息可 以例如被顯示為轉(zhuǎn)變目標(biāo)的畫面圖像。隨后可以縮小并顯示畫面圖像。
[0211] 此外，可以在多種狀態(tài)下顯示轉(zhuǎn)變目標(biāo)信息。例如，可以在半透射狀態(tài)或非透射狀 態(tài)下顯示轉(zhuǎn)變目標(biāo)信息。轉(zhuǎn)變目標(biāo)信息也可以顯示在可檢測(cè)的其他窗口上。轉(zhuǎn)變目標(biāo)信息 可以通過電子郵件、互聯(lián)網(wǎng)協(xié)議（IP)通信、Bluetooth(注冊(cè)商標(biāo)）通信等被發(fā)送到用于顯 示轉(zhuǎn)變目標(biāo)信息的裝置。轉(zhuǎn)變目標(biāo)信息不必被自動(dòng)發(fā)送。例如，用戶隨后訪問服務(wù)器裝置 等以獲取轉(zhuǎn)變目標(biāo)信息，使得可以發(fā)送轉(zhuǎn)變目標(biāo)信息。
[0212] 本公開的實(shí)施例包括例如，如上文所述的信息處理裝置、包括該信息處理裝置的 系統(tǒng)、由該信息處理裝置或系統(tǒng)執(zhí)行的方法、用于使信息處理裝置發(fā)揮作用的程序、以及其 上記錄有該程序的記錄介質(zhì)。
[0213] 上文已參照附圖描述了本發(fā)明的優(yōu)選實(shí)施例，然而顯然本發(fā)明不限于以上示例。 本領(lǐng)域技術(shù)人員可以在所附權(quán)利要求的范圍內(nèi)找到各種替換和修改，并且應(yīng)當(dāng)理解，它們 無疑在本發(fā)明的技術(shù)范圍內(nèi)。
[0214] 此外，本技術(shù)還可以如下配置。
[0215] (1) 一種信息處理裝置，包括：
[0216] 畫面識(shí)別單元，被配置成識(shí)別畫面中包括的輸入元素；
[0217] 輸入信息生成單元，被配置成生成對(duì)應(yīng)于所述輸入元素的輸入信息；
[0218] 轉(zhuǎn)變目標(biāo)信息獲取單元，被配置成獲取關(guān)于所述畫面的轉(zhuǎn)變目標(biāo)的信息，關(guān)于所 述轉(zhuǎn)變目標(biāo)的信息對(duì)應(yīng)于所述輸入信息；以及
[0219] 轉(zhuǎn)變目標(biāo)信息輸出單元，被配置成輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息以與所述畫面分 離地顯示關(guān)于所述轉(zhuǎn)變目標(biāo)的信息。
[0220] (2)根據(jù)（1)所述的信息處理裝置，
[0221] 其中所述畫面識(shí)別單元基于從第一顯示控制單元獲取的信息來識(shí)別所述輸入元 素，所述第一顯示控制單元控制顯示所述畫面的第一顯示單元。
[0222] (3)根據(jù)⑵所述的信息處理裝置，
[0223] 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元將關(guān)于所述轉(zhuǎn)變目標(biāo)的信息輸出到所述第一顯 示控制單元，以使關(guān)于所述轉(zhuǎn)變目標(biāo)的信息被顯示在所述第一顯示單元上。
[0224] (4)根據(jù)（3)所述的信息處理裝置，
[0225] 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息，以使關(guān)于所述轉(zhuǎn) 變目標(biāo)的信息被顯示為其他裝置轉(zhuǎn)換成畫面圖像的代碼，所述其他裝置獲取包括所述第一 顯示單元的捕獲圖像。
[0226] (5)根據(jù)⑵所述的信息處理裝置，
[0227] 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元將關(guān)于所述轉(zhuǎn)變目標(biāo)的信息輸出到第二顯示控 制單元，以使關(guān)于所述轉(zhuǎn)變目標(biāo)的信息被顯示在與所述第一顯示單元不同的第二顯示單元 上，所述第二顯示控制單元控制所述第二顯示單元。
[0228] (6)根據(jù)（1)所述的信息處理裝置，
[0229] 其中所述畫面識(shí)別單元基于關(guān)于包括所述畫面的捕獲圖像的信息來識(shí)別所述輸 入元素。
[0230] (7)根據(jù)（6)所述的信息處理裝置，
[0231] 其中所述畫面識(shí)別單元識(shí)別所述捕獲圖像中包括的所述輸入元素的圖像。
[0232] (8)根據(jù)（6)所述的信息處理裝置，
[0233] 其中所述畫面識(shí)別單元識(shí)別以如下方式定位的代碼：所述代碼對(duì)應(yīng)于所述輸入元 素，所述代碼包括在所述捕獲圖像中。
[0234] (9)根據(jù)⑴至⑶和（5)至⑶中任一項(xiàng)所述的信息處理裝置，
[0235] 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息，以將關(guān)于所述轉(zhuǎn) 變目標(biāo)的信息顯示為畫面圖像。
[0236] (10)根據(jù)⑴至（9)中任一項(xiàng)所述的信息處理裝置，
[0237] 其中所述輸入元素包括使所述畫面轉(zhuǎn)變的提交元素，以及
[0238] 其中所述輸入信息生成單元生成指示所述提交元素已執(zhí)行提交操作的輸入信息。
[0239] (11)根據(jù)（10)所述的信息處理裝置，
[0240] 其中所述畫面識(shí)別單元識(shí)別多個(gè)所述提交元素，
[0241] 其中所述輸入信息生成單元生成指示各個(gè)提交元素已執(zhí)行提交操作的多條輸入 信息，
[0242] 其中所述轉(zhuǎn)變目標(biāo)信息獲取單元獲取關(guān)于所述畫面的多個(gè)轉(zhuǎn)變目標(biāo)的信息，關(guān)于 所述多個(gè)轉(zhuǎn)變目標(biāo)的信息對(duì)應(yīng)于各個(gè)輸入信息，以及
[0243] 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述多個(gè)轉(zhuǎn)變目標(biāo)的信息。
[0244] (12)根據(jù)（11)所述的信息處理裝置，
[0245] 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述多個(gè)轉(zhuǎn)變目標(biāo)的信息，以與各個(gè)提 交元素相關(guān)聯(lián)地顯示關(guān)于所述多個(gè)轉(zhuǎn)變目標(biāo)的信息。
[0246] (13)根據(jù)⑴至（12)中任一項(xiàng)所述的信息處理裝置，
[0247] 其中所述輸入元素包括用于輸入項(xiàng)目的錄入元素，以及
[0248] 其中所述輸入信息生成單元生成對(duì)應(yīng)于所述項(xiàng)目的輸入信息。
[0249] (14)根據(jù)（13)所述的信息處理裝置，
[0250] 其中所述輸入信息生成單元生成虛構(gòu)的并且對(duì)應(yīng)于所述項(xiàng)目的輸入信息。
[0251] (15)根據(jù)⑴至（14)中任一項(xiàng)所述的信息處理裝置，
[0252] 其中關(guān)于所述轉(zhuǎn)變目標(biāo)的信息包括關(guān)于通過所述畫面的轉(zhuǎn)變逐一顯示的一系列 畫面的信息。
[0253] (16)根據(jù)（15)所述的信息處理裝置，
[0254] 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息以將所述一系列 畫面顯示為經(jīng)排列的靜態(tài)圖像。
[0255] (17)根據(jù)（15)所述的信息處理裝置，
[0256] 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息以將所述一系列 畫面顯示為連續(xù)呈現(xiàn)靜止圖像的移動(dòng)圖像。
[0257] (18)根據(jù)（15)至（17)中任一項(xiàng)所述的信息處理裝置，
[0258] 其中關(guān)于所述一系列畫面的信息對(duì)應(yīng)于繼續(xù)直至一系列處理完成的所述畫面的 轉(zhuǎn)變。
[0259] (19)根據(jù)（15)至（17)中任一項(xiàng)所述的信息處理裝置，
[0260] 其中關(guān)于所述一系列畫面的信息對(duì)應(yīng)于被執(zhí)行預(yù)定次數(shù)的所述畫面的轉(zhuǎn)變。
[0261] (20) -種程序，用于使計(jì)算機(jī)執(zhí)行：
[0262] 識(shí)別畫面中包括的輸入元素的功能；
[0263] 生成與所述輸入元素對(duì)應(yīng)的輸入信息的功能；
[0264] 獲取關(guān)于所述畫面的轉(zhuǎn)變目標(biāo)的信息的功能，關(guān)于所述轉(zhuǎn)變目標(biāo)的信息與所述輸 入信息對(duì)應(yīng)；以及
[0265] 輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息以與所述畫面分離地顯示關(guān)于所述轉(zhuǎn)變目標(biāo)的信 息的功能。
[0266] 附圖標(biāo)記列表
[0267] 100,300 PC
[0268] 110, 310,410 顯示單元
[0269] 1101 web瀏覽器畫面
[0270] 1102 按鈕
[0271] 1103,4103轉(zhuǎn)變目標(biāo)顯示
[0272] 1104轉(zhuǎn)變目標(biāo)代碼
[0273] 1105 輸入框
[0274] 1106 偽項(xiàng)
[0275] 120, 320,420顯示控制單元
[0276] 130,430畫面識(shí)別單元
[0277] 140輸入信息生成單元
[0278] 150,450轉(zhuǎn)變目標(biāo)信息獲取單元
[0279] 160轉(zhuǎn)變目標(biāo)信息輸出單元
[0280] 470成像單元
[0281] 400智能電話
[0282] 500 ATM
[0283] 510顯示單元
[0284] 5101操作畫面
[0285] 5102 按鈕
[0286] 5105 標(biāo)記
[0287] 600服務(wù)器裝置
【權(quán)利要求】
1. 一種信息處理裝置，包括： 畫面識(shí)別單元，被配置成識(shí)別畫面中包括的輸入元素； 輸入信息生成單元，被配置成生成對(duì)應(yīng)于所述輸入元素的輸入信息； 轉(zhuǎn)變目標(biāo)信息獲取單元，被配置成獲取關(guān)于所述畫面的轉(zhuǎn)變目標(biāo)的信息，關(guān)于所述轉(zhuǎn) 變目標(biāo)的信息對(duì)應(yīng)于所述輸入信息；以及 轉(zhuǎn)變目標(biāo)信息輸出單元，被配置成輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息以與所述畫面分離地 顯示關(guān)于所述轉(zhuǎn)變目標(biāo)的信息。
2. 根據(jù)權(quán)利要求1所述的信息處理裝置， 其中所述畫面識(shí)別單元基于從第一顯示控制單元獲取的信息來識(shí)別所述輸入元素，所 述第一顯示控制單元控制顯示所述畫面的第一顯示單元。
3. 根據(jù)權(quán)利要求2所述的信息處理裝置， 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元將關(guān)于所述轉(zhuǎn)變目標(biāo)的信息輸出到所述第一顯示控 制單元，以使關(guān)于所述轉(zhuǎn)變目標(biāo)的信息被顯示在所述第一顯示單元上。
4. 根據(jù)權(quán)利要求3所述的信息處理裝置， 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息，以使關(guān)于所述轉(zhuǎn)變目 標(biāo)的信息被顯示為其他裝置轉(zhuǎn)換成畫面圖像的代碼，所述其他裝置獲取包括所述第一顯示 單元的捕獲圖像。
5. 根據(jù)權(quán)利要求2所述的信息處理裝置， 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元將關(guān)于所述轉(zhuǎn)變目標(biāo)的信息輸出到第二顯示控制單 元，以使關(guān)于所述轉(zhuǎn)變目標(biāo)的信息被顯示在與所述第一顯示單元不同的第二顯示單元上， 所述第二顯示控制單元控制所述第二顯示單元。
6. 根據(jù)權(quán)利要求1所述的信息處理裝置， 其中所述畫面識(shí)別單元基于關(guān)于包括所述畫面的捕獲圖像的信息來識(shí)別所述輸入元 素。
7. 根據(jù)權(quán)利要求6所述的信息處理裝置， 其中所述畫面識(shí)別單元識(shí)別所述捕獲圖像中包括的所述輸入元素的圖像。
8. 根據(jù)權(quán)利要求6所述的信息處理裝置， 其中所述畫面識(shí)別單元識(shí)別以如下方式定位的代碼：所述代碼對(duì)應(yīng)于所述輸入元素， 所述代碼包括在所述捕獲圖像中。
9. 根據(jù)權(quán)利要求1所述的信息處理裝置， 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息，以將關(guān)于所述轉(zhuǎn)變目 標(biāo)的信息顯示為畫面圖像。
10. 根據(jù)權(quán)利要求1所述的信息處理裝置， 其中所述輸入元素包括使所述畫面轉(zhuǎn)變的提交元素，以及 其中所述輸入信息生成單元生成指示所述提交元素已執(zhí)行提交操作的輸入信息。
11. 根據(jù)權(quán)利要求10所述的信息處理裝置， 其中所述畫面識(shí)別單元識(shí)別多個(gè)所述提交元素， 其中所述輸入信息生成單元生成指示各個(gè)提交元素已執(zhí)行提交操作的多條輸入信息， 其中所述轉(zhuǎn)變目標(biāo)信息獲取單元獲取關(guān)于所述畫面的多個(gè)轉(zhuǎn)變目標(biāo)的信息，關(guān)于所述 多個(gè)轉(zhuǎn)變目標(biāo)的信息對(duì)應(yīng)于各個(gè)輸入信息，以及 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述多個(gè)轉(zhuǎn)變目標(biāo)的信息。
12. 根據(jù)權(quán)利要求11所述的信息處理裝置， 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述多個(gè)轉(zhuǎn)變目標(biāo)的信息，以與各個(gè)提交元 素相關(guān)聯(lián)地顯示關(guān)于所述多個(gè)轉(zhuǎn)變目標(biāo)的信息。
13. 根據(jù)權(quán)利要求1所述的信息處理裝置， 其中所述輸入元素包括用于輸入項(xiàng)目的錄入元素，以及 其中所述輸入信息生成單元生成對(duì)應(yīng)于所述項(xiàng)目的輸入信息。
14. 根據(jù)權(quán)利要求13所述的信息處理裝置， 其中所述輸入信息生成單元生成虛構(gòu)的并且對(duì)應(yīng)于所述項(xiàng)目的輸入信息。
15. 根據(jù)權(quán)利要求1所述的信息處理裝置， 其中關(guān)于所述轉(zhuǎn)變目標(biāo)的信息包括關(guān)于通過所述畫面的轉(zhuǎn)變逐一顯示的一系列畫面 的信息。
16. 根據(jù)權(quán)利要求15所述的信息處理裝置， 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息以將所述一系列畫面 顯示為經(jīng)排列的靜態(tài)圖像。
17. 根據(jù)權(quán)利要求15所述的信息處理裝置， 其中所述轉(zhuǎn)變目標(biāo)信息輸出單元輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息以將所述一系列畫面 顯示為連續(xù)呈現(xiàn)靜止圖像的移動(dòng)圖像。
18. 根據(jù)權(quán)利要求15所述的信息處理裝置， 其中關(guān)于所述一系列畫面的信息對(duì)應(yīng)于繼續(xù)直至一系列處理完成的所述畫面的轉(zhuǎn)變。
19. 根據(jù)權(quán)利要求15所述的信息處理裝置， 其中關(guān)于所述一系列畫面的信息對(duì)應(yīng)于被執(zhí)行預(yù)定次數(shù)的所述畫面的轉(zhuǎn)變。
20. -種程序，用于使計(jì)算機(jī)執(zhí)行： 識(shí)別畫面中包括的輸入元素的功能； 生成與所述輸入兀素對(duì)應(yīng)的輸入信息的功能； 獲取關(guān)于所述畫面的轉(zhuǎn)變目標(biāo)的信息的功能，關(guān)于所述轉(zhuǎn)變目標(biāo)的信息與所述輸入信 息對(duì)應(yīng)；以及 輸出關(guān)于所述轉(zhuǎn)變目標(biāo)的信息以與所述畫面分離地顯示關(guān)于所述轉(zhuǎn)變目標(biāo)的信息的 功能。
【文檔編號(hào)】G06F3/0482GK104220973SQ201380019592
【公開日】2014年12月17日 申請(qǐng)日期:2013年3月11日 優(yōu)先權(quán)日:2012年4月18日
【發(fā)明者】河野真一 申請(qǐng)人:索尼公司