專利名稱：信息處理裝置、信息處理方法以及計(jì)算機(jī)可讀介質(zhì)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及用于在醫(yī)學(xué)、病理學(xué)、生物學(xué)、材料科學(xué)等領(lǐng)域中控制由顯微鏡獲得的 圖像的顯示的信息處理裝置、信息處理方法以及計(jì)算機(jī)可讀介質(zhì)。
背景技術(shù)：
在醫(yī)學(xué)、病理學(xué)等領(lǐng)域中，已經(jīng)提出了一種系統(tǒng)，S卩，將由光學(xué)顯微鏡獲得的活體 的細(xì)胞、組織、器官等的圖像數(shù)字化，以便由醫(yī)生或病理學(xué)家來檢查組織等，或者基于數(shù)字 化的圖像來診斷病人。例如，日本專利申請公開第2009-37250號(下文中，稱為專利文獻(xiàn)1)公開了一種 方法，其中，通過具有CCD (電荷耦合器件)的攝像機(jī)將由顯微鏡光學(xué)地獲得的圖像數(shù)字化， 將數(shù)字信號輸入至控制計(jì)算機(jī)系統(tǒng)，以及在監(jiān)視器上使圖像可視化。病理學(xué)家在觀看顯示 在監(jiān)視器上的圖像的同時(shí)進(jìn)行檢查(例如，參見專利文獻(xiàn)1的第
和W028]段以及 圖5)。通常，這種系統(tǒng)稱為虛擬顯微鏡。順便提及，在專利文獻(xiàn)1中公開的現(xiàn)有虛擬顯微鏡的情況下，為了由用戶來移 動(dòng)圖像的顯示范圍或者縮放圖像，用戶例如必須反復(fù)執(zhí)行拖曳鼠標(biāo)或滾動(dòng)滾輪(scroll wheel)的操作。然而，在虛擬顯微鏡中使用的圖像具有例如50X 50 (K像素千像素)的大 尺寸。為此，徹底觀察這種圖像對于用戶來說是一件十分困難的任務(wù)。特別地，病理學(xué)家整 天執(zhí)行這種任務(wù)。如果操作很麻煩，則他們可能會(huì)有壓力?？峙驴赡苓z漏本應(yīng)發(fā)現(xiàn)的病理 組織的變化，這會(huì)導(dǎo)致誤診。鑒于上述情況，期望提供能夠減少在虛擬顯微鏡中移動(dòng)圖像的顯示范圍所需要的 用戶操作、并使觀察工作更為有效的信息處理裝置、信息處理方法及其程序。

發(fā)明內(nèi)容
在一個(gè)示例性實(shí)施方式中，信息處理裝置包括處理器和操作性地連接至處理器的 存儲設(shè)備，存儲設(shè)備存儲指令，指令使處理器與存儲設(shè)備相協(xié)作來執(zhí)行以下處理(a)使顯 示設(shè)備在顯示范圍中顯示第一圖像，第一圖像來自于與觀察對象物相關(guān)聯(lián)的圖像(例如， 生物組織切片)，圖像包含第一圖像、第二圖像和第三圖像；(b)響應(yīng)于改變顯示范圍的請 求(i)以第一速度改變顯示范圍；以及(ii)使顯示范圍顯示第二圖像；以及(c)響應(yīng)于終 止顯示范圍的改變的請求(i)以減速速度改變顯示范圍；以及(ii)使顯示范圍顯示第三 圖像。在一個(gè)示例性實(shí)施方式中，第二圖像與第一圖像不同，并且第三圖像與第一圖像 不同。
在一個(gè)示例性實(shí)施方式中，由顯微鏡來觀察與觀察對象物相關(guān)聯(lián)的圖像。在一個(gè)示例性實(shí)施方式中，圖像包括與觀察對象物相關(guān)聯(lián)的第四圖像。在該實(shí)施 方式中，指令使處理器響應(yīng)于終止改變的請求，在顯示范圍顯示第三圖像之后，使顯示范圍 顯示第四圖像。在一個(gè)示例性實(shí)施方式中，信息處理裝置包括操作性地連接至處理器的輸入設(shè) 備。在該實(shí)施方式中，指令使處理器與輸入設(shè)備協(xié)作，以使用戶能夠通過使用拖曳操作來請 求顯示范圍的改變。在一個(gè)示例性實(shí)施方式中，信息處理裝置包括具有操作性地連接至處理器的按鈕 的輸入設(shè)備。在該實(shí)施方式中，指令使處理器與輸入設(shè)備協(xié)作，以使用戶能夠通過釋放按鈕 來請求終止顯示范圍的改變。在一個(gè)示例性實(shí)施方式中，指令使處理器通過使用第一速度和減速速度中的至少 一個(gè)，來確定要顯示的圖像。在一個(gè)示例性實(shí)施方式中，圖像包括特征部分。在一個(gè)示例性實(shí)施方式中，指令使 處理器在顯示范圍以減速速度改變時(shí)確定顯示范圍是否到達(dá)特征部分。在一個(gè)示例性實(shí)施 方式中，指令使處理器響應(yīng)于顯示范圍到達(dá)特征部分，來增大減速速度。在一個(gè)示例性實(shí)施方式中，圖像包括頻率成分。在該實(shí)施方式中，指令使處理器 (a)通過測量頻率成分來生成特征數(shù)據(jù)，頻率數(shù)據(jù)表示頻率級；以及(b)使用頻率級來確定 減速速度。在一個(gè)示例性實(shí)施方式中，信息處理裝置包括輸入設(shè)備。在一個(gè)示例性實(shí)施方式 中，指令使處理器在顯示范圍以減速速度改變時(shí)，與輸入設(shè)備協(xié)作，以使用戶能夠立即停止 顯示范圍的移動(dòng)。在一個(gè)示例性實(shí)施方式中，指令使處理器在顯示范圍以減速速度改變時(shí)， 與輸入設(shè)備協(xié)作，以使用戶能夠使用施加至輸入設(shè)備的壓力來使顯示范圍的移動(dòng)停止。在一個(gè)示例性實(shí)施方式中，以第一分辨率生成第一圖像，以第二分辨率生成第二 圖像，以第三分辨率生成第三圖像。在一個(gè)示例性實(shí)施方式中，圖像包括與觀察對象物相關(guān) 聯(lián)的第四圖像。在一個(gè)示例性實(shí)施方式中，指令使處理器響應(yīng)于終止改變的請求，在顯示范 圍顯示第三圖像之后，使顯示范圍顯示第四圖像。在一個(gè)示例性實(shí)施方式中，指令使處理器與輸入設(shè)備協(xié)作，以使用戶能夠使用縮 放操作來請求顯示范圍的改變。在一個(gè)示例性實(shí)施方式中，顯示的第一圖像具有第一區(qū)域，并且顯示的第二圖像 具有第二區(qū)域，第二區(qū)域比第一區(qū)域窄。在一個(gè)示例性實(shí)施方式中，一種操作包含指令的信息處理裝置的方法包括(a) 使顯示設(shè)備在顯示范圍中顯示第一圖像，第一圖像來自于與觀察對象物相關(guān)聯(lián)的圖像，圖 像包含第一圖像、第二圖像和第三圖像；(b)響應(yīng)于改變顯示范圍的請求(i)使處理器執(zhí) 行指令從而以第一速度改變顯示范圍；以及(ii)使顯示范圍顯示第二圖像；以及(c)響應(yīng) 于終止顯示范圍的改變的請求(i)使處理器執(zhí)行指令從而以減速速度改變顯示范圍；以 及(ii)使顯示范圍顯示第三圖像。在一個(gè)示例性實(shí)施方式中，計(jì)算機(jī)可讀介質(zhì)存儲指令，所述指令結(jié)構(gòu)化為使信息 處理裝置(a)使顯示設(shè)備在顯示范圍中顯示第一圖像，第一圖像來自于與觀察對象物相 關(guān)聯(lián)的圖像，圖像包括第一圖像、第二圖像和第三圖像；(b)響應(yīng)于改變顯示范圍的請求(i)以第一速度改變顯示范圍；以及(ii)使顯示范圍顯示第二圖像；以及(C)響應(yīng)于終止 顯示范圍的改變的請求(i)以減速速度改變顯示范圍；以及(ii)使顯示范圍顯示第三圖像。如上所述，根據(jù)本發(fā)明的實(shí)施方式，可以減少虛擬顯微鏡中的圖像顯示范圍移動(dòng) 所需的用戶操作，這可以使觀察任務(wù)更為高效。如附圖所示，根據(jù)本發(fā)明的最佳模式實(shí)施方式的以下詳細(xì)描述，本發(fā)明的這些和 其他目標(biāo)、特征以及優(yōu)點(diǎn)將變得更加顯而易見。在本文中描述了其他的特征和優(yōu)點(diǎn)，并且它們從以下詳細(xì)的描述和附圖中將變得 顯而易見。


圖1是示出了根據(jù)本發(fā)明示例性實(shí)施方式的包括信息處理裝置的示例性信息處 理系統(tǒng)的結(jié)構(gòu)的框圖。圖2是示出了根據(jù)本發(fā)明示例性實(shí)施方式的用于解釋顯示原理的示例性圖像金 字塔結(jié)構(gòu)的示圖。圖3是用于解釋當(dāng)生成圖2中所示的圖像金字塔結(jié)構(gòu)的圖像組時(shí)的程序的示圖。圖4是示出了根據(jù)本發(fā)明示例性實(shí)施方式的PC的示例性操作的流程圖。圖5是示出了在根據(jù)本發(fā)明示例性實(shí)施方式的PC的操作中在顯示范圍上進(jìn)行移 動(dòng)操作時(shí)的示例性操作的示圖。圖6A、圖6B、圖6C和6D是均示出了在根據(jù)本發(fā)明示例性實(shí)施方式的PC操作中在 顯示范圍上進(jìn)行移動(dòng)操作時(shí)的操作的示圖。圖7是示出了在本發(fā)明實(shí)施方式中的整體圖像的特征分析的狀態(tài)的示圖。圖8是示出了在本發(fā)明的示例性實(shí)施方式中的整體圖像的部分的頻率級的示例 性計(jì)算過程的流程圖。圖9A和圖9B是均示意性地示出了通過本發(fā)明的示例性實(shí)施方式中的PC從整體 圖像的DCT系數(shù)矩陣生成存在頻率矩陣的示例性生成處理的示圖。圖10是示意性地示出通過本發(fā)明的另一示例性實(shí)施方式中的PC從存在頻率矩陣 和高頻檢測矩陣生成頻率得分矩陣的示例性生成處理的示圖。圖11是示出了在本發(fā)明的另一實(shí)施方式中所使用的示例性鼠標(biāo)的外觀和內(nèi)部結(jié) 構(gòu)的示圖。
具體實(shí)施例方式下文中，將參考附圖來描述本發(fā)明的實(shí)施方式。[信息處理裝置的結(jié)構(gòu)]圖1是示出了根據(jù)本發(fā)明示例性實(shí)施方式的包括信息處理裝置的示例性信息處 理系統(tǒng)的結(jié)構(gòu)的框圖。在一個(gè)示例性實(shí)施方式中，信息處理裝置包括PC (個(gè)人計(jì)算機(jī))100。PC 100包括CPU(中央處理單元)101、R0M(只讀存儲器)102、RAM(隨機(jī)存取存儲 器)103、輸入和輸出接口(下文中，縮寫為I/O接口)105以及使這些部件彼此相連接的總 線 104。
當(dāng)需要時(shí)，CPU 101訪問RAM 103等，并且在執(zhí)行各種計(jì)算處理的同時(shí)執(zhí)行對PC 100的各塊的總體控制。ROM 102為非易失性存儲器，其中固定地存儲了由CPU 101執(zhí)行的 OS、程序或諸如各種參數(shù)的固件。RAM103用作CPU 101的工作區(qū)域等，并且臨時(shí)保存處理過 程中的OS、各種操作程序或各種數(shù)據(jù)項(xiàng)。顯示單元106、輸入單元107、存儲單元108、通信單元109、驅(qū)動(dòng)單元110等連接至 I/O 接口 105。顯示單元106是使用液晶、EL(電致發(fā)光)、CRT(陰極射線管)等的顯示設(shè)備。顯 示單元106可以結(jié)合在PC 100中，或者可以向外連接至PC 100。輸入單元107為例如指示設(shè)備(pointing device)、鍵盤、觸摸面板或其他操作裝 置。在輸入單元107包括觸摸面板的情況下，觸摸面板可以與顯示單元106 —體化。存儲單元108為諸如HDD (硬盤驅(qū)動(dòng))的非易失性存儲器、閃存存儲器和其他固態(tài) 存儲器。在存儲單元108中，存儲由(后述的)光學(xué)顯微鏡獲得的圖像。驅(qū)動(dòng)單元110是能夠驅(qū)動(dòng)諸如光學(xué)記錄介質(zhì)、軟盤(注冊商標(biāo))、磁帶以及閃存存 儲器的可移除記錄介質(zhì)111的設(shè)備。相反，存儲單元108通常用作先前包含在PC 100中并 主要驅(qū)動(dòng)不可移除記錄介質(zhì)的設(shè)備。通信單元109是可連接至LAN(局域網(wǎng))、WAN(廣域網(wǎng))等并用于與其他設(shè)備進(jìn)行 通信的調(diào)制解調(diào)器、路由器或其他通信裝置。通信單元109可以執(zhí)行有線通信或無線通信。 在很多情況下，通信單元109與PC 100相獨(dú)立地使用。接下來，將描述由光學(xué)顯微鏡(未示出)獲得的圖像和顯示圖像的原理。圖像主 要存儲在PC 100的存儲單元108中。圖2是示出用于解釋顯示原理的示例性圖像結(jié)構(gòu)的 示圖。如圖2所示，在該實(shí)施方式中使用的圖像具有金字塔結(jié)構(gòu)(圖像金字塔結(jié)構(gòu)50)。 圖像金字塔結(jié)構(gòu)50是關(guān)于由光學(xué)顯微鏡從一個(gè)觀察對象物15(參見圖幻獲得的一幅圖 像、以多個(gè)分辨率生成的圖像組。在該實(shí)施方式中，構(gòu)成圖像組的圖像均稱為整體圖像。 在圖像金字塔結(jié)構(gòu)50的最下部，設(shè)置最大圖像，并且在其最上部，設(shè)置最小圖像。例如， 最大圖像的分辨率為50X50(K像素)或40Χ60(Κ像素)。例如，最小圖像的分辨率為 256Χ256(像素)或256Χ512(像素)。此外，整體圖像是通過例如JPEG壓縮來壓縮的圖 像，但壓縮方式不限于此。PC 100從包括在圖像金字塔結(jié)構(gòu)50中的整體圖像中適當(dāng)?shù)靥崛?yīng)于顯示單元 106的預(yù)定顯示范圍的一部分的圖像(下文中，稱為部分圖像)，并且在RAM 103上讀出該 部分圖像，以由顯示單元106輸出。這里，在圖2中，顯示單元106的顯示范圍由D來表示。圖3是用于解釋生成圖像金字塔結(jié)構(gòu)50的圖像組的示例性程序的示圖。首先，準(zhǔn)備由光學(xué)顯微鏡(未示出)以預(yù)定的觀察倍率獲得的原始圖像的數(shù)字圖 像。該原始圖像對應(yīng)于最大圖像，該最大圖像為圖2中所示的圖像金字塔結(jié)構(gòu)50的最下部 的圖像，即，處于最高分辨率的整體圖像。因此，作為圖像金字塔結(jié)構(gòu)50的最下部的整體圖 像，使用了通過由光學(xué)顯微鏡以比較高的倍率觀察獲得的圖像。應(yīng)當(dāng)注意，在病理學(xué)領(lǐng)域中，通常，通過將活體的器官、組織或細(xì)胞或者它們的一 部分切片所獲得的物體為觀察對象物15。然后，具有光學(xué)顯微鏡的功能的掃描裝置(未示 出)讀取保存在載玻片上的觀察對象物15，以獲得數(shù)字圖像并將所獲得的數(shù)字圖像存入該掃描裝置或其他存儲裝置。如圖3所示，例如，掃描裝置或通用計(jì)算機(jī)(未示出)從如上所述地獲得的最大圖 像生成分辨率逐漸降低的多個(gè)整體圖像，并將這些整體圖像存儲在作為預(yù)定尺寸的單位的 “片(tile)”單位中。例如，一個(gè)片的尺寸為256X256(像素)。如上所述地生成的圖像組 形成圖像金字塔結(jié)構(gòu)50，并且PC 100的存儲單元108存儲圖像金字塔結(jié)構(gòu)50。實(shí)際上，PC 100只需分別存儲分辨率與(與分辨率信息項(xiàng)相關(guān)聯(lián)的)整體圖像的分辨率不同的整體圖 像。另外，可以由圖1所示的PC 100來執(zhí)行圖像金字塔結(jié)構(gòu)50的生成和存儲。PC 100使用了采用圖像金字塔結(jié)構(gòu)50的系統(tǒng)的軟件，從而根據(jù)用戶通過輸入單 元107的輸入操作，以圖像金字塔結(jié)構(gòu)50的任意分辨率而從整體圖像中提取對應(yīng)于顯示范 圍D的部分圖像。然后，PC 100在RAM 103上讀取該部分圖像，并隨后在顯示單元106上 輸出該部分圖像。另外，在由用戶輸入移動(dòng)操作的情況下，關(guān)于所顯示的部分圖像，PC 100 在(從中提取了部分圖像的)整體圖像上移動(dòng)顯示范圍D，并且在移動(dòng)之后提取包括在顯示 范圍D中的部分圖像，以便輸出。此外，在用戶關(guān)于所顯示的部分圖像而輸入縮放操作的情 況下，PC 100從其分辨率與從中提取所關(guān)心的部分圖像的整體圖像的分辨率不同的整體圖 像中，提取對應(yīng)于該部分圖像的寬區(qū)域圖像或窄區(qū)域圖像的部分圖像，以便輸出。通過這種 處理，用戶可以在改變觀察倍率的同時(shí)獲得對觀察對象物15進(jìn)行觀察的感覺。S卩，PC 100 具有虛擬顯微鏡的功能。在這種情況下，虛擬觀察倍率對應(yīng)于實(shí)際分辨率。這里，顯示范圍D不是指顯示單元106的最大顯示范圍尺寸，而是指顯示單元106 的顯示范圍的全部或一部分的范圍，例如，這可以由用戶來適當(dāng)?shù)卦O(shè)置。此外，顯示范圍D 對應(yīng)于片以多行和多列設(shè)置的區(qū)域。[信息處理裝置的操作]接下來，將描述如上所述地構(gòu)造的PC 100的操作。圖4是示出了根據(jù)示例性實(shí)施方式的PC 100的示例性操作的流程圖。圖5是示 出了當(dāng)執(zhí)行PC 100的操作中的顯示范圍D的移動(dòng)操作時(shí)的示例性操作的示圖。圖6A、圖 6B、圖6C和圖6D是均示出了當(dāng)執(zhí)行(包括在PC 100的操作中的)顯示范圍D的縮放操作 時(shí)的示例性操作的示圖。存儲在存儲單元108、R0M 102等中的軟件和PC 100的硬件資源彼此協(xié)作，從而實(shí) 現(xiàn)以下PC 100的處理。具體地，CPU 101加載形成存儲在存儲單元108、R0M 102等中的軟 件的程序，并執(zhí)行該程序，從而實(shí)現(xiàn)以下處理。首先，用戶通過使用輸入單元107的輸入操作來訪問包括圖像金字塔結(jié)構(gòu)50的圖 像組的文件。響應(yīng)于該操作，PC 100的CPU 101從存儲在存儲單元108中的圖像金字塔結(jié) 構(gòu)50中提取預(yù)定的部分圖像，并且在RAM103上讀取該預(yù)定的部分圖像，以顯示在顯示單元 106上(步驟51)。最初可以默認(rèn)設(shè)置或者可以由用戶來適當(dāng)?shù)卦O(shè)置包含在圖像金字塔結(jié) 構(gòu)50中并由CPU 101訪問的預(yù)定的部分圖像。通常，CPU 101最初顯示整體圖像中的部分圖像，該整體圖像具有對應(yīng)于比較低的 分辨率的觀察倍率(低倍率)(例如，1. 25倍)的分辨率。隨后，CPU 101等待由用戶從自輸入單元107進(jìn)行的輸入操作(步驟52)。當(dāng)用戶操作輸入單元107以將顯示范圍D移動(dòng)到期望的位置時(shí)(步驟52中的 “是”)，CPU 101判斷該操作是否為移動(dòng)操作(步驟53)。通常，移動(dòng)操作為使用鼠標(biāo)的拖曳操作。在用戶的操作為移動(dòng)操作的情況下(步驟53中的“是”)，CPU 101根據(jù)移動(dòng)操作 的速度(以與移動(dòng)操作速度相同的速度)在從中提取部分圖像的整體圖像上移動(dòng)顯示范 圍D，并且讀取設(shè)置在RAM 103上的在顯示范圍D移動(dòng)之后的部分的部分圖像，以進(jìn)行顯示 (步驟54)。隨后，CPU 101判斷移動(dòng)操作(拖曳操作)是否終止，即，用戶是否釋放鼠標(biāo)按鈕 (步驟55)。在判斷出移動(dòng)操作終止的情況下(步驟55中的“是”)，CPU 101進(jìn)一步以按預(yù)定 的減速度從上述移動(dòng)操作速度減小的速度，在整體圖像上移動(dòng)顯示范圍D。BP, CPU 101在 減小速度的同時(shí)保持顯示范圍D的移動(dòng)。在這種情況下，移動(dòng)速度(V)根據(jù)以下等式針對每個(gè)顯示范圍D而更新V = V*S (0 < S < 1. 0)…(1)其中，S表示減速度。在圖5的實(shí)例中，首先，向右拖曳鼠標(biāo)，從而使顯示范圍D向右移動(dòng)。結(jié)果，部分圖 像Pl更新為設(shè)置在部分圖像Pl右手邊的部分圖像P2(圖5中的(A)和(B))。然后，即使 當(dāng)拖曳操作終止時(shí)，顯示范圍D的移動(dòng)在減速的同時(shí)仍然繼續(xù)(圖5中的(B)和(C))。因 此，即使在拖曳操作終止之后，用戶仍可以在視覺上感覺到好像顯示范圍D由于慣性力在 繼續(xù)移動(dòng)。如上所述，在顯示范圍D在減速的同時(shí)移動(dòng)的情況下，CPU 101可以基于移動(dòng)速度 (V)和移動(dòng)方向來計(jì)算預(yù)期需要的部分圖像和需要該部分圖像時(shí)的時(shí)間。因此，在顯示范圍 D移動(dòng)之前，CPU 101可以加載對應(yīng)于顯示范圍D移動(dòng)到的位置的部分圖像的至少一部分， 即，從圖像金字塔結(jié)構(gòu)50到RAM 103的片。從而，平穩(wěn)地執(zhí)行顯示范圍D的移動(dòng)。返回到圖4的流程圖，當(dāng)在步驟53判斷出用戶操作不是移動(dòng)操作的情況下，CPU 101判斷用戶操作是否是縮放操作(步驟57)。通常，縮放操作為鼠標(biāo)的滾輪的滾動(dòng)操作。在判斷出操作為縮放操作的情況下(步驟57中的“是”)，CPU 101以與縮放操作 的速度相同的速度，來改變已顯示在部分圖像中的原始部分圖像，該部分圖像對應(yīng)于整體 圖像中的原始部分圖像的寬區(qū)域圖像或窄區(qū)域圖像，該整體圖像與從中提取原始部分圖像 的原始圖像不同。例如，如圖6A和圖6B所示，在針對部分圖像Pl輸入縮放操作的情況下，CPU 101 以與從中提取部分圖像Pl的整體圖像的分辨率不同的分辨率，從圖像金字塔結(jié)構(gòu)50中提 取對應(yīng)于整體圖像中的部分圖像Pl的窄區(qū)域圖像的部分圖像P2，并且將部分圖像Pl改變 為部分圖像P2。隨后，CPU 101判斷縮放操作(滾輪滾動(dòng)操作)是否終止，即，用戶是否釋放了鼠 標(biāo)的滾輪(步驟59)。在判斷出縮放操作終止的情況下(步驟59中的“是”)，CPU以按預(yù)定的減速度從 縮放操作速度減小的速度而保持不同的整體圖像之間的部分圖像的改變。在這種情況下， 減速的縮放速度以與關(guān)于移動(dòng)速度(V)的等式(1)相同的方式來計(jì)算。在圖6的實(shí)例中，當(dāng)用戶向外滾動(dòng)鼠標(biāo)的滾輪時(shí)，顯示范圍D中的原始部分圖像Pl 以該滾動(dòng)速度而改變?yōu)椴煌恼w圖像中的更窄區(qū)域的部分圖像P2(圖6A和6B)。然后，即使當(dāng)滾輪滾動(dòng)操作終止時(shí)，在減速的同時(shí)不同的整體圖像之間的部分圖像的改變(從P2 到P3)繼續(xù)進(jìn)行(圖6B和6C)。從而，即使在縮放操作終止之后，用戶仍可以在視覺上感覺 到好像縮放操作由于慣性力還在繼續(xù)。返回到圖4的流程圖，在當(dāng)顯示范圍D在移動(dòng)操作之后減速的同時(shí)而移動(dòng)的時(shí)段 內(nèi)，或者在當(dāng)部分圖像在縮放操作之后減速的同時(shí)而改變的時(shí)段期間，CPU 101判斷是否到 達(dá)整體圖像中的特征部分(步驟61)。這里，特征部分指的是例如在整體圖像中圖像成分急劇變化的部分。通過以預(yù)定 的分析方法通過分析整體圖像來檢測該特征部分。圖7是均示出了對所關(guān)心的整體圖像進(jìn) 行特征分析的示圖。如圖7所示，例如，通過聚類(cluster)處理將整體圖像W分成多個(gè)聚類區(qū)域(Cl 至C4)。將與多個(gè)聚類區(qū)域的邊界線有關(guān)的數(shù)據(jù)存儲在存儲單元108中作為特征數(shù)據(jù)，并且 CPU 101將特征數(shù)據(jù)讀入到RAM 103中用于移動(dòng)操作和縮放操作。特征數(shù)據(jù)的生成并非一定需要通過聚類處理而分為聚類區(qū)域的劃分處理。例如， CPU 101還可以通過測量整體圖像中的頻率成分而生成特征數(shù)據(jù)。圖8是示出了通過頻率 成分的測量而生成特征數(shù)據(jù)的生成處理的流程圖。此外，圖9和圖10是示出了頻率成分的 測量處理的一部分的示圖。對于頻率成分的測量，例如，使用了在整體圖像上執(zhí)行JPEG壓縮時(shí)的DCT系數(shù)。 即，如圖8所示，CPU 101首先從整體圖像中提取每個(gè)8X8塊的DCT系數(shù)矩陣數(shù)據(jù)(步驟 81)。基于該DCT系數(shù)矩陣，揭示出每個(gè)8X8塊的高頻成分。隨后，如圖9所示，CPU 101生成通過在DCT系數(shù)矩陣中將其數(shù)值不為0的單元的 數(shù)值變?yōu)?而獲得的矩陣(存在頻率矩陣)(步驟8 。進(jìn)一步地，CPU 101生成其中的數(shù) 值隨著獲得高頻成分而變大(朝向矩陣的右下角)的矩陣(高頻檢測矩陣)(步驟83)。隨后，如圖10所示，CPU 101使存在頻率矩陣與高頻檢測矩陣的相應(yīng)單元的數(shù)值 相乘，從而生成新矩陣(頻率得分矩陣)(步驟84)。隨后，CPU 101將頻率得分矩陣的所有單元的多段數(shù)據(jù)相加，以獲得總值，并且將 該總值設(shè)置為8X8塊圖像的頻率值(步驟85)。然后，CPU 101關(guān)于全部整體圖像而計(jì)算每個(gè)8X8塊圖像的頻率值(步驟86)。 此外，CPU 101將整體圖像中的每個(gè)8X8塊圖像的頻率值除以每個(gè)8X8塊圖像的最大值， 從而計(jì)算出每個(gè)8X8塊圖像的歸一化頻率級(F)(步驟87)。這里，可以使用通過量化DCT系數(shù)所獲得的數(shù)據(jù)來代替DCT系數(shù)矩陣。CPU 101將整體圖像的每個(gè)8X8塊圖像的頻率級(F)存入RAM 103中作為特征數(shù) 據(jù)。返回到圖4的流程圖，在判斷出顯示范圍D到達(dá)整體圖像中的特征部分的情況下 (步驟61中的“是”)，即，判斷出整體圖像中的頻率級(F)發(fā)生變化，則CPU 101根據(jù)該頻 率級(F)而增大減速度(步驟6 。具體地，CPU 101基于以下等式來計(jì)算減速度(S)，以 根據(jù)該減速度來顯示部分圖像。S=LO-F. . . (2)通過上述處理，快速地執(zhí)行用戶不太感興趣的區(qū)域中的移動(dòng)或縮放，而仔細(xì)(緩 慢)地執(zhí)行對于用戶來說很重要的區(qū)域中的移動(dòng)或縮放。例如，物理上，摩擦系數(shù)根據(jù)整體圖像的區(qū)域而不同，并且獲得了在圖像發(fā)生變化的部分上進(jìn)一步施加制動(dòng)(brake)的這種 顯示效果。因此，使用戶盡可能地避免遺漏特定部分。通過上述處理，CPU 101判斷用戶在顯示范圍D減速的縮放或移動(dòng)期間是否輸入 單擊操作，或者該速度是否由于減速而達(dá)到0 (步驟63)。在輸入單擊操作或速度達(dá)到0的情況下(步驟63中的“是”)，CPU 101停止已進(jìn) 行移動(dòng)操作的顯示范圍D的移動(dòng)或者在縮放操作之后的部分圖像的變化(步驟64，圖5中 的(D)和圖6D)。用戶的單擊操作停止了部分圖像的變化或顯示范圍D的移動(dòng)，因此可以防 止用戶遺漏在移動(dòng)或縮放期間內(nèi)部分圖像由于偽慣性力而到達(dá)感興趣部分的時(shí)刻。通過上述處理，即使在用戶沒有輸入移動(dòng)操作或縮放操作之后，PC100仍可以給出 如下視覺效果，即，操作在減速的同時(shí)由于慣性力而保持。因此，在用戶手動(dòng)執(zhí)行移動(dòng)操作 或縮放操作的情況下，可以在很大程度上降低操作次數(shù)的數(shù)目。特別地，提高了病理學(xué)家對 病理學(xué)診斷的操作效率，因此顯著地降低了對重要部分的遺漏。另外，在特定部分(高頻成 分)中增大減速度，這可以進(jìn)一步防止遺漏該部分。[變形例]本發(fā)明不限于以上實(shí)施方式，并且在不背離本發(fā)明主旨的情況下，可以進(jìn)行各種 變形。在以上實(shí)施方式中，在用戶在減速的縮放或移動(dòng)期間內(nèi)輸入鼠標(biāo)的單擊操作的情 況下，CPU 101立即停止在顯示范圍D移動(dòng)之后的移動(dòng)或者部分圖像在縮放操作之后的變 化。然而，停止的方式不限于此。例如，在通過用戶的縮放操作或移動(dòng)操作終止之后(用戶 放開按鈕之后)用戶輸入單擊操作的情況下，CPU 101可以根據(jù)通過單擊而施加至鼠標(biāo)的 壓力來改變減速度。具體地，如圖11所示，例如，在用作輸入單元107的鼠標(biāo)110的左鍵111中，設(shè)置 有諸如壓敏片112的壓力傳感器。壓力傳感器檢測例如由用戶手指施加的壓力。壓敏片可 以不設(shè)置在左鍵111中，而設(shè)置在其表面上。對于壓力傳感器，可以使用半導(dǎo)體膜片型、電 容型、彈性膜片型、壓電型、振動(dòng)型、彈簧管型、波紋管(bellows)型等的任何壓敏元件。此 外，可以使用三維傳感器來代替薄片形狀。當(dāng)用戶在減速的縮放操作或移動(dòng)操作期間用鼠標(biāo)而在左鍵上進(jìn)行單擊操作時(shí)， CPU 101基于通過單擊操作而施加至左鍵的壓力的值，S卩，來自壓敏片112的模擬量輸入， 來改變預(yù)定的減速度。通常，當(dāng)檢測到的壓力值變大時(shí)，CPU 101增大減速度。即，根據(jù)檢測到的壓力值， CPU 101基于以下等式來計(jì)算減速度，以根據(jù)該減速度來顯示部分圖像。S=LO-P. . . (3)其中，P表示通過將壓力值歸一化而獲得的值。結(jié)果，通過在縮放或移動(dòng)以減速的速度繼續(xù)的時(shí)段內(nèi)使用鼠標(biāo)110來施加壓力， 用戶可以得到這樣的操作感覺，即，由于根據(jù)壓力的摩擦力而相對于縮放或移動(dòng)施加制 動(dòng)。更具體地，例如，用戶可以體驗(yàn)到好像用戶通過手指的摩擦力停止?jié)L動(dòng)球體(rotating globe)的滾動(dòng)的操作感覺。因此，用戶可以通過直觀的操作感覺來停止移動(dòng)或縮放。在觸摸面板(touch panel)或觸摸板(touch pad)代替鼠標(biāo)110用作輸入單元 107的情況下，例如，通過在觸摸面板或觸摸板中設(shè)置壓力傳感器來實(shí)現(xiàn)相同的處理。
在上文中，描述了將形成圖像金字塔50的圖像數(shù)據(jù)存儲在PC 100的存儲單元108 中的模式。然而，與PC 100相獨(dú)立的另一計(jì)算機(jī)或者服務(wù)器可以存儲形成圖像金字塔結(jié) 構(gòu)50的圖像數(shù)據(jù)，由用戶使用而用作終端裝置的PC 100可以訪問計(jì)算機(jī)或服務(wù)器以接收 圖像數(shù)據(jù)。在這種情況下，作為終端裝置的PC 100和服務(wù)器等可以經(jīng)由諸如LAN和WAN的 網(wǎng)絡(luò)而連接。特別地，WAN的使用可以實(shí)現(xiàn)遠(yuǎn)程病理學(xué)、遠(yuǎn)程診斷等。另外，可以通過與PC 100相獨(dú)立的計(jì)算機(jī)或服務(wù)器來執(zhí)行特征數(shù)據(jù)(頻率級)的生成處理，并且PC 100可以從 計(jì)算機(jī)或服務(wù)器接收特征數(shù)據(jù)。在上文中，描述了該模式，其中，作為圖像金字塔結(jié)構(gòu)50的原始圖像，關(guān)于一個(gè)觀 察對象物15而生成一幅原始圖像。然而，關(guān)于一個(gè)觀察對象物15，可以在觀察對象物15的 厚度方向上生成多幅原始圖像，該厚度方向?yàn)楣鈱W(xué)顯微鏡的聚焦方向。這就是所謂的Z堆 疊，其為處理在組織或細(xì)胞在觀察對象物15的厚度方向上也可能具有不同形狀的情況下 的功能。掃描裝置在很多情況下具有Z堆疊功能，并且生成大約5 10或10 30幅原始 圖像。在以上實(shí)施方式中，PC 100通過測量整體圖像的頻率成分而生成整體圖像的特征 數(shù)據(jù)。然而，除頻率以外，PC 100還可以通過檢測整體圖像中的標(biāo)準(zhǔn)偏差、對比度、邊緣等 或者將它們組合，來生成特征數(shù)據(jù)。PC用作根據(jù)以上實(shí)施方式的信息處理裝置，但也可以使用專用信息處理裝置來代 替PC。此外，信息處理裝置不限于與硬件資源和軟件相協(xié)作來實(shí)現(xiàn)上述信息處理的裝置。 專用硬件也可以實(shí)現(xiàn)上述的信息處理。應(yīng)當(dāng)理解的是，本文所述的現(xiàn)有優(yōu)選實(shí)施方式的各種改變和修改對于本領(lǐng)域的技 術(shù)人員來說將是顯而易見的。在不背離本發(fā)明精神和范圍的情況下并且在不減少其預(yù)期的 優(yōu)點(diǎn)的情況下，可以進(jìn)行這些改變和修改。因此，旨在由所附權(quán)利要求覆蓋這些改變和修 改。
權(quán)利要求
1.一種信息處理裝置，包括 處理器；以及操作性地連接至所述處理器的存儲設(shè)備，所述存儲設(shè)備存儲指令，所述指令使所述處 理器與所述存儲設(shè)備協(xié)作，以便(a)使顯示設(shè)備在顯示范圍中顯示第一圖像，所述第一圖像來自于與觀察對象物相關(guān) 聯(lián)的圖像，所述圖像包括第一圖像、第二圖像和第三圖像；(b)響應(yīng)于改變所述顯示范圍的請求 (i)以第一速度改變所述顯示范圍；以及( )使所述顯示范圍顯示所述第二圖像；以及(c)響應(yīng)于終止所述顯示范圍的改變的請求 (i)以減速速度改變所述顯示范圍；以及 ( )使所述顯示范圍顯示所述第三圖像。
2.根據(jù)權(quán)利要求1所述的信息處理裝置，其中，所述第二圖像與所述第一圖像不同，并 且所述第三圖像與所述第一圖像不同。
3.根據(jù)權(quán)利要求2所述的信息處理裝置，其中，所述觀察對象物包括生物組織切片。
4.根據(jù)權(quán)利要求2所述的信息處理裝置，其中，通過顯微鏡來觀察與所述觀察對象物 相關(guān)聯(lián)的所述圖像。
5.根據(jù)權(quán)利要求2所述的信息處理裝置，其中(a)所述圖像包括與所述觀察對象物相關(guān)聯(lián)的第四圖像；以及(b)所述指令在由所述處理器執(zhí)行時(shí)，使所述處理器響應(yīng)于終止改變的請求，在所述顯 示范圍顯示所述第三圖像之后，使所述顯示范圍顯示所述第四圖像。
6.根據(jù)權(quán)利要求2所述的信息處理裝置，包括操作性地連接至所述處理器的輸入設(shè) 備，其中，所述指令在由所述處理器執(zhí)行時(shí)，使所述處理器與所述輸入設(shè)備協(xié)作，以使用戶 能夠通過使用拖曳操作來請求所述顯示范圍的改變。
7.根據(jù)權(quán)利要求2所述的信息處理裝置，包括具有操作性地連接至所述處理器的按鈕 的輸入設(shè)備，其中，所述指令在由所述處理器執(zhí)行時(shí)，使所述處理器與所述輸入設(shè)備協(xié)作， 以使用戶能夠通過釋放所述按鈕來請求終止所述顯示范圍的改變。
8.根據(jù)權(quán)利要求2所述的信息處理裝置，其中，所述指令在由所述處理器執(zhí)行時(shí)，使所 述處理器使用所述第一速度和所述減速速度中的至少一個(gè)來確定要顯示哪幅圖像。
9.根據(jù)權(quán)利要求2所述的信息處理裝置，其中(a)所述圖像包括特征部分；以及(b)所述指令在由所述處理器執(zhí)行時(shí)，使所述處理器在所述顯示范圍以所述減速速度 改變時(shí)確定所述顯示范圍是否到達(dá)所述特征部分。
10.根據(jù)權(quán)利要求9所述的信息處理裝置，其中，所述指令在由所述處理器執(zhí)行時(shí)，使 所述處理器響應(yīng)于所述顯示范圍到達(dá)所述特征部分來增大所述減速速度。
11.根據(jù)權(quán)利要求2所述的信息處理裝置，其中(a)所述圖像包括頻率成分；(b)所述指令在由所述處理器執(zhí)行時(shí)，使所述處理器(i)通過測量所述頻率成分來生成特征數(shù)據(jù)，所述頻率數(shù)據(jù)表示頻率級；以及( )使用所述頻率級來確定所述減速速度。
12.根據(jù)權(quán)利要求2所述的信息處理裝置，包括輸入設(shè)備，其中，所述指令在由所述處 理器執(zhí)行時(shí)，使所述處理器在所述顯示范圍以所述減速速度改變時(shí)與所述輸入設(shè)備協(xié)作， 以使用戶能夠立即停止所述顯示范圍的移動(dòng)。
13.根據(jù)權(quán)利要求2所述的信息處理裝置，包括輸入設(shè)備，其中，所述指令在由所述處 理器執(zhí)行時(shí)，使所述處理器在所述顯示范圍以所述減速速度改變時(shí)與所述輸入設(shè)備協(xié)作， 以使用戶能夠使用施加至所述輸入設(shè)備的壓力而使所述顯示范圍的移動(dòng)停止。
14.根據(jù)權(quán)利要求1所述的信息處理裝置，其中(a)以第一分辨率生成所述第一圖像；(b)以第二分辨率生成所述第二圖像；以及(c)以第三分辨率生成所述第三圖像。
15.根據(jù)權(quán)利要求14所述的信息處理裝置，其中，所述觀察對象物包括生物組織切片。
16.根據(jù)權(quán)利要求14所述的信息處理裝置，其中，通過顯微鏡來觀察與所述觀察對象 物相關(guān)聯(lián)的所述圖像。
17.根據(jù)權(quán)利要求14所述的信息處理裝置，其中所述圖像包括與所述觀察對象物相關(guān)聯(lián)的第四圖像；以及所述指令在由所述處理器執(zhí)行時(shí)，使所述處理器響應(yīng)于終止改變的請求，在所述顯示 范圍顯示所述第三圖像之后，使所述顯示范圍顯示所述第四圖像。
18.根據(jù)權(quán)利要求14所述的信息處理裝置，包括操作性地連接至所述處理器的輸入設(shè) 備，其中，所述指令在由所述處理器執(zhí)行時(shí)，使所述處理器與所述輸入設(shè)備協(xié)作，以使用戶 能夠通過使用縮放操作來請求所述顯示范圍的改變。
19.根據(jù)權(quán)利要求14所述的信息處理裝置，包括具有操作性地連接至所述處理器的 按鈕的輸入設(shè)備，其中，所述指令在由所述處理器執(zhí)行時(shí)，使所述處理器與所述輸入設(shè)備協(xié) 作，以使用戶能夠通過釋放所述按鈕來請求終止所述顯示范圍的改變。
20.根據(jù)權(quán)利要求14所述的信息處理裝置，其中，所述指令在由所述處理器執(zhí)行時(shí)，使 所述處理器使用所述第一速度和所述減速速度中的至少一個(gè)來確定要顯示哪幅圖像。
21.根據(jù)權(quán)利要求14所述的信息處理裝置，其中(a)所述圖像包括特征部分；以及(b)所述指令在由所述處理器執(zhí)行時(shí)，使所述處理器在所述顯示范圍以所述減速速度 改變時(shí)，確定所述顯示范圍是否到達(dá)所述特征部分。
22.根據(jù)權(quán)利要求21所述的信息處理裝置，其中，所述指令在由所述處理器執(zhí)行時(shí)，使 所述處理器響應(yīng)于所述顯示范圍到達(dá)所述特征部分，來提高所述減速速度。
23.根據(jù)權(quán)利要求14所述的信息處理裝置，包括輸入設(shè)備，其中，所述指令在由所述處 理器執(zhí)行時(shí)，使所述處理器在所述顯示范圍以所述減速速度改變時(shí)與所述輸入設(shè)備協(xié)作， 以使用戶能夠立即停止所述顯示范圍的移動(dòng)。
24.根據(jù)權(quán)利要求14所述的信息處理裝置，包括輸入設(shè)備，其中，所述指令在由所述處 理器執(zhí)行時(shí)，使所述處理器在所述顯示范圍以所述減速速度改變時(shí)與所述輸入設(shè)備協(xié)作， 以使用戶能夠使用施加至所述輸入設(shè)備的壓力來使所述顯示范圍的移動(dòng)停止。
25.根據(jù)權(quán)利要求14所述的信息處理裝置，其中，顯示的第一圖像具有第一區(qū)域，并且顯示的第二圖像具有第二區(qū)域，所述第二區(qū)域比所述第一區(qū)域窄。
26.一種操作包含指令的信息處理裝置的方法，所述方法包括(a)使顯示設(shè)備在顯示范圍中顯示第一圖像，所述第一圖像來自于與觀察對象物相關(guān) 聯(lián)的圖像，所述圖像包括第一圖像、第二圖像和第三圖像；(b)響應(yīng)于改變所述顯示范圍的請求(i)使處理器執(zhí)行所述指令從而以第一速度改變所述顯示范圍；以及 ( )使所述顯示范圍顯示所述第二圖像；以及(c)響應(yīng)于終止所述顯示范圍的改變的請求(i)使處理器執(zhí)行所述指令從而以減速速度改變所述顯示范圍；以及 ( )使所述顯示范圍顯示所述第三圖像。
27.一種存儲指令的計(jì)算機(jī)可讀介質(zhì)，構(gòu)造為使信息處理裝置(a)使顯示設(shè)備在顯示范圍中顯示第一圖像，所述第一圖像來自于與觀察對象物相關(guān) 聯(lián)的圖像，所述圖像包括第一圖像、第二圖像和第三圖像；(b)響應(yīng)于改變所述顯示范圍的請求 (i)以第一速度改變所述顯示范圍；以及( )使所述顯示范圍顯示所述第二圖像；以及(c)響應(yīng)于終止所述顯示范圍的所述改變的請求 (i)以減速速度改變所述顯示范圍；以及( )使所述顯示范圍顯示所述第三圖像。
全文摘要
本發(fā)明公開了信息處理裝置、信息處理方法以及計(jì)算機(jī)可讀介質(zhì)。在一個(gè)示例性實(shí)施方式中，信息處理裝置使顯示設(shè)備在顯示范圍中顯示第一圖像。在該實(shí)施方式中，第一圖像來自于與觀察對象物相關(guān)聯(lián)的圖像。圖像包括第一圖像、第二圖像和第三圖像。響應(yīng)于改變顯示范圍的請求，信息處理裝置以第一速度改變顯示范圍，并且使顯示范圍顯示第二圖像。響應(yīng)于終止顯示范圍的改變的請求，信息處理裝置以減速速度改變顯示范圍，并且使顯示范圍顯示第三圖像。
文檔編號G06F19/00GK102096758SQ20101055726
公開日2011年6月15日 申請日期2010年11月23日 優(yōu)先權(quán)日2009年11月30日
發(fā)明者吉岡重篤, 水谷陽一 申請人:索尼公司