遠(yuǎn)程作業(yè)支持系統(tǒng)以及遠(yuǎn)程作業(yè)支持程序存儲介質(zhì)的制作方法
【技術(shù)領(lǐng)域】
[0001]本申請主張2013年3月29日申請的日本申請、特愿2013-071671號的優(yōu)先權(quán)，并且將其整體通過參照弓I入本說明書中。
[0002]本發(fā)明涉及遠(yuǎn)程作業(yè)支持系統(tǒng)和存儲有遠(yuǎn)程作業(yè)支持程序的永久性存儲介質(zhì)，例如，可應(yīng)用于在指示者與被指示者之間共享作業(yè)信息的同時支持遠(yuǎn)程作業(yè)的遠(yuǎn)程作業(yè)支持系統(tǒng)以及存儲有程序的永久性存儲介質(zhì)。
【背景技術(shù)】
[0003]例如，一般情況下，在制造廠商中，設(shè)計者等作業(yè)指示者(以下，稱為指示者)針對生產(chǎn)現(xiàn)場等的作業(yè)者，直接指導(dǎo)作業(yè)內(nèi)容。但是，有時制造廠商的生產(chǎn)據(jù)點(diǎn)與設(shè)計者的據(jù)點(diǎn)設(shè)置在分開的位置，存在指示者無法對作業(yè)者指導(dǎo)直接作業(yè)指示的情況。
[0004]針對于此，以往，作為指示者針對在遠(yuǎn)距離的現(xiàn)場進(jìn)行作業(yè)的作業(yè)者進(jìn)行作業(yè)的指示及指導(dǎo)支持的系統(tǒng)，存在遠(yuǎn)程作業(yè)支持系統(tǒng)。
[0005]日本特開2008-107871號公報中記載的技術(shù)是如下這樣的技術(shù):經(jīng)由網(wǎng)絡(luò)連接了指示者的終端與作業(yè)者的終端，將指示者拍攝到的影像放映到作業(yè)者的終端，兩終端共享影像。由此，指示者和作業(yè)者能夠一邊觀察相同的影像，一邊由指示者通過電話利用語音對作業(yè)者進(jìn)行作業(yè)指示。
[0006]此外，在上述文獻(xiàn)所記載的技術(shù)中，對放映到指示者自身的終端的影像畫面上賦予箭頭，一邊利用該箭頭進(jìn)行位置確認(rèn)一邊進(jìn)行作業(yè)指示。

【發(fā)明內(nèi)容】

[0007]發(fā)明要解決的課題
[0008]然而，在上述文獻(xiàn)所記載的技術(shù)中，盡管在指示者和作業(yè)者的顯示器上放映相同的影像，但是，關(guān)于詳細(xì)的指示，利用語音進(jìn)行指示，從而指示者無法直觀地利用簡單的操作來進(jìn)行作業(yè)指示。
[0009]此外，盡管能夠在放映到顯示器的影像上簡單地顯示箭頭等，但是，當(dāng)作業(yè)者進(jìn)行觀察時，箭頭在畫面上連續(xù)移動地放映出來，作業(yè)者也無法判斷作為作業(yè)重點(diǎn)的部位，無法準(zhǔn)確地目視判斷作業(yè)指示。
[0010]此外，在上述文獻(xiàn)所記載的技術(shù)中，在指示者側(cè)的影像上重疊顯示箭頭等。但是，例如，在像指示者側(cè)利用指針指示作業(yè)者側(cè)的影像等那樣，影像的拍攝源與指針的指示源不同的情況下，由于兩終端的畫面尺寸不同，影像的大小不同，因此，需要對放映的影像的坐標(biāo)軸與指針的坐標(biāo)軸進(jìn)行調(diào)整。在沒有采取影像與指針的位置信息的坐標(biāo)調(diào)整的情況下，會產(chǎn)生位置信息的偏差，因此，例如在進(jìn)行螺絲緊固等細(xì)致的作業(yè)指示時，有時指示者無法準(zhǔn)確地利用指針指示螺絲(指示對象)的位置。
[0011]因此，要求如下這樣的遠(yuǎn)程作業(yè)支持系統(tǒng)以及遠(yuǎn)程作業(yè)支持程序存儲介質(zhì):既能夠進(jìn)行語音通信，又能夠在多個便攜終端之間，共享準(zhǔn)確地進(jìn)行了坐標(biāo)調(diào)整的影像以及指針信息，作業(yè)指示者能夠進(jìn)行直觀的指示，作業(yè)者能夠通過目視準(zhǔn)確地識別作業(yè)指示。
[0012]用于解決課題的手段
[0013]本發(fā)明的第一方式是一種遠(yuǎn)程作業(yè)支持系統(tǒng)，所述遠(yuǎn)程作業(yè)支持系統(tǒng)具有多個便攜終端，經(jīng)由網(wǎng)絡(luò)在多個便攜終端之間發(fā)送或者接收圖像，且在所述圖像上顯示指針而支持遠(yuǎn)程作業(yè)，多個便攜終端各自具有:(I)呼叫連接部，其與其他便攜終端之間進(jìn)行呼叫連接；(2)觸摸面板部，其具有顯示畫面，通過感知該顯示畫面的接觸位置來確定操作位置，所述顯示畫面在呼叫連接后顯示與其他便攜終端之間共享的圖像；(3)指針顯示控制部，其使觸摸面板部的顯示畫面顯示指針，且在顯示畫面上進(jìn)行指針的顯示控制；以及(4)畫面控制部，其根據(jù)顯示畫面所顯示的圖像的特征點(diǎn)的位置信息與指針的位置信息之間的相對位置關(guān)系，形成將所述圖像的特征點(diǎn)作為原點(diǎn)的相對坐標(biāo)系，進(jìn)行坐標(biāo)調(diào)整，該坐標(biāo)調(diào)整是根據(jù)與共享圖像的其他便攜終端之間的顯示畫面尺寸的差異而進(jìn)行的。
[0014]本發(fā)明的第二方式是一種永久性存儲介質(zhì)，所述永久性存儲介質(zhì)存儲了使計算機(jī)執(zhí)行遠(yuǎn)程作業(yè)支持處理的程序，所述處理包括:(I)經(jīng)由網(wǎng)絡(luò)與其他便攜終端之間進(jìn)行呼叫連接，(2)感知顯示畫面的接觸位置來確定操作位置，由此作為觸摸面板發(fā)揮功能，所述顯示畫面在呼叫連接后，顯示與其他便攜終端之間共享的圖像，(3)使所述顯示畫面顯示指針，在顯示畫面上進(jìn)行指針的顯示控制，(4)根據(jù)所述顯示畫面所顯示的圖像的特征點(diǎn)的位置信息與指針的位置信息之間的相對位置關(guān)系，形成將上述圖像的特征點(diǎn)作為原點(diǎn)的相對坐標(biāo)系，進(jìn)行坐標(biāo)調(diào)整，該坐標(biāo)調(diào)整是根據(jù)與共享圖像的另一便攜終端之間的顯示畫面尺寸的差異而進(jìn)行的。
[0015]發(fā)明效果
[0016]根據(jù)本方式，能夠在多個便攜終端之間共享影像和指針信息，作業(yè)指示者能夠進(jìn)行直觀的指示，作業(yè)者能夠通過目視準(zhǔn)確地識別作業(yè)指示。
【附圖說明】
[0017]圖1是示出實(shí)施方式的遠(yuǎn)程作業(yè)支持系統(tǒng)的整體結(jié)構(gòu)的整體結(jié)構(gòu)圖。
[0018]圖2是示出實(shí)施方式的便攜終端的內(nèi)部結(jié)構(gòu)的內(nèi)部結(jié)構(gòu)圖。
[0019]圖3是說明實(shí)施方式的便攜終端的控制部的主要功能的功能框圖。
[0020]圖4是說明實(shí)施方式的指針的顯示種類的設(shè)定及變更的說明圖。
[0021]圖5是示出實(shí)施方式的遠(yuǎn)程作業(yè)支持處理的開始菜單畫面的一例的畫面圖。
[0022]圖6是示出實(shí)施方式的作為呼叫源的便攜終端的呼叫畫面的一例的畫面圖。
[0023]圖7是示出實(shí)施方式的便攜終端之間的呼叫控制處理的時序圖。
[0024]圖8是說明實(shí)施方式的會話建立后的便攜終端之間的語音通信及影像通信的情形的說明圖。
[0025]圖9是示出實(shí)施方式的便攜終端中的畫面及指針的坐標(biāo)調(diào)整處理的流程圖。
[0026]圖10是說明在實(shí)施方式的便攜終端的顯示畫面上顯示的指針的初始位置的說明圖。
[0027]圖11是示出實(shí)施方式的指針信息的通信處理的時序圖。
[0028]圖12是說明實(shí)施方式的固定指針的說明圖。
[0029]圖13是說明實(shí)施方式的指針的移動的說明圖。
【具體實(shí)施方式】
[0030](A)主要實(shí)施方式
[0031]以下，一邊參照附圖，一邊對本方式的遠(yuǎn)程作業(yè)支持系統(tǒng)和存儲有遠(yuǎn)程作業(yè)支持程序的永久性存儲介質(zhì)的主要實(shí)施方式進(jìn)行詳細(xì)說明。
[0032](A-1)實(shí)施方式的結(jié)構(gòu)
[0033](A-1-1)整體結(jié)構(gòu)
[0034]圖1是示出實(shí)施方式的遠(yuǎn)程作業(yè)支持系統(tǒng)的整體結(jié)構(gòu)的整體結(jié)構(gòu)圖。在圖1中，本實(shí)施方式的遠(yuǎn)程作業(yè)支持系統(tǒng)10具有能夠與網(wǎng)絡(luò)3連接的、多個(在圖1中，示出了 2臺的情況)便攜終端1-1和1-2、以及呼叫控制裝置2。
[0035]呼叫控制裝置2是進(jìn)行便攜終端1-1與便攜終端1-2之間的會話控制的裝置。呼叫控制裝置2的通信協(xié)議沒有特別限定，例如可以采用由SIP(Sess1n Initiat1nProtocol:會話發(fā)起協(xié)議)或ITU-T建議的H.323等規(guī)定的協(xié)議。在本實(shí)施方式中，舉例示出了呼叫控制裝置2是SIP服務(wù)器的情況。
[0036]便攜終端1-1和1-2是由作業(yè)者、指示者所持有的便攜終端，只要是具有觸摸面板方式的操作顯示部的便攜終端即可，可以采用各種便攜終端。便攜終端1-1和1-2例如可以采用智能手機(jī)、平板電腦、便攜電話、游戲終端、筆記本型個人計算機(jī)、數(shù)碼照相機(jī)等。在本實(shí)施方式中，便攜終端1-1是指示者的便攜終端，便攜終端1-2是作業(yè)者的便攜終端。
[0037]另外，在本實(shí)施方式中，為了便于說明，舉例示出具有2臺便攜終端1-1和1-2的功能的情況。但是，便攜終端的個數(shù)也可以為3臺以上。例如，在指示者同時向多個作業(yè)者提供作業(yè)指示的情況下，也可以為具有I臺指示者的便攜終端與2臺以上的作業(yè)者的便攜終端等。
[0038]便攜終端1-1和1-2具有語音通信功能、通信功能、拍攝功能、影像顯示功能、指向功能等，該指向功能對在影像畫面上指示位置信息的作為圖形或圖像的鼠標(biāo)指針(以下，簡稱為指針)進(jìn)行顯示、移動、變更等。
[0039]便攜終端1-1和1-2通過呼叫控制裝置2的控制，建立終端彼此之間的會話，在會話建立后，進(jìn)行語音數(shù)據(jù)包(packet)、影像數(shù)據(jù)包、指針信息數(shù)據(jù)包等的收發(fā)。
[0040]這里，關(guān)于語音通信，便攜終端1-1和1-2可以進(jìn)行雙向通信。
[0041]此外，關(guān)于影像通信，在便攜終端1-1和1-2中，將任意一個便攜終端所拍攝的影像顯示在該一個便攜終端上，并且將包含拍攝影像的影像數(shù)據(jù)包發(fā)送給另一個便攜終端。即，影像通信是單向通信，將一個便攜終端拍攝到的影像發(fā)送給另一個便攜終端。
[0042]影像通信例如可以通過向便攜終端1-1和1-2分配影像發(fā)送權(quán)限來實(shí)現(xiàn)。當(dāng)向現(xiàn)場的作業(yè)者側(cè)的便攜終端1-2分配了影像發(fā)送權(quán)限的情況下，具有影像發(fā)送權(quán)限的便攜終端1-2進(jìn)行拍攝，將包含其拍