專利名稱：讀取系統(tǒng)及讀取方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種讀取系統(tǒng)及讀取方法。
背景技術(shù)：
近年來(lái)，QR代碼(注冊(cè)商標(biāo))等的二維代碼已經(jīng)廣泛普及。此外，作為從二維代碼等讀取信息的讀取裝置，采用攝像頭式掃描器的POS終端已上市。根據(jù)采用攝像頭式掃描器的POS終端，由于不僅能夠識(shí)別條形碼，還能夠識(shí)別QR代碼(注冊(cè)商標(biāo))等的二維代碼、減價(jià)標(biāo)簽，所以能夠自動(dòng)進(jìn)行對(duì)購(gòu)入商品給予的減價(jià)。但是，隨著近年來(lái)的移動(dòng)電話的普及，用于接受減價(jià)等的服務(wù)的優(yōu)惠券等的數(shù)據(jù)被從店鋪發(fā)送給移動(dòng)電話，通過(guò)顧客使移動(dòng)電話的顯示部顯示優(yōu)惠券等的數(shù)據(jù)并提示給店鋪，接受服務(wù)的案例處于增加的趨勢(shì)。不過(guò)，由于作為移動(dòng)電話的顯示部所采用的液晶畫面發(fā)光，所以當(dāng)向在POS終端中采用的攝像頭式掃描器舉起液晶畫面時(shí)，則因受到POS終端具有的照明等的影響而不能讀取顯示在液晶畫面上的信息。因此，考慮有在POS終端中同時(shí)設(shè)置移動(dòng)電話專用的讀取裝置，或操作員用手動(dòng)操作POS終端來(lái)轉(zhuǎn)換讀取移動(dòng)電話的液晶畫面的設(shè)定的方法，但是會(huì)增加在設(shè)置有POS終端的店鋪中的設(shè)備費(fèi)和增加操作POS終端的操作員的工作量。

發(fā)明內(nèi)容
為了解決上述問(wèn)題，本發(fā)明的目的在于提供一種讀取系統(tǒng)及讀取方法，其不需要同時(shí)設(shè)置用于攝像顯示部的圖像的專用讀取裝置、且能夠防止操作POS終端的操作員的工作量增加。本發(fā)明第一方面涉及讀取系統(tǒng)，包括:攝像裝置、讀取部、檢測(cè)部、以及控制部。所述攝像裝置攝像圖像。所述讀取部從所述攝像的圖像中讀取信息。所述檢測(cè)部從所述攝像的圖像中檢測(cè)出具有顯示部的便攜終端，該顯示部顯示通過(guò)所述讀取部讀取的信息。所述控制部當(dāng)未檢測(cè)出有所述便攜終端時(shí)，按照用于攝像除所述顯示部以外的第一設(shè)置控制由所述攝像裝置的圖像的攝像，當(dāng)檢測(cè)出有所述便攜終端時(shí)，按照用于攝像所述顯示部的第二設(shè)置控制由所述攝像裝置的圖像的攝像。本發(fā)明第二方面涉及讀取方法，包括:檢測(cè)步驟，從通過(guò)攝像裝置攝像的圖像中檢測(cè)出便攜終端；以及控制步驟，當(dāng)未檢測(cè)出有所述便攜終端時(shí)，按照用于攝像除所述便攜終端的顯示部以外的第一設(shè)置控制由所述攝像裝置進(jìn)行的圖像的攝像，當(dāng)檢測(cè)出有所述便攜終端時(shí)，按照用于攝像所述便攜終端的顯示部的第二設(shè)置控制由所述攝像裝置進(jìn)行的圖像的攝像。


圖1是表示本實(shí)施例所涉及的POS系統(tǒng)的整體構(gòu)成的立體圖。圖2是表示POS終端及商品讀取裝置的硬件構(gòu)成框圖。圖3是例示出PLU文件的數(shù)據(jù)構(gòu)成的概念圖。圖4是表不攝像部的攝像范圍和商品之間的關(guān)系圖。圖5是表不攝像部的攝像范圍和便攜終端之間的關(guān)系圖。圖6是表示POS終端及商品讀取裝置的功能構(gòu)成框圖。圖7是表示本實(shí)施例所涉及的商品讀取裝置的動(dòng)作的一例的流程圖。圖8是表示從幀圖像中進(jìn)行識(shí)別的從“ I ”到“ 9 ”的數(shù)字的配置圖。
具體實(shí)施例方式下面,參照附圖,對(duì)本實(shí)施例進(jìn)行說(shuō)明。圖1是表示本實(shí)施例所涉及的POS系統(tǒng)的整體構(gòu)成的立體圖。如圖1所示，POS (Point Of Sales:銷售點(diǎn))系統(tǒng)I具有進(jìn)行一交易所涉及的商品的登記、對(duì)賬的POS終端11。POS終端11被載置在結(jié)賬臺(tái)51上的抽屜21上面。而且，POS終端11控制抽屜21的開(kāi)放動(dòng)作。POS終端11的上表面配置有由操作員(用戶)進(jìn)行按下操作的鍵盤22。此外，從操作鍵盤22的操作員角度看，POS終端11在鍵盤22的里側(cè)設(shè)置有朝向操作員顯示信息的顯示器23。顯示器23在其顯示面23a上顯示信息。此外，POS終端11在顯示面23a上層壓配置有觸摸面板26。此外，POS終端11在顯示器23的更里側(cè)旋轉(zhuǎn)自如地立著設(shè)置有顧客用顯示器24。顧客用顯示器24在其顯示面24a上顯示信息。另外，雖然圖1所示的顧客用顯示器24將顯示面24a朝向圖1中的跟前側(cè)，但是通過(guò)以顯示面24a朝向圖1中的里側(cè)的方式使顧客用顯示器24旋轉(zhuǎn)，從而朝向顧客顯示信肩、OPOS系統(tǒng)I將長(zhǎng)條桌子狀的柜臺(tái)151以與載置有POS終端11的結(jié)賬臺(tái)51形成為L(zhǎng)字的方式來(lái)配置。在柜臺(tái)151的上表面上形成有負(fù)荷接受面152。負(fù)荷接受面152載置有收納商品A的購(gòu)物筐153。購(gòu)物筐153可以考慮劃分為通過(guò)顧客帶來(lái)的第一購(gòu)物筐153a和位于與第一購(gòu)物筐153a隔著商品讀取裝置101的位置的第二購(gòu)物筐153b。另外，購(gòu)物筐153 (第一購(gòu)物筐153a)并不限定于所謂的筐形狀，也可以是在面包店等的店鋪中使用的托盤等。此外，購(gòu)物筐153 (第二購(gòu)物筐153b)并不限定于所謂的筐形狀，也可以是在甜甜圈店等的店鋪中使用的紙箱等。在柜臺(tái)151的負(fù)荷接受面152上設(shè)置有與POS終端11數(shù)據(jù)發(fā)送接收自如地連接的商品讀取裝置101。商品讀取裝置101具有薄的長(zhǎng)方形形狀的外殼102。在外殼102的正面配置有讀取窗103。在外殼102的上部安裝有顯示/操作部104。顯示/操作部104設(shè)置有在表面層壓有觸摸面板105的顯示器106。在顯示器106的右邊設(shè)置有鍵盤107。在鍵盤107的右邊設(shè)置有未圖示的讀卡器的卡讀取槽108。從操作員角度看，在顯示/操作部104的背面靠左的里側(cè)設(shè)置有用于向顧客提供信息的顧客用顯示器109。這樣的商品讀取裝置101具有商品讀取部110 (參照?qǐng)D2)。商品讀取部110在讀取窗103的里側(cè)配置有攝像部164 (參照?qǐng)D2)及照明部166 (參照?qǐng)D2)。顧客帶來(lái)的第一購(gòu)物筐153a收納有一交易所涉及的商品A。商品A通過(guò)店員的手向第二購(gòu)物筐153b移動(dòng)。在該移動(dòng)過(guò)程中，商品A被朝向商品讀取裝置101的讀取窗103。這時(shí)，配置在讀取窗103的里側(cè)的攝像部164 (參照?qǐng)D2)攝像商品A。在商品讀取裝置101中，檢測(cè)出通過(guò)攝像部164 (參照?qǐng)D2)攝像的圖像所包含的商品A的全部或一部分。在商品讀取裝置101中，當(dāng)檢測(cè)出在通過(guò)攝像部164攝像的圖像中包含有商品A的全部或一部分時(shí)，向POS終端11輸出其攝像的圖像。在POS終端11中，分別對(duì)商品A的各個(gè)，通過(guò)參照關(guān)聯(lián)有商品A的銷售登記所涉及的信息和商品A的圖像的PLU文件Fl (參照?qǐng)D3詳細(xì)后述)，從通過(guò)商品讀取部110的攝像部164 (參照?qǐng)D2)攝像的商品A的全部或一部分的圖像中，識(shí)別作為指定的物體的商品A，從而指定進(jìn)行銷售登記的商品A。而且，POS終端11將指定的商品A的商品ID、商品分類、商品名、單價(jià)等的銷售登記所涉及的信息記錄到銷售主文件(未圖示)等中進(jìn)行銷售登記。此外，具有顯示包含商品A的降價(jià)值等的信息的QR代碼(注冊(cè)商標(biāo))、條形碼等的碼符號(hào)的液晶畫面等的顯示部501 (參照?qǐng)D5)的便攜終端P (參照?qǐng)D5)或打印有包含商品A的降價(jià)值等的信息的QR代碼(注冊(cè)商標(biāo))、條形碼等的碼符號(hào)的優(yōu)惠券被朝向商品讀取裝置101的讀取窗103。這時(shí)，配置在讀取窗103的里側(cè)的攝像部164 (參照?qǐng)D2)攝像顯示在顯示部501 (參照?qǐng)D5)上的碼符號(hào)的圖像或打印在優(yōu)惠券上的碼符號(hào)的圖像。商品讀取裝置101從通過(guò)攝像部164 (參照?qǐng)D2)攝像的圖像所包含的碼符號(hào)中，讀取商品A的降價(jià)值等的信息。而且，商品讀取裝置101向POS終端11輸出商品A的降價(jià)值等的信息。POS終端11當(dāng)接受了商品A的降價(jià)值等的信息時(shí)，將商品A的降價(jià)值等的信息附加到從通過(guò)攝像部164攝像的圖像中指定的商品A的銷售登記所涉及的信息中，并記錄在銷售主文件(未圖示)等中進(jìn)行銷售登記。圖2是表示POS終端及商品讀取裝置的硬件構(gòu)成框圖。POS終端11具有作為執(zhí)行信息處理的信息處理部的微機(jī)60。微機(jī)60在執(zhí)行各種運(yùn)算處理并控制各部的CPU( CentralProcessing Unit:中央處理器)61上總線連接有ROM (Read Only Memory:只讀存儲(chǔ)器)62和 RAM (Random Access Memory:隨機(jī)存取存儲(chǔ)器)63。所述的抽屜21、鍵盤22、顯示器23、觸摸面板26、顧客用顯示器24均通過(guò)各種的輸入輸出電路(均未圖示)與POS終端11的CPU 61連接，并接受CPU 61的控制。鍵盤22包括在上面顯示有“1”、“2”、“3”……等的數(shù)字、“ X ”的乘法的算符的數(shù)字鍵22d、臨時(shí)合計(jì)鍵22e及合計(jì)鍵22f。POS 終端 11 的 CPU 61 連接有 HDD (Hard Disk Drive:硬盤驅(qū)動(dòng)器)64。HDD 64存儲(chǔ)有程序、各種文件。HDD 64所存儲(chǔ)的程序、各種文件在POS終端11起動(dòng)時(shí)，其全部或一部分被復(fù)制到RAM 63并通過(guò)CPU 61順序執(zhí)行。HDD 64所存儲(chǔ)的程序的一例是商品銷售數(shù)據(jù)處理用的程序PR。HDD 64所存儲(chǔ)的文件的一例是從存儲(chǔ)計(jì)算機(jī)SC分配存儲(chǔ)的PLU文件Fl0PLU文件Fl是對(duì)陳列在店鋪中并進(jìn)行銷售的商品A的各個(gè)商品設(shè)定有商品A的銷售登記所涉及的信息和該商品A的圖像的關(guān)聯(lián)的文件。圖3是例示出PLU文件Fl的數(shù)據(jù)構(gòu)成的概念圖。如圖3所示，PLU文件Fl是對(duì)應(yīng)每個(gè)商品A存儲(chǔ)單獨(dú)地分配的商品ID、商品A所屬的商品分類、商品名、單價(jià)等的商品A的銷售登記所涉及的信息、攝像商品A的商品圖像的文件。返回到圖2，POS終端11的CPU 61通過(guò)輸入輸出電路(未圖示)連接有用于與存儲(chǔ)計(jì)算機(jī)SC執(zhí)行數(shù)據(jù)通信的通信接口 25。存儲(chǔ)計(jì)算機(jī)SC設(shè)置在店鋪的后院等。存儲(chǔ)計(jì)算機(jī)SC的HDD (未圖示)存儲(chǔ)有向POS終端11發(fā)送的PLU文件F1。而且，POS終端11的CPU 61連接有在與商品讀取裝置101之間可數(shù)據(jù)發(fā)送接收的連接接口 65。連接接口 65連接有商品讀取裝置101。此外，POS終端11的CPU 61連接有在票據(jù)等上進(jìn)行打字的打印機(jī)66。打印機(jī)66在CPU 61的控制下，將一交易的交易內(nèi)容打印在票據(jù)上。商品讀取裝置101也具有微機(jī)160。微機(jī)160在CPU 161上總線連接有ROM 162和RAM 163。ROM 162存儲(chǔ)有通過(guò)CPU 161執(zhí)行的程序。CPU 161通過(guò)各種的輸入輸出電路(均未圖示)連接有攝像裝置167、聲音輸出部165。攝像裝置167、聲音輸出部165由CPU161控制動(dòng)作。顯示/操作部104通過(guò)連接接口 176與POS終端11連接。顯示/操作部104由POS終端11的CPU 61控制動(dòng)作。攝像裝置167是彩色CO) (Charge Coupled Device:電荷稱合器件)圖像傳感器或彩色 CMOS (Complementary Metal Oxide Semiconductor:互補(bǔ)金屬氧化物半導(dǎo)體)圖像傳感器等，并是在CPU161的控制下從讀取窗103攝像圖像的攝像部164及LED (LightEmitting Diode:發(fā)光二極管)等,并具有以覆蓋通過(guò)攝像部164攝像圖像的攝像范圍的方式照射照明光的照明部166。例如，攝像部164以規(guī)定的幀速率(例如，五千分之一秒)攝像幀圖像。而且，CPU161將以規(guī)定的幀速率依次攝像的幀圖像保存到RAM 163。另外，攝像部164可通過(guò)CPU 161可變攝像幀圖像的幀速率。此外，照明部166也可通過(guò)CPU 161可變使LED亮燈的強(qiáng)度。圖4是表不攝像部的攝像范圍和商品之間的關(guān)系的圖。圖5是表不攝像部的攝像范圍和便攜終端之間的關(guān)系的圖。如圖4所示，攝像部164當(dāng)通過(guò)操作員的手將商品A送進(jìn)到攝像部164的攝像范圍X內(nèi)時(shí)，則攝像包含商品A的全部或一部分的圖像。此外，如圖5所示，攝像部164當(dāng)在商品A的攝像前或攝像后通過(guò)操作員的手將便攜終端P送進(jìn)到攝像部164的攝像范圍X內(nèi)時(shí),則攝像包含便攜終端P的顯示部501所顯示的條形碼502或QR代碼(注冊(cè)商標(biāo))等的碼符號(hào)和便攜終端P的鍵503 (顯示有從“I”到“9”的數(shù)字的鍵以3X3的方式配置的數(shù)字鍵和顯示有等的鍵等)的圖像。另外，顯示在便攜終端P的顯示部501上的條形碼502包含商品A的降價(jià)值等的信息。此外，便攜終端P的顯示部501諸如是液晶畫面等通過(guò)發(fā)射光顯示顯示信息的顯示部。返回到圖2，聲音輸出部165是用于產(chǎn)生預(yù)先設(shè)定的警報(bào)音等的聲音電路和揚(yáng)聲器等。聲音輸出部165在CPU 161的控制下進(jìn)行警報(bào)音等的聲音的告知。而且，CPU 161連接有與POS終端11的連接接口 65連接、并與POS終端11之間可數(shù)據(jù)接收發(fā)送的連接接口 175。CPU 161通過(guò)連接接口 175輸出通過(guò)商品讀取裝置101的攝像部164攝像的圖像(包含商品A的全部或一部分的圖像)及從便攜終端P的顯示部501所顯示的碼符號(hào)讀取的商品A的降價(jià)值等的信息，并通過(guò)連接接口 65輸入給POS終端11。接著，參照?qǐng)D6，對(duì)CPU161、CPU 61通過(guò)依次執(zhí)行程序?qū)崿F(xiàn)的CPU 161、CPU 61的功能部進(jìn)行說(shuō)明。圖6是表示POS終端及商品讀取裝置的功能構(gòu)成的框圖。如圖6所示，CPU 161通過(guò)依次執(zhí)行程序，具有作為攝像控制部601、檢測(cè)部602、讀取部603及圖像輸出部604的功能。同樣，CPU 61具有作為物體識(shí)別部605及商品登記部606的功能。攝像控制部601向攝像部164輸出攝像導(dǎo)通信號(hào)使攝像部164開(kāi)始攝像動(dòng)作。攝像控制部601在攝像動(dòng)作開(kāi)始后，依次米集攝像部164攝像、并保存在RAM 163中的巾貞圖像。攝像控制部601對(duì)幀圖像的采集按照RAM 163所保存的順序進(jìn)行。此外，攝像控制部601在通過(guò)攝像裝置167處于攝像幀圖像的期間，按照用于攝像打印有降價(jià)值等的信息的優(yōu)惠券、商品A等除顯示部501之外的第一設(shè)置或用于攝像便攜終端P所具有的顯示部501的第二設(shè)置，控制攝像裝置167的幀圖像的攝像。在本實(shí)施例中，攝像控制部601當(dāng)通過(guò)后述的檢測(cè)部602檢測(cè)出有顯示部501時(shí)，按照第二設(shè)置以比預(yù)先設(shè)定的幀速率(例如，五千分之一秒)慢的幀速率控制攝像部164的幀圖像的攝像，而且，使照明部166滅燈、或與預(yù)先設(shè)定的發(fā)光強(qiáng)度相比使照明部166的發(fā)光強(qiáng)度降低。另外，攝像控制部601當(dāng)顯示部501是液晶畫面時(shí)，也可以根據(jù)所述液晶畫面所具有的背光所照射的光的發(fā)光強(qiáng)度，控制攝像部164的幀速率。另一方面，攝像控制部601當(dāng)通過(guò)后述的檢測(cè)部602未檢測(cè)出有顯示部501時(shí)，為了攝像打印有降價(jià)值等的信息的優(yōu)惠券或商品A，按照第一設(shè)置，以預(yù)先設(shè)定的幀速率諸如為減少攝像移動(dòng)盡量以五千分之一秒左右快的恰當(dāng)?shù)目扉T速度控制攝像部164的攝像，而且，使照明部亮燈、或與預(yù)先設(shè)定的發(fā)光強(qiáng)度相比提高照明部166的發(fā)光強(qiáng)度。而且,攝像控制部601當(dāng)通過(guò)后述的檢測(cè)部602檢測(cè)出有便攜終端P時(shí),將控制攝像裝置167的攝像的設(shè)置轉(zhuǎn)換成第二設(shè)置。當(dāng)在轉(zhuǎn)換成第二設(shè)置后，通過(guò)后述的讀取部603讀取信息時(shí)，則攝像控制部601將控制攝像裝置167的攝像的設(shè)置轉(zhuǎn)換成第一設(shè)置。檢測(cè)部602采用模式匹配技術(shù)或字符識(shí)別技術(shù)等檢測(cè)出通過(guò)攝像控制部601采集的幀圖像所包含的商品A或便攜終端P的全部或一部分。在本實(shí)施例中，檢測(cè)部602從已采集的幀圖像中檢測(cè)出有無(wú)皮膚區(qū)域。當(dāng)檢測(cè)出有皮膚區(qū)域時(shí)，也就是說(shuō)，當(dāng)檢測(cè)出有操作員的手的映入時(shí)，檢測(cè)部602從將已采集的幀圖像進(jìn)行二值化的圖像中抽取輪廓線等。通過(guò)這樣，檢測(cè)部602對(duì)假想操作員的手正把持的商品A或便攜終端P的輪廓抽取進(jìn)行嘗試。這時(shí)，當(dāng)檢測(cè)出有表示手的形狀的輪廓和除此之外的輪廓時(shí)，判斷操作員把持商品A或便攜終端P。在這里，當(dāng)判斷出操作員把持商品A或便攜終端P時(shí)，檢測(cè)部602從幀圖像中識(shí)別從“I”到“9”的數(shù)字等的規(guī)定的字符。而且，檢測(cè)部602判定識(shí)別出的從“I”到“9”的數(shù)字是否以3X3等的規(guī)定的配置方式來(lái)排列。而且，當(dāng)從幀圖像中識(shí)別出從“I”到“9”的數(shù)字且判定出從“I”到“9”的數(shù)字以3X3的配置方式來(lái)排列時(shí)，檢測(cè)部602判斷存在有便攜終端P的鍵503，并判斷操作員正把持的是便攜終端P。另一方面，當(dāng)未識(shí)別出有規(guī)定的字符時(shí)，或當(dāng)識(shí)別出的規(guī)定的字符未以規(guī)定的配置方式排列時(shí)，檢測(cè)部602判定操作員正把持的是商品A。另外，在本實(shí)施例中，雖然檢測(cè)部602采用模式匹配技術(shù)或字符識(shí)別技術(shù)檢測(cè)出便攜終端P的全部或一部分，但是并不限定于此。例如，檢測(cè)部602通過(guò)參照便攜終端P的基準(zhǔn)圖像，從通過(guò)攝像部164攝像的幀圖像中讀取作為特征量的色彩和表面的凹凸?fàn)顩r等的表面狀態(tài)，識(shí)別便攜終端P作為指定的物體。另外，檢測(cè)部602由于謀求處理時(shí)間的縮短，所以不考慮便攜終端P的輪廓、大小。通過(guò)在便攜終端P的全部或一部分的檢測(cè)中采用物體識(shí)別，檢測(cè)部602能夠檢測(cè)出不具有鍵503的通過(guò)觸摸面板操作的便攜終端。例如，檢測(cè)部602通過(guò)從通過(guò)攝像部164攝像的幀圖像中，讀取來(lái)自層壓配置有觸摸面板的液晶畫面的鏡面反射作為特征量，能夠檢測(cè)出具有顯示部的便攜終端。這樣，識(shí)別圖像中所包含的物體被稱為一般物體識(shí)別(generic objectrecognition:一般物體識(shí)別)。關(guān)于這樣的一般物體識(shí)別在下述的文獻(xiàn)中各種識(shí)別技術(shù)被說(shuō)明。柳井啟司，“一般物體認(rèn)識(shí)O現(xiàn)狀i今後”，情報(bào)処理學(xué)會(huì)論文誌，Vol.48,N0.SIG16 “平成 22 年 8 月 10 日檢索”，互聯(lián)網(wǎng) < URL:http://mm.cs.uec.ac.jp/IPSJ-TCVIM-Yana1.pdf >此外，通過(guò)對(duì)應(yīng)每個(gè)目的物對(duì)圖像進(jìn)行區(qū)域分割，進(jìn)行一般物體識(shí)別的技術(shù)在下述的文獻(xiàn)中被說(shuō)明。Jamie Shotton h (杰米肖頓等人)，“Semantic Texton Forests for ImageCategorization and Segmentation: ”，“平成 22 年8 月 10 日檢索”，互聯(lián)網(wǎng) < URL:http://citeseerx.1st.psu.edu/viewdoc/download doi = 10.1.1.145.3036&rep = repl&type=pdf >讀取部603從通過(guò)攝像控制部601采集的幀圖像中檢測(cè)出打印在優(yōu)惠券上的條形碼或QR代碼等的碼符號(hào)，而且，從檢測(cè)出的碼符號(hào)，讀取降價(jià)值等的信息。此外，讀取部603當(dāng)通過(guò)檢測(cè)部602檢測(cè)出有便攜終端P時(shí)，從通過(guò)攝像控制部601采集的幀圖像中檢測(cè)出顯示在便攜終端P的顯示部503上的條形碼502或QR代碼等的碼符號(hào)，從檢測(cè)出的碼符號(hào)讀取降價(jià)值等的信息。圖像輸出部604通過(guò)連接接口 175向POS終端11輸出攝像控制部601所采集的幀圖像。雖然圖像輸出部604也可以逐次向POS終端11輸出攝像控制部601所采集的幀圖像，但是向POS終端11輸出 通過(guò)檢測(cè)部602檢測(cè)出有商品A的全部或一部分的幀圖像。這樣，通過(guò)向POS終端11輸出通過(guò)檢測(cè)部602檢測(cè)出有商品A的全部或一部分的幀圖像，能夠防止在POS終端中進(jìn)行因未包含有商品A的全部或一部分的幀圖像而參照PLU文件Fl來(lái)執(zhí)行的物體識(shí)別的情況發(fā)生。由于指定物體的識(shí)別處理需要處理時(shí)間，所以通過(guò)防止在沒(méi)有指定物體識(shí)別的可能性的未包含有商品A的全部或一部分的幀圖像中的處理，從而能夠謀求處理時(shí)間的縮短。此外，圖像輸出部604當(dāng)通過(guò)讀取部603讀取有降價(jià)值等的信息時(shí)，向POS終端11輸出已讀取的降價(jià)值等的信息。物體識(shí)別部605通過(guò)參照PLU文件Fl的商品圖像，從通過(guò)商品讀取裝置101的攝像部164攝像的幀圖像所包含的商品A的全部或一部分的圖像中，讀取色彩和表面的凹凸?fàn)顩r等的表面狀態(tài)作為特征量，從而識(shí)別商品A作為指定物體。在本實(shí)施例中，物體識(shí)別部605通過(guò)上述的一般物體識(shí)別進(jìn)行商品A的識(shí)別。另外，物體識(shí)別部605由于謀求處理時(shí)間的縮短，所以不考慮商品A的輪廓、大小。在POS終端11中，能夠根據(jù)物體識(shí)別部605的識(shí)別結(jié)果，從預(yù)先登記在PLU文件Fl的商品中，指定商品讀取裝置101所讀取的商品。商品登記部606將與通過(guò)物體識(shí)別部605識(shí)別出的商品圖像關(guān)聯(lián)的銷售登記所涉及的信息、即作為商品讀取裝置101所讀取的商品A被指定的商品A的商品ID、商品分類、商品名、單價(jià)等，記錄在銷售主文件等上進(jìn)行銷售登記。此外，商品登記部606當(dāng)通過(guò)讀取部603讀取的信息(例如，降價(jià)值等)被輸出了時(shí)，將通過(guò)讀取部603讀取的信息附加在與通過(guò)物體識(shí)別部605識(shí)別出的商品圖像關(guān)聯(lián)的銷售登記所涉及的信息中，并記錄在銷售主文件中進(jìn)行銷售登記。接著，對(duì)商品讀取裝置101的動(dòng)作進(jìn)行詳細(xì)說(shuō)明。圖7是表示本實(shí)施例所涉及的商品讀取裝置的動(dòng)作的一例的流程圖。攝像控制部601在由攝像部164開(kāi)始攝像動(dòng)作后，依次米集攝像部164攝像、并保存在RAM 163中的幀圖像。另外，攝像控制部601在由攝像部164開(kāi)始了攝像動(dòng)作時(shí)，預(yù)先將控制攝像部164的攝像的設(shè)置轉(zhuǎn)換成第一設(shè)置。檢測(cè)部602開(kāi)始來(lái)自通過(guò)攝像控制部601采集的幀圖像的操作員的手的映入的檢測(cè)(步驟S701)。而且，當(dāng)未檢測(cè)出有來(lái)自已采集的幀圖像的操作員的手的映入時(shí)(步驟S702的否)，檢測(cè)部602返回到步驟S701，從幀圖像中重復(fù)數(shù)據(jù)的檢測(cè)。另一方面，當(dāng)從已采集的幀圖像中檢測(cè)出有操作員的手的映入時(shí)(步驟S702的是)，檢測(cè)部602從幀圖像中識(shí)別從“I”到“9”的數(shù)字，而且判斷識(shí)別出的從“I”到“9”的數(shù)字是否排列成規(guī)定的配置(步驟S703)。圖8是表示從幀圖像中進(jìn)行識(shí)別的從“I”到“9”的數(shù)字的配置的圖。如圖8所示，檢測(cè)部602諸如判斷從幀圖像識(shí)別出的從“I”到“9”的數(shù)字是否排列成3X3的配置。返回到圖7，當(dāng)判斷出識(shí)別出的從“I”到“9”的數(shù)字未排列成規(guī)定的配置時(shí)(步驟S703的否)，讀取部603從已采集的幀圖像中檢測(cè)出打印在優(yōu)惠券上的碼符號(hào)(步驟S704)。接著，讀取部603從檢測(cè)出的碼符號(hào)讀取降價(jià)值等的信息(步驟S705)。另外，雖未圖示，但當(dāng)從已采集的幀圖像中檢測(cè)出有商品A時(shí)，圖像輸出部604通過(guò)連接接口 175向POS終端11輸出攝像控制部601已采集的幀圖像。當(dāng)判斷出識(shí)別出的從“I”到“9”的數(shù)字排列成規(guī)定的配置時(shí)(步驟S703的是)，攝像控制部601將控制攝像部164的攝像的設(shè)置從第一設(shè)置轉(zhuǎn)換成第二設(shè)置(步驟S706)。接著，讀取部603在轉(zhuǎn)換成第二設(shè)置后，從通過(guò)攝像控制部601已采集的幀圖像中檢測(cè)出顯示在便攜終端P的顯示部503上的碼符號(hào)(步驟S707)。而且，讀取部603從檢測(cè)出的碼符號(hào)讀取降價(jià)值等的信息(步驟S708)。攝像控制部601判斷通過(guò)讀取部603是否讀取有信息(步驟 S709)。攝像控制部601當(dāng)判斷出通過(guò)讀取部603讀取有信息時(shí)(步驟S709的是)，將控制攝像部164的攝像的設(shè)置從第二設(shè)置轉(zhuǎn)換成第一設(shè)置(步驟S710)。另一方面，當(dāng)判斷出通過(guò)讀取部未讀取有信息時(shí)(步驟S709的否)，返回到S707，重復(fù)由讀取部603的信息的讀取。當(dāng)通過(guò)讀取部603讀取有降價(jià)值等的信息時(shí)，圖像輸出部604向POS終端11輸出已讀取的信息。另外，當(dāng)圖像輸出部604輸出了幀圖像時(shí)，在POS終端11中，物體識(shí)別部605參照PLU文件Fl的商品圖像，從通過(guò)商品讀取裝置101的攝像部164攝像的幀圖像所包含的商品A的全部或一部分的圖像中識(shí)別商品A。接著，商品登記部606將從圖像輸出部604輸出的幀圖像所附加的信息，附加在與通過(guò)物體識(shí)別部605識(shí)別出的商品圖像關(guān)聯(lián)的銷售登記所涉及的信息中，并記錄在銷售主文件中進(jìn)行銷售登記。這樣，根據(jù)本實(shí)施例所涉及的商品讀取裝置101，通過(guò)具有攝像幀圖像的攝像裝置167、從通過(guò)攝像裝置167攝像的圖像中讀取信息的讀取部603、從已攝像的幀圖像中檢測(cè)出具有顯示通過(guò)讀取部603讀取的信息的顯示部501的便攜終端P的檢測(cè)部602、當(dāng)未檢測(cè)出有便攜終端P時(shí)，按照用于攝像除顯示部501之外的第一設(shè)置控制攝像裝置167的圖像的攝像，當(dāng)檢測(cè)出有便攜終端P時(shí)，按照用于攝像顯示部501的第二設(shè)置控制攝像裝置167的圖像的攝像的攝像控制部601，在進(jìn)行便攜終端P的顯示部501所顯示的信息的讀取時(shí)，能夠?qū)⑼ㄟ^(guò)攝像裝置167攝像幀圖像的設(shè)置從第一設(shè)置自動(dòng)地轉(zhuǎn)換成第二設(shè)置，所以不需要同時(shí)設(shè)置用于攝像顯示部501的圖像的專用讀取裝置且能夠防止操作POS終端11的操作員的工作量增加。另外，在本實(shí)施例的POS終端11及商品讀取裝置101中所執(zhí)行的程序被預(yù)先安裝在ROM中而被提供。在本實(shí)施例的POS終端11及商品讀取裝置101中所執(zhí)行的程序也可以用可安裝的形式或可執(zhí)行的形式的文件，記錄在CD-ROM、軟磁盤(FD)、CD-R、DVD(Digital VersatileDisk:數(shù)字多功能磁盤)等的計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中而提供。而且，也可以將在本實(shí)施例的POS終端11及商品讀取裝置101中所執(zhí)行的程序存儲(chǔ)在與互聯(lián)網(wǎng)等的網(wǎng)絡(luò)連接的計(jì)算機(jī)上，并通過(guò)經(jīng)由網(wǎng)絡(luò)下載而提供。此外，也可以將在本實(shí)施例的POS終端11及商品讀取裝置101中所執(zhí)行的程序經(jīng)由互聯(lián)網(wǎng)等的網(wǎng)絡(luò)而提供或配置。在本實(shí)施例的POS終端11及商品讀取裝置101中所執(zhí)行的程序?yàn)榘ㄉ鲜龅母鞑?攝像控制部601、檢測(cè)部602、讀取部603、圖像輸出部604、物體識(shí)別部605、商品登記部606)的模塊構(gòu)成，作為實(shí)際的硬件，通過(guò)CPU (處理器)從上述ROM讀取并執(zhí)行程序，上述各部被裝載到主存儲(chǔ)裝置上，并在主存儲(chǔ)裝置上生成攝像控制部601、檢測(cè)部602、讀取部603、圖像輸出部604、物體識(shí)別部605、商品登記部606。另外，在本實(shí)施例中，雖然在商品讀取裝置101側(cè)具有攝像控制部601、檢測(cè)部602、讀取部603，在這種情況下，商品讀取裝置101是讀取系統(tǒng)，但是并不限定于此，在POS終端11側(cè)也可以具有攝像控制部601、檢測(cè)部602、讀取部603。在這種情況下，POS終端11是讀取系統(tǒng)，在上述的說(shuō)明中，商品讀取裝置101的圖像輸出部604向POS終端11輸出通過(guò)攝像控制部601采集的幀圖像(用于向POS終端11的物體識(shí)別部605傳輸幀圖像)。當(dāng)POS終端作為讀取系統(tǒng)時(shí)，圖像輸出部向物體識(shí)別部605輸出通過(guò)攝像控制部601采集的幀圖像。另外，雖然對(duì)本發(fā)明的實(shí)施例進(jìn)行了說(shuō)明，但是該實(shí)施例是作為例子提出的，并不意圖限定發(fā)明的范圍。該新穎的實(shí)施例可以用其他各種形式來(lái)實(shí)施，只要在不脫離發(fā)明的要旨的范圍內(nèi)可以進(jìn)行各種省略、替換、變更。該實(shí)施例及其變形均被包含在發(fā)明的范圍或要旨中，而且，包含在權(quán)利要求的范圍所記載的發(fā)明和其均等的范圍內(nèi)。附圖標(biāo)記說(shuō)明IPOS 系統(tǒng)11P0S 終端101商品讀取裝置164攝像部166照明部167攝像裝置501顯示部503 鍵601攝像控制部602檢測(cè)部603讀取部
P便攜終端
權(quán)利要求
1.一種讀取系統(tǒng)，包括: 攝像裝置，攝像圖像； 讀取部，從所述攝像的圖像中讀取信息； 檢測(cè)部，從所述攝像的圖像中檢測(cè)出具有顯示部的便攜終端，所述顯示部顯示通過(guò)所述讀取部讀取的信息；以及 控制部，當(dāng)未檢測(cè)出有所述便攜終端時(shí)，按照用于攝像除所述顯示部以外的第一設(shè)置控制由所述攝像裝置進(jìn)行的圖像的攝像，當(dāng)檢測(cè)出有所述便攜終端時(shí)，按照用于攝像所述顯示部的第二設(shè)置控制由所述攝像裝置進(jìn)行的圖像的攝像。
2.根據(jù)權(quán)利要求1所述的讀取系統(tǒng)，其中， 所述檢測(cè)部當(dāng)從所述攝像的圖像中識(shí)別出有規(guī)定的字符且所述識(shí)別出的字符以規(guī)定的配置方式排列時(shí)，檢測(cè)出所述便攜終端。
3.根據(jù)權(quán)利要求1所述的讀取系統(tǒng)，其中， 所述檢測(cè)部當(dāng)從所述攝像的圖像中識(shí)別出有所述顯示部時(shí)，檢測(cè)出所述便攜終端。
4.根據(jù)權(quán)利要求1至3中的任一項(xiàng)所述的讀取系統(tǒng)，其中， 所述控制部在從所述攝像的圖像中讀取顯示在所述顯示部上的信息后，從所述第二設(shè)置轉(zhuǎn)換成所述第一設(shè)置，并按照所述第一設(shè)置，控制由所述攝像裝置進(jìn)行的圖像的攝像。
5.根據(jù)權(quán)利要求1至4中任一項(xiàng)所述的讀取系統(tǒng)，還包括: 圖像輸出部，用于輸出所述控制部所采集的圖像。
6.一種讀取方法,包括； 檢測(cè)步驟，從通過(guò)攝像裝置攝像的圖像中檢測(cè)出便攜終端；以及 控制步驟，當(dāng)未檢測(cè)出有所述便攜終端時(shí)，按照用于攝像除所述便攜終端的顯示部以外的第一設(shè)置控制由所述攝像裝置進(jìn)行的圖像的攝像，當(dāng)檢測(cè)出有所述便攜終端時(shí)，按照用于攝像所述便攜終端的顯示部的第二設(shè)置控制由所述攝像裝置進(jìn)行的圖像的攝像。
7.根據(jù)權(quán)利要求6所述的讀取方法，其中， 在所述檢測(cè)步驟中，當(dāng)從所述攝像的圖像中識(shí)別出有規(guī)定的字符且所述識(shí)別出的字符以規(guī)定的配置方式排列時(shí)，檢測(cè)出所述便攜終端。
8.根據(jù)權(quán)利要求6所述的讀取方法，其中， 在所述檢測(cè)步驟中，當(dāng)從所述攝像的圖像中識(shí)別出有所述顯示部時(shí)，檢測(cè)出所述便攜終端。
9.根據(jù)權(quán)利要求6至8中的任一項(xiàng)所述的讀取方法，其中， 在所述控制步驟中，在從所述攝像的圖像中讀取顯示在所述顯示部上的信息后，從所述第二設(shè)置轉(zhuǎn)換成所述第一設(shè)置，并按照所述第一設(shè)置，控制由所述攝像裝置進(jìn)行的圖像的攝像。
10.根據(jù)權(quán)利要求6至9中任一項(xiàng)所述的讀取方法，還包括: 圖像輸出步驟，輸出在所述控制步驟中所采集的圖像。
全文摘要
本發(fā)明提供一種讀取系統(tǒng)及讀取方法，其不需要同時(shí)設(shè)置用于攝像顯示部的圖像的專用讀取裝置、且能夠防止操作POS終端的操作員的工作量增加，該讀取系統(tǒng)包括攝像裝置、讀取部、檢測(cè)部、以及控制部。所述攝像裝置攝像圖像。所述讀取部從所述攝像的圖像中讀取信息。所述檢測(cè)部從所述攝像的圖像中檢測(cè)出具有顯示部的便攜終端，該顯示部顯示通過(guò)所述讀取部讀取的信息。所述控制部當(dāng)未檢測(cè)出有所述便攜終端時(shí)，按照用于攝像除所述顯示部以外的第一設(shè)置控制由所述攝像裝置的圖像的攝像，當(dāng)檢測(cè)出有所述便攜終端時(shí)，按照用于攝像所述顯示部的第二設(shè)置控制由所述攝像裝置的圖像的攝像。
文檔編號(hào)G07G1/12GK103093557SQ20121030797
公開(kāi)日2013年5月8日 申請(qǐng)日期2012年8月27日 優(yōu)先權(quán)日2011年8月26日
發(fā)明者佐佐木勇太, 內(nèi)藤英浩 申請(qǐng)人:東芝泰格有限公司