專利名稱：發(fā)言記錄裝置以及發(fā)言記錄方法
技術(shù)領(lǐng)域：
本發(fā)明涉及用于會議中發(fā)言的記錄以及該記錄的可視化、進而應(yīng)使用者要求重放 該發(fā)言記錄的發(fā)言記錄裝置以及發(fā)言記錄方法。
背景技術(shù)：
會議信息記錄重放裝置用于可視化地顯示會議中的發(fā)言構(gòu)成，并將該發(fā)言構(gòu)成用 于作為被記錄了的會議信息的訪問索引。目前存在一種會議信息記錄重放裝置，該裝置對 會議的聲音或者視頻記錄實行發(fā)言者指定處理，按照發(fā)言者來分割聲音記錄或影像記錄， 利用者從被可視化了的分割結(jié)果中指定聲音或影像來進行重放。例如，專利文獻1 (JP特開2004-023661號公報)公開了一種設(shè)備，其利用自然語 言處理中的重要文抽取技術(shù)、以及聲音處理中確定發(fā)言者技術(shù)和聲音Grep技術(shù)，來解析會 議的記錄影像和記錄聲音，自動抽取各位發(fā)言者講述的每個話題的發(fā)言影像或發(fā)言聲音， 而且，為了提高記錄信息的再利用性，根據(jù)會議記錄中抽取的重要話題以及每個發(fā)言者的 發(fā)言，生成有關(guān)相同發(fā)言者關(guān)于相同話題的會議影像分段。但是，專利文獻1公開的會議記錄重放裝置存在以下問題，即該裝置是將發(fā)言者 前后的發(fā)言者等作為算法(algorithm)來參考，而不能深入到發(fā)言主題和內(nèi)容中進行檢 索，若不記住前后文則難以檢索，而且，由于需要利用會議記錄，因此，會議記錄完成之前的 正在進行之中的會議不能利用該裝置。
發(fā)明內(nèi)容
鑒于上述課題，本發(fā)明提供以下裝置。(1)本發(fā)明的一個方面為，提供一種發(fā)言記錄裝置，其中具備聲音輸入裝置以及聲 音輸出裝置，用于記錄并重放發(fā)言的聲音，其特征在于，包括聲音取得部，用于取得該聲音 輸入裝置輸入的發(fā)言的聲音，并將該發(fā)言的聲音作為聲音數(shù)據(jù)，和論題指示裝置從多個預(yù) 先記錄在論題數(shù)據(jù)庫中的論題中指定的論題、以及被從聲音數(shù)據(jù)中識別的發(fā)言者一起，記 錄到聲音數(shù)據(jù)庫中；聲音認知部，對記錄在該聲音數(shù)據(jù)庫中的聲音數(shù)據(jù)進行聲音認知，取得 文信息；形態(tài)解析部，對該聲音認知部得到的文信息進行形態(tài)解析，并將從得到的單詞中抽 取的關(guān)鍵詞，和被與聲音數(shù)據(jù)一起記錄在該聲音數(shù)據(jù)庫中的論題以及發(fā)言人一起，記錄到 關(guān)鍵詞數(shù)據(jù)庫中；以及，顯示生成部，用于將該關(guān)鍵詞顯示在論題和發(fā)言人被相關(guān)了的點陣 中。(2)本發(fā)明的另一個方面為，提供根據(jù)(1)所述的發(fā)言記錄裝置，其中，所述關(guān)鍵 詞為所述文信息中的名詞。(3)本發(fā)明的另一個方面為，提供根據(jù)(1)或( 所述的發(fā)言記錄裝置，其中，針對 所述點陣中顯示的關(guān)鍵詞，所述顯示生成部顯示位于該關(guān)鍵詞前后預(yù)定數(shù)量的單詞所形成 的文章。(4)本發(fā)明的另一個方面為，提供根據(jù)(3)所述的發(fā)言記錄裝置，其中包括實時計測裝置，用于計測實際時間；以及，聲音重放部，用所述聲音輸出裝置重放所述聲音數(shù)據(jù) 庫中記錄的聲音數(shù)據(jù)，所述聲音取得部取得該聲音數(shù)據(jù)，同時根據(jù)該實時計測裝置的計測 結(jié)果取得該聲音數(shù)據(jù)的開始時間，所述形態(tài)解析部取得該聲音數(shù)據(jù)中的各個單詞的開始時 間，所述聲音重放部根據(jù)構(gòu)成所述文章的單詞的開始時間重放聲音數(shù)據(jù)。(5)本發(fā)明的另一個方面為，提供根據(jù)(1)所述的發(fā)言記錄裝置，其中，當(dāng)目前正 在進行的發(fā)言的聲音數(shù)據(jù)是被指示為以與所述論題指示裝置所指示的論題沒有關(guān)系的狀 態(tài)記錄在聲音數(shù)據(jù)庫中時，所述顯示生成部將從該聲音數(shù)據(jù)中得到的關(guān)鍵詞顯示在所述點 陣中的專用區(qū)域以作區(qū)別。(6)本發(fā)明的另一個方面為，提供根據(jù)( 所述的發(fā)言記錄裝置，其中，所述論題 數(shù)據(jù)庫中保存每個論題的說明文，當(dāng)所述專用區(qū)域中顯示的關(guān)鍵詞與所述形態(tài)解析部對該 說明文進行形態(tài)解析而得到的單詞一致時，所述顯示生成部在所述點陣中與包含該單詞的 論題相對應(yīng)的部位中顯示該關(guān)鍵詞。(7)本發(fā)明的另一個方面為，提供根據(jù)(1)所述的發(fā)言記錄裝置，其中，可以根據(jù) 所述點陣中顯示的關(guān)鍵詞，在所述論題數(shù)據(jù)庫中增加新的論題。(8)本發(fā)明的另一個方面為，提供根據(jù)(1)所述的發(fā)言記錄裝置，其中，還包括用 于輸入所述點陣中顯示的關(guān)鍵詞的重要程度或該關(guān)鍵詞與論題之間的相關(guān)程度的裝置。(9)本發(fā)明的另一個方面為，提供根據(jù)(1)所述的發(fā)言記錄裝置，其中，可以刪除 所述點陣中顯示的關(guān)鍵詞，當(dāng)關(guān)鍵詞被刪除后，所述聲音認知部重新進行聲音認知。(10)本發(fā)明的另一個方面為，提供根據(jù)一種發(fā)言記錄方法，用于具備聲音輸入裝 置以及聲音輸出裝置的發(fā)言記錄裝置，其特征在于包括以下步驟該發(fā)言記錄裝置中的聲 音取得部取得該聲音輸入裝置輸入的聲音，并將該聲音作為聲音數(shù)據(jù)，和論題指示裝置從 多個預(yù)先記錄在論題數(shù)據(jù)庫中的論題中指定的論題、以及被從聲音數(shù)據(jù)中識別的發(fā)言者一 起，記錄到聲音數(shù)據(jù)庫中；該發(fā)言記錄裝置中的聲音認知部對記錄在該聲音數(shù)據(jù)庫中的聲 音數(shù)據(jù)進行聲音認知，取得文信息；該發(fā)言記錄裝置中的形態(tài)解析部對該聲音認知部得到 的文信息進行形態(tài)解析，并將從得到的單詞中抽取的關(guān)鍵詞，和被與聲音數(shù)據(jù)一起記錄在 該聲音數(shù)據(jù)庫中的論題以及發(fā)言人一起，記錄到關(guān)鍵詞數(shù)據(jù)庫中；以及，該發(fā)言記錄裝置中 的顯示生成部將該關(guān)鍵詞顯示在論題和發(fā)言人被相關(guān)了的點陣中。本發(fā)明效果如下。由于具備了上述構(gòu)成，本發(fā)明能夠在正在召開的會議中，配合會 議進展?fàn)顩r，簡單顯示每個發(fā)言者的發(fā)言以及發(fā)言記錄，而且，可反復(fù)重放發(fā)言。
圖1是本實施方式的發(fā)言記錄裝置結(jié)構(gòu)的示意圖。圖2是本發(fā)明的發(fā)言記錄裝置中的基本接口的示意圖。圖3是顯示向發(fā)言記錄裝置明確指示改變話題即講述的論題時的狀態(tài)的示意圖。圖4是顯示向發(fā)言記錄裝置明確指示正在記錄的發(fā)言涉及到論題以外的話題的 狀態(tài)的示意圖。圖5是大致顯示論題DB中的記錄內(nèi)容的示意圖。圖6是聲音DB中記錄內(nèi)容的示意圖。圖7是聲音取得部在聲音DB中記錄聲音的處理流程圖。
5
圖8是大致顯示認知聲音文DB中的記錄內(nèi)容的示意圖。
圖9是用于說明形態(tài)解析部將正在發(fā)言中的單詞記錄到認知聲音文DB中的處理流程圖。圖10是大致顯示關(guān)鍵詞DB中的記錄內(nèi)容的示意圖。圖11是用形態(tài)解析部將聲音認知文DB的單詞記錄到關(guān)鍵詞DB中的處理流程圖。
閱圖12是用于說明用形態(tài)解析部將論題DB的單詞記錄到關(guān)鍵詞DB中的處理流程
。
圖13是顯示生成部在點陣中顯示標(biāo)簽云的處理流程圖。圖14是將其他欄中顯示的標(biāo)簽云中的單詞移動到明確表示論題的欄中的狀態(tài)的示意圖。圖15是用于說明有關(guān)聯(lián)的發(fā)言關(guān)鍵詞出現(xiàn)的狀態(tài)的示意圖。
圖16是顯示生成部顯示有關(guān)聯(lián)關(guān)鍵詞的處理流程圖。圖17是用于說明回顧顯示以前的發(fā)言的示意圖。圖18是用于說明用顯示生成部來回顧顯示以前的發(fā)言的的處理流程圖。圖19是用于說明重放被記錄了的發(fā)言的圖。圖20是聲音重放部進行發(fā)言重放的處理流程圖。圖21是用于說明制作新論題的示意圖。圖22是用于說明重要性、相關(guān)性滑塊的示意圖。圖23是用于說明刪除誤認標(biāo)簽的圖。
標(biāo)記說明
1CPU2實時時鐘3I/O4顯示屏5鍵盤6鼠標(biāo)7麥克風(fēng)8揚聲器9硬盤10RAM21日程DB22聲音DB23認知聲音文DB24關(guān)鍵詞DB31聲音取得部32聲音認知部33形態(tài)解析部34顯示生成部35聲音重放部
40 點陣
具體實施例方式以下參見附圖詳細說明本發(fā)明的實施方式。圖1是本發(fā)明實施方式的發(fā)言記錄裝置的系統(tǒng)結(jié)構(gòu)示意圖。圖IA是本發(fā)明實施方式的發(fā)言記錄裝置的硬件結(jié)構(gòu)框圖。如圖IA所示，該系統(tǒng) 包括CPU(中央處理器)1，作為控制部，用于控制整個系統(tǒng)的動作，并實行各種程序；實時 時鐘(RTC，Real Time Clock) 2，用于測定實際時間；硬盤9，作為存儲部，用于保存各種程 序或數(shù)據(jù)庫；RAM (Random Access Memory) 10，用于展開存放在硬盤9中的程序以供CPUl處 理。另外，還包括顯示屏4，其作為人機接口，經(jīng)由1/03 ；鍵盤5和鼠標(biāo)6，用于作為輸 入裝置；麥克風(fēng)(聲音輸入裝置)8，用于會議中發(fā)言者聲音的錄音；揚聲器(聲音輸出裝 置)，用于重放被錄音了的聲音。圖IB是本實施方式發(fā)言記錄裝置的軟件結(jié)構(gòu)框圖。如圖IB所示，裝置的硬盤9中保存了 議程DB(數(shù)據(jù)庫)21，作為論題數(shù)據(jù)庫，在其 中記錄會議的論題(話題)、議程ID(以下僅表示為ID)以及該議程的詳細內(nèi)容；聲音DB22， 其中記錄通過麥克風(fēng)7獲得的聲音；認知聲音文DB23，其中記錄了包括根據(jù)聲音DB中記錄 的聲音認知的聲音文的單詞；關(guān)鍵詞DBM，其中記錄從認知聲音文DB23中記錄的聲音文、 以及從議程DB21中記錄的論題和詳細信息中抽取的名詞。上述裝置所具備的RAMlO中包括以下部分，聲音取得部31，用于將麥克風(fēng)7取得的 會議中發(fā)言的聲音按照發(fā)言者以及論題分割后的聲音數(shù)據(jù)，與從RTC2得到的實際發(fā)言所 費時間一起記錄到聲音DB22中；聲音認知部32 ；對聲音DB22中記錄的聲音數(shù)據(jù)進行聲音 認知，以獲得聲音文；形態(tài)解析部33，對得到的聲音文進行形態(tài)解析，將從中獲得的單詞記 錄到認知聲音文DB23中，同時從記錄了的單詞中抽取名詞并記錄在關(guān)鍵詞DBM中。形態(tài) 解析部33還從議程DB21中記錄的論題和詳細信息中抽取每個論題的關(guān)鍵詞(名詞)并記 錄到關(guān)鍵詞DBM中。另外，還具備顯示生成部34，根據(jù)各個程序的實行結(jié)果或各個數(shù)據(jù)庫中記錄的信 息，在顯示屏上顯示接口畫面，更改顯示內(nèi)容；以及，聲音重放部35，其用揚聲器8輸出聲音 DB22中存放的聲音數(shù)據(jù)，進行重放處理。作為這些處理部的程序被存放在⑶-ROM或存儲卡等存儲媒體中，可以用內(nèi)藏麥 克風(fēng)以及揚聲器的一般計算機，作為本實施方式的發(fā)言記錄裝置，來實行這些程序。圖2是本實施方式的發(fā)言記錄裝置的基本的接口示意圖。圖2所示的接口畫面是顯示生成部34在顯示屏4上顯示的畫面，是用預(yù)先輸入到 議程DB21中的議程和發(fā)言者構(gòu)成的點陣40。在圖2的點陣40中，ID列41顯示會議的議題，關(guān)鍵詞列42中的每個會議發(fā)言者 單元中顯示關(guān)鍵詞DBM中記錄的關(guān)鍵詞。具體為，麥克風(fēng)7取得的發(fā)言者的發(fā)言通過聲音取得部31被分割為每個發(fā)言者的 每一次發(fā)言(可用現(xiàn)有的聲音處理中的發(fā)言者確定技術(shù))，而后通過聲音認知部32以及形 態(tài)解析部33的處理，抽取關(guān)鍵詞，并將該關(guān)鍵詞作為標(biāo)簽云(tag cloud)顯示在點陣40內(nèi)關(guān)鍵詞列42中與發(fā)言者相對應(yīng)的列中的單元上。在圖2的示例中，關(guān)鍵詞(交貨、客戶、臨時工等)作為標(biāo)簽云43，表示在IDl論題 內(nèi)與列41-1中的發(fā)言者C相對應(yīng)的單元中。另外，在聲音DB22中為了按照論題來記錄發(fā)言者的聲音，需要聲音取得部31指示 發(fā)言記錄裝置目前正在以哪一個論題為話題。對此，在本實施方式的發(fā)言記錄裝置中利用鼠標(biāo)6操作鼠標(biāo)點P，該鼠標(biāo)點P作為 話題指示裝置，指示目前的會議中正在將哪一個論題作為話題進行議論。圖3顯示了向發(fā)言記錄裝置明確指示改變話題即講述的論題時的狀態(tài)。例如，當(dāng)話題從IDl的論題改為ID2的論題時，將鼠標(biāo)點P移動到點陣40內(nèi)ID列 41中的ID2論題單元。論題移動后，在其移動到的單元開始生成標(biāo)簽云。當(dāng)然也可以用鍵盤等輸入來移 動論題。具體為，聲音取得部31根據(jù)鼠標(biāo)點P在點陣40的ID列中所在的位置來改變寫入 聲音數(shù)據(jù)ID的聲音數(shù)據(jù)和論題的ID。例如，當(dāng)鼠標(biāo)點P位于對應(yīng)ID2論題的列41-2時， 則聲音取得部31將變?yōu)镮D2的論題時的發(fā)言記錄到聲音DB22中。對于列41_3、41_4也相 同。此外，在以某個論題為話題時，會涉及到該論題以外的話題，此時，也需要將此情
況指示給發(fā)言記錄裝置。圖4是顯示向發(fā)言記錄裝置明確指示正在記錄的發(fā)言涉及到論題以外的話題的 狀態(tài)的示意圖。如圖4所示，當(dāng)發(fā)言涉及到目前正在講述的話題以外的論題時，鼠標(biāo)點P被置于圖 2所示的點陣40中的列41-5(其他)，由此發(fā)言作為ID “其他”被記錄到聲音DB22中，接 著，經(jīng)過形態(tài)解析部33以及顯示生成部34的處理，此時的發(fā)言作為標(biāo)簽云，被顯示在其他 列41-5中對應(yīng)于該發(fā)言者的單元之中(如發(fā)言者為C，記錄到單元C中)。下面詳細說明各個數(shù)據(jù)庫中的記錄內(nèi)容、以及各個處理部(程序)為了在各個數(shù) 據(jù)庫中進行記錄所實行的動作、和為了在點陣40中顯示關(guān)鍵詞所需要的處理。圖5是大致顯示論題DB21中的記錄內(nèi)容的示意圖。ID51表示各個論題ID，論題列52表示該論題的題目，詳細列53表示論題的詳細內(nèi)容。圖6是聲音DB22中記錄內(nèi)容的示意圖。聲音DB22中記錄了將聲音取得部31所取得的聲音數(shù)據(jù)分割成一個人的一次發(fā) 、
曰ο列61中記錄了發(fā)言開始時間，列62中記錄了該發(fā)言的持續(xù)時間(到下一個發(fā)言 開始為止的時間)，列63中記錄了發(fā)言者，列64中記錄了用于識別分割后的文件的ID，列 65中記錄了該發(fā)言的狀態(tài)，是與那個論題有關(guān)的發(fā)言。上述數(shù)據(jù)取決于在圖3以及圖4的說明中點陣中鼠標(biāo)點P的位置。例如，在圖6中X欄表示從15點43分25秒01開始的5秒04期間，發(fā)言者A針 對IDl的論題進行的發(fā)言被保存在ID56的文件中。圖7是聲音取得部31在聲音DB22中記錄聲音的處理流程圖。
如圖7所示，首先，聲音取得31從麥克風(fēng)7中取得會議中的聲音(SlOl)，而后按照 發(fā)言者分割聲音文件(S102)，接著從RTC2取得時間信息(S103)，從而在聲音DB22中記錄 發(fā)言者、聲音數(shù)據(jù)、時間、文件ID (S 104)。圖8是大致顯示認知聲音文DB23中的記錄內(nèi)容的示意圖。認知聲音文DB23是將形態(tài)解析部33對聲音DB22中記錄的發(fā)言者的一次發(fā)言進 行形態(tài)解析而抽取的單詞，和該發(fā)言的開始時間、用該單詞發(fā)言的時間、用該單詞發(fā)言的發(fā) 言者、單詞的詞類、用單詞發(fā)言時的話題的議題ID —起記錄其中的DB。圖8中列71表示使用該單詞的發(fā)言的開始時間，列72表示發(fā)言時間(單位為微 妙)，列73表示發(fā)言者，列74表示單詞，列75表示該單詞的詞類，列76表示作為狀態(tài)，用該 單詞發(fā)言的話題的議題。例如在圖8中，Y欄記錄了在15點43分25秒01開始的84微秒的期間中，發(fā)言 者A針對IDl的話題使用“交貨日期” 一詞進行了發(fā)言。圖9是用于說明形態(tài)解析部33將正在發(fā)言中的單詞記錄到認知聲音文DB中的處 理流程圖。首先，聲音認知部32從聲音DB22中取得記錄在其中的聲音數(shù)據(jù)(S201)后，對聲 音數(shù)據(jù)進行聲音認知，取得聲音文(S202)。此時，聲音認知部32取得與被聲音認知了的認知語相對應(yīng)的時間信息(S203)。即 取得與聲音數(shù)據(jù)中各個發(fā)音相對應(yīng)的發(fā)言時間中的時間點。接著，形態(tài)解析部33對取得的聲音文信息進行形態(tài)解析，分割成單詞，并判斷該 單詞的詞類(S204)。接著，形態(tài)解析部33根據(jù)S203中得到的時間信息，將各個單詞的開始時間、發(fā)言 時間、單詞、發(fā)言者、詞類信息記錄到認知聲音文DB23之中(S205)。圖10是大致顯示關(guān)鍵詞DBM中的記錄內(nèi)容的示意圖。關(guān)鍵詞DBM是將記錄于認知聲音文DB23中的單詞內(nèi)的名詞，和用該單詞發(fā)言的 論題、圖2的點陣中表示該單詞的ID列、發(fā)言者、以及發(fā)言中的使用次數(shù)記錄在一起的DB。在圖10中，列81中記錄了點陣40中單詞的顯示位置(ID列)，列82中記錄了用 該單詞發(fā)言的論題的ID用以作為狀態(tài)，列83中記錄了該單詞，列84中記錄了用該單詞發(fā) 言的發(fā)言者，列85中記錄了發(fā)言中該單詞的使用次數(shù)(即在點陣40的顯示位置中該單詞 出現(xiàn)的次數(shù))。例如在圖10中，“開發(fā)環(huán)境”一詞被記錄為，在IDl的論題成為話題時，發(fā)言者A在 發(fā)言中兩次使用該單詞，而且，該單詞在圖2所示的點陣中，應(yīng)被記錄在關(guān)鍵詞列42中關(guān)于 發(fā)言者A的列中與IDl的論題相對應(yīng)的單元中的標(biāo)簽云43中。關(guān)于單元87將在圖11中 說明。圖10的行86中，將通過形態(tài)解析部33對論題DB21的論題以及詳細欄中記錄的 文進行形態(tài)解析而得到的單詞(名詞)，與列51所示的對應(yīng)論題的ID以及出現(xiàn)次數(shù)記錄在一起。圖11是用形態(tài)解析部33將認知聲音文DB23的單詞記錄到關(guān)鍵詞DBM中的處理 的流程圖。形態(tài)解析部33取得認知聲音文DB23中的詞類為名詞的單詞，同時取得發(fā)言者、狀態(tài)(論題)(S301)。在圖4相關(guān)的敘述中進行了如下說明，即當(dāng)發(fā)言與正在議論的論題沒有關(guān)系時， 可以指示發(fā)言記錄裝置將狀態(tài)作為ID的“其他”來記錄聲音。如果記錄的狀態(tài)為“其 他”(S302的“是”)，則對認知聲音文DB23中記錄的除此以外的單詞中的狀態(tài)和ID(除“其 他”以外)中的單詞進行對比(S303)，如果存在相同單詞(S304的“是”)，則將該單詞的ID 連同“其他” 一起輸入到列81中的相應(yīng)單元中(S305)(參見圖10的單元87)。如果沒有相同單詞(S304為“否”)，則在列81的單元中寫入“其他” (S06)。接著檢索關(guān)鍵詞DB的相同狀態(tài)(論題)中是否存在相同單詞(S307)。如果不存 在(S308的“否”)，則在關(guān)鍵詞DBM中增加行(S309)，并輸入顯示位置、狀態(tài)、單詞、發(fā)言 者、次數(shù)。而如果存在相同單詞(S308的“是”)，則該單詞對應(yīng)的行中的列85即次數(shù)進行 計數(shù)，即作加法運算(S310)。在S302中如果為“否”，即狀態(tài)為ID時，則直接移動到S307。圖12是用于說明用形態(tài)解析部33將論題DB21的單詞記錄到關(guān)鍵詞DBM中的處
理流程圖。形態(tài)解析部33從論題DB21取得論題、詳細信息(S401)。接著對該取得的論題和 詳細信息進行形態(tài)解析(S402)，其結(jié)果，從得到的單詞中取得名詞(S403)。而后，將該名詞 與其ID —起按照論題輸入到關(guān)鍵詞DBM之中(S404)。圖13是顯示生成部34在點陣中顯示標(biāo)簽云的處理流程圖。顯示生成部34訪問關(guān)鍵詞DBM，取得顯示位置(列81)、單詞(列83)、發(fā)言者(列 84)、以及次數(shù)(列85) (S501)。而后，對每個顯示位置中的單詞出現(xiàn)的次數(shù)進行加法運算，并除以各個單詞出現(xiàn) 的次數(shù)，求出比值(S502)。進而，考慮顯示位置、發(fā)言者，并用基于S502中求出的比值的字體大小來生成單 詞(S503)。以上是本實施方式的裝置中從發(fā)言者的發(fā)言中抽取并顯示關(guān)鍵詞的基本流程。圖14是將其他欄中顯示的標(biāo)簽云中的單詞移動到明確表示論題的欄中的狀態(tài)的 示意圖。圖14中，當(dāng)其他欄的單元中顯示的標(biāo)簽云中的單詞100被認為與ID2的論題相對 應(yīng)時，可操作鼠標(biāo)點P將單詞100拉到相同發(fā)言者的ID2中相應(yīng)的論題的單元91中，從而 使得單元91的標(biāo)簽云中包括單詞100。隨此，關(guān)鍵詞DBM中列81 (顯示位置)的內(nèi)容當(dāng)然發(fā)生改動。另外，在本發(fā)明的裝置中，如圖2所示當(dāng)移動到其他論題時，可從該其他的列中所 顯示的關(guān)鍵詞作為可能與移動到的論題有關(guān)聯(lián)的單詞標(biāo)簽云來顯示。圖15是用于說明有關(guān)聯(lián)的發(fā)言關(guān)鍵詞出現(xiàn)的狀態(tài)的示意圖。例如，當(dāng)移動到ID2的論題時，在關(guān)于ID “其他”的論題的單元90中與ID2的論 題有關(guān)聯(lián)的單詞如“寄費、卡車、倉庫、利潤”被作為標(biāo)簽云92顯示。由此，可以利用單詞來回顧有過怎樣的發(fā)言。圖16是生成部顯示相關(guān)關(guān)鍵詞的處理的流程圖。當(dāng)論題移動后，顯示生成部34取得移動后的狀態(tài)(論題)(S601)。
接著，訪問關(guān)鍵詞DBM，取得其他顯示位置中該當(dāng)副顯示位置(單元87)的單詞、 發(fā)言人、次數(shù)(S602)。而后，將取得的單詞的出現(xiàn)次數(shù)合計后分別除以各個單詞的出現(xiàn)次數(shù)，求出比值
(5603)。而后，考慮顯示位置、發(fā)言者，用基于求出的比值的字體大小來生成并顯示單詞
(5604)。圖17是用于說明回顧顯示以前的發(fā)言的示意圖。當(dāng)將鼠標(biāo)點P對準(zhǔn)點陣40中的單元所表示的標(biāo)簽云中的單詞后，顯示生成部34 根據(jù)認知聲音文DB中記錄的文章，將被選單詞出現(xiàn)前后(例如50文字)的單詞一起例舉 在文章93中。這樣，便能夠簡單地回顧以前的發(fā)言。當(dāng)然，點擊如圖2所示的強調(diào)顯示的標(biāo)簽云中的單詞也具有相同效果。圖18是用于說明用顯示生成部34來回顧顯示以前的發(fā)言的處理流程圖。如圖18所示，當(dāng)標(biāo)簽云中的單詞被點擊后(S701的“是”)，取得被點擊的單詞和顯 示位置670 。接著，從關(guān)鍵詞DBM中取得狀態(tài)(論題)(S70;3)，并檢索認知聲音文DB23 中是否具有與該狀態(tài)對應(yīng)的單詞(S704)。當(dāng)存在該單詞時(S705的“是”)，取得該單詞前 后規(guī)定數(shù)(例如50文字)的文字列(S706)，并生成規(guī)定數(shù)的文字列(S707)。此時，還可以 改變文字列中該單詞的顏色或?qū)⒃搯卧~用粗體表示等進行強調(diào)顯示。而后，返回S705，直到不再存在該當(dāng)單詞為止。圖19是用于說明重放被記錄了的發(fā)言的圖。在圖19中，以圖17狀態(tài)，用鼠標(biāo)點P進一步選擇(點擊)該文章，由此重放聲音。 這樣便能夠完全回顧發(fā)言內(nèi)容。圖20是聲音重放部進行發(fā)言重放的處理流程圖。當(dāng)通過1/03檢測到點陣40中的文章被點擊后(S801)，聲音重放部35取得被點擊 的文章(S802)。接著，訪問認知聲音文DB23，取得開始時間和發(fā)言者(S803)。進而，基于 開始時間和發(fā)言者，從聲音DB22中取得文件ID(S804)。而后，根據(jù)文件ID取得聲音文件 (S805)，進行重放(S806)。圖21是用于說明制作新論題的示意圖。在利用標(biāo)簽云中的單詞生成新論題，用鼠標(biāo)等將該目標(biāo)單詞拉到ID列41中，以在 議程DB中制作論題，同時改變圖2所示的點陣40中的顯示。圖22是用于說明重要性、相關(guān)性滑塊的示意圖。對于講話內(nèi)容的重要性或相關(guān)性，促進者可一邊加入等級一邊起促進作用。即可 從論題的下面的等級輸入UI102輸入，也可考慮用滾輪鼠標(biāo)輸入的方法。圖23是用于說明刪除誤認標(biāo)簽的圖。當(dāng)顯示了誤認、不適當(dāng)?shù)膯卧~時，將該單詞103拉到顯示屏4中另外顯示的垃圾箱 中，由此可消除該誤認標(biāo)簽。還可通過設(shè)定來改正該部分的聲音認知。
權(quán)利要求
1.一種發(fā)言記錄裝置，其中具備聲音輸入裝置以及聲音輸出裝置，用于記錄并重放發(fā) 言的聲音，其特征在于，包括聲音取得部，用于取得該聲音輸入裝置輸入的發(fā)言的聲音，并將該發(fā)言的聲音作為聲 音數(shù)據(jù)，和論題指示裝置從多個預(yù)先記錄在論題數(shù)據(jù)庫中的論題中指定的論題、以及被從 聲音數(shù)據(jù)中識別的發(fā)言者一起，記錄到聲音數(shù)據(jù)庫中；聲音認知部，對記錄在該聲音數(shù)據(jù)庫中的聲音數(shù)據(jù)進行聲音認知，取得文信息； 形態(tài)解析部，對該聲音認知部得到的文信息進行形態(tài)解析，并將從得到的單詞中抽取 的關(guān)鍵詞，和被與聲音數(shù)據(jù)一起記錄在該聲音數(shù)據(jù)庫中的論題以及發(fā)言人一起，記錄到關(guān) 鍵詞數(shù)據(jù)庫中；以及，顯示生成部，用于將該關(guān)鍵詞顯示在論題和發(fā)言人被相關(guān)了的點陣中。
2.根據(jù)權(quán)利要求1所述的發(fā)言記錄裝置，其中，所述關(guān)鍵詞為所述文信息中的名詞。
3.根據(jù)權(quán)利要求1或2所述的發(fā)言記錄裝置，其中，針對所述點陣中顯示的關(guān)鍵詞，所 述顯示生成部顯示位于該關(guān)鍵詞前后預(yù)定數(shù)量的單詞所形成的文章。
4.根據(jù)權(quán)利要求3所述的發(fā)言記錄裝置，其中包括 實時計測裝置，用于計測實際時間；以及，聲音重放部，用所述聲音輸出裝置重放所述聲音數(shù)據(jù)庫中記錄的聲音數(shù)據(jù)， 所述聲音取得部取得該聲音數(shù)據(jù)，同時根據(jù)該實時計測裝置的計測結(jié)果取得該聲音數(shù) 據(jù)的開始時間，所述形態(tài)解析部取得該聲音數(shù)據(jù)中的各個單詞的開始時間， 所述聲音重放部根據(jù)構(gòu)成所述文章的單詞的開始時間重放聲音數(shù)據(jù)。
5.根據(jù)權(quán)利要求1所述的發(fā)言記錄裝置，其中，當(dāng)目前正在進行的發(fā)言的聲音數(shù)據(jù)是 被指示為以與所述論題指示裝置所指示的論題沒有關(guān)系的狀態(tài)記錄在聲音數(shù)據(jù)庫中時，所 述顯示生成部將從該聲音數(shù)據(jù)中得到的關(guān)鍵詞顯示在所述點陣中的專用區(qū)域以作區(qū)別。
6.根據(jù)權(quán)利要求5所述的發(fā)言記錄裝置，其中，所述論題數(shù)據(jù)庫中保存每個論題的說 明文，當(dāng)所述專用區(qū)域中顯示的關(guān)鍵詞與所述形態(tài)解析部對該說明文進行形態(tài)解析而得到 的單詞一致時，所述顯示生成部在所述點陣中與包含該單詞的論題相對應(yīng)的部位中顯示該 關(guān)鍵詞。
7.根據(jù)權(quán)利要求1所述的發(fā)言記錄裝置，其中，可以根據(jù)所述點陣中顯示的關(guān)鍵詞，在 所述論題數(shù)據(jù)庫中增加新的論題。
8.根據(jù)權(quán)利要求1所述的發(fā)言記錄裝置，其中，還包括用于輸入所述點陣中顯示的關(guān) 鍵詞的重要程度或該關(guān)鍵詞與論題之間的相關(guān)程度的裝置。
9.根據(jù)權(quán)利要求1所述的發(fā)言記錄裝置，其中，可以刪除所述點陣中顯示的關(guān)鍵詞，當(dāng) 關(guān)鍵詞被刪除后，所述聲音認知部重新進行聲音認知。
10.一種發(fā)言記錄方法，用于具備聲音輸入裝置以及聲音輸出裝置的發(fā)言記錄裝置，其 特征在于包括以下步驟該發(fā)言記錄裝置中的聲音取得部取得該聲音輸入裝置輸入的聲音，并將該聲音作為聲 音數(shù)據(jù)，和論題指示裝置從多個預(yù)先記錄在論題數(shù)據(jù)庫中的論題中指定的論題、以及被從 聲音數(shù)據(jù)中識別的發(fā)言者一起，記錄到聲音數(shù)據(jù)庫中；該發(fā)言記錄裝置中的聲音認知部對記錄在該聲音數(shù)據(jù)庫中的聲音數(shù)據(jù)進行聲音認知， 取得文信息；該發(fā)言記錄裝置中的形態(tài)解析部對該聲音認知部得到的文信息進行形態(tài)解析，并將從 得到的單詞中抽取的關(guān)鍵詞，和被與聲音數(shù)據(jù)一起記錄在該聲音數(shù)據(jù)庫中的論題以及發(fā)言 人一起，記錄到關(guān)鍵詞數(shù)據(jù)庫中；以及，該發(fā)言記錄裝置中的顯示生成部將該關(guān)鍵詞顯示在論題和發(fā)言人被相關(guān)了的點陣中。
全文摘要
本發(fā)明涉及發(fā)言記錄裝置和發(fā)言記錄方法，其目的在于，配合正在進行的會議進展?fàn)顩r，按照每個發(fā)言者簡單地顯示或回顧會議中被記錄了的發(fā)言。該裝置包括聲音取得部(31)，用于經(jīng)麥克風(fēng)輸入的發(fā)言聲音，并將其作為聲音數(shù)據(jù)，和論題指示裝置從多個預(yù)存在論題DB中的論題中指定的論題、以及被從聲音數(shù)據(jù)中識別的發(fā)言者一起記錄到聲音DB(22)中；聲音認知部(32)，對記錄在聲音DB中的聲音數(shù)據(jù)進行認知，取得文信息；形態(tài)解析部(33)，對聲音認知部得到的文信息進行形態(tài)解析，并將從得到的單詞中抽取的關(guān)鍵詞，和一起記錄在聲音DB中的論題以及發(fā)言人一起，記錄到關(guān)鍵詞DB中；顯示生成部(34)，用于將關(guān)鍵詞顯示在點陣中。
文檔編號G10L15/08GK102063461SQ20101052683
公開日2011年5月18日 申請日期2010年10月25日 優(yōu)先權(quán)日2009年11月6日
發(fā)明者中臣政司, 伊賀聰一郎, 新西誠人 申請人:株式會社理光