本公開大體上涉及事件視覺傳感器。舉例來說,本技術(shù)的數(shù)個(gè)實(shí)施例涉及采用芯片上事件數(shù)據(jù)壓縮(例如像素中事件數(shù)據(jù)壓縮)的事件視覺傳感器。
背景技術(shù):
1、圖像傳感器已變得無處不在,并且現(xiàn)在廣泛用于數(shù)碼相機(jī)、蜂窩電話、安全攝像機(jī)以及醫(yī)療、汽車及其它應(yīng)用中。隨著圖像傳感器被集成到更廣泛范圍的電子裝置中,可期望通過裝置架構(gòu)設(shè)計(jì)以及圖像采集處理兩者以盡可能多的方式(例如,分辨率、功率消耗、動(dòng)態(tài)范圍等)來增強(qiáng)其功能性、性能指標(biāo)等等。
2、典型圖像傳感器響應(yīng)于從外部場(chǎng)景入射在圖像傳感器上的圖像光而操作。圖像傳感器包含具有光敏元件(例如,光電二極管)的像素陣列,所述光敏元件吸收入射圖像光的一部分并在吸收到圖像光之后即刻產(chǎn)生圖像電荷。由像素光生的圖像電荷可作為列位線上的模擬輸出圖像信號(hào)來測(cè)量,所述模擬輸出圖像信號(hào)作為入射圖像光的函數(shù)而變化。換句話說,所產(chǎn)生的圖像電荷的量與圖像光的強(qiáng)度成比例,所述圖像光作為模擬圖像信號(hào)從列位線讀出并被轉(zhuǎn)換為數(shù)字值以提供表示外部場(chǎng)景的信息。
技術(shù)實(shí)現(xiàn)思路
1、本公開的一方面涉及一種事件視覺像素,其包括:光電傳感器,其被配置成響應(yīng)于從外部場(chǎng)景接收到的入射光而產(chǎn)生光電流;光電流轉(zhuǎn)電壓轉(zhuǎn)換器,其耦合到所述光電傳感器以將所述光電流轉(zhuǎn)換為電壓;差檢測(cè)電路,其耦合到所述光電流轉(zhuǎn)電壓轉(zhuǎn)換器,以響應(yīng)于在從所述光電流轉(zhuǎn)電壓轉(zhuǎn)換器接收到的所述電壓中隨時(shí)間檢測(cè)到的差而產(chǎn)生經(jīng)濾波及經(jīng)放大信號(hào);事件產(chǎn)生比較器,其耦合到所述差檢測(cè)電路,以基于所述經(jīng)濾波及經(jīng)放大信號(hào)與一或多個(gè)閾值的比較來檢測(cè)在所述外部場(chǎng)景內(nèi)發(fā)生的事件;及時(shí)間聚合電路,其耦合到所述事件產(chǎn)生比較器,以跟蹤由所述事件產(chǎn)生比較器在所規(guī)定定時(shí)窗口內(nèi)檢測(cè)到的事件的聚合數(shù)目。
2、本公開的另一方面涉及一種事件視覺傳感器,其包括:多個(gè)事件視覺像素,其中:所述多個(gè)事件視覺像素中的每一事件視覺像素被配置成至少部分地基于從外部場(chǎng)景接收到的入射光中所指示的事件來產(chǎn)生事件數(shù)據(jù),所述多個(gè)事件視覺像素中的每一事件視覺像素包含被配置成在所述事件數(shù)據(jù)從所述事件視覺像素讀出之前對(duì)所述事件數(shù)據(jù)進(jìn)行壓縮的壓縮電路。
3、本公開的又一方面涉及一種對(duì)包含一或多個(gè)事件視覺像素的事件視覺傳感器進(jìn)行操作的方法,所述方法包括:針對(duì)所述一或多個(gè)事件視覺像素中的每一個(gè)別事件視覺像素—檢測(cè)在定時(shí)窗口內(nèi)從外部場(chǎng)景接收到的入射光中所指示的事件,及跟蹤在所述定時(shí)窗口內(nèi)檢測(cè)到的所述事件的數(shù)目。
1.一種事件視覺像素,其包括:
2.根據(jù)權(quán)利要求1所述的事件視覺像素,其中所述時(shí)間聚合電路包含被配置成對(duì)由所述事件產(chǎn)生比較器在所述所規(guī)定定時(shí)窗口內(nèi)檢測(cè)到的事件的所述聚合數(shù)目進(jìn)行計(jì)數(shù)的至少一個(gè)計(jì)數(shù)器。
3.根據(jù)權(quán)利要求2所述的事件視覺像素,其中所述至少一個(gè)計(jì)數(shù)器包含:
4.根據(jù)權(quán)利要求2所述的事件視覺像素,其中所述至少一個(gè)計(jì)數(shù)器包含:
5.根據(jù)權(quán)利要求1所述的事件視覺像素,其進(jìn)一步包括耦合到所述事件產(chǎn)生比較器的輸出的讀出邏輯,其中所述讀出邏輯包含鎖存器,當(dāng)所述事件產(chǎn)生比較器在所述所規(guī)定定時(shí)窗口內(nèi)檢測(cè)到至少一個(gè)事件時(shí),所述鎖存器被觸發(fā)。
6.一種事件視覺傳感器,其包括:
7.根據(jù)權(quán)利要求6所述的事件視覺傳感器,其中:
8.根據(jù)權(quán)利要求7所述的事件視覺傳感器,其中每一時(shí)間聚合電路包含被配置成對(duì)由對(duì)應(yīng)的所述事件視覺像素在所述所規(guī)定定時(shí)窗口內(nèi)檢測(cè)到的所述事件的所述數(shù)目進(jìn)行計(jì)數(shù)的至少一個(gè)計(jì)數(shù)器。
9.根據(jù)權(quán)利要求7所述的事件視覺傳感器,其中:
10.根據(jù)權(quán)利要求7所述的事件視覺傳感器,其中所述多個(gè)事件視覺像素中的每一事件視覺像素進(jìn)一步包含讀出邏輯,所述讀出邏輯包含至少一個(gè)鎖存器,當(dāng)對(duì)應(yīng)的所述事件視覺像素在所述所規(guī)定定時(shí)窗口內(nèi)檢測(cè)到至少一個(gè)事件時(shí),所述至少一個(gè)鎖存器被觸發(fā)。
11.根據(jù)權(quán)利要求6所述的事件視覺傳感器,其中所述事件視覺傳感器被配置成至少部分地基于所述多個(gè)事件視覺像素中的一或多個(gè)事件視覺像素的事件數(shù)據(jù)讀出來形成偽幀。
12.根據(jù)權(quán)利要求11所述的事件視覺傳感器,其進(jìn)一步包括被配置成對(duì)所述偽幀執(zhí)行壓縮算法的事件信號(hào)處理器。
13.根據(jù)權(quán)利要求12所述的事件視覺傳感器,其中所述事件信號(hào)處理器被配置成對(duì)所述偽幀執(zhí)行有損壓縮算法。
14.根據(jù)權(quán)利要求13所述的事件視覺傳感器,其中所述有損壓縮算法包含聯(lián)合圖像專家組壓縮、高級(jí)視頻編碼壓縮(也稱為h264壓縮)、高效率視頻編碼壓縮(也稱為h265壓縮)或其任一組合。
15.一種對(duì)包含一或多個(gè)事件視覺像素的事件視覺傳感器進(jìn)行操作的方法,所述方法包括:
16.根據(jù)權(quán)利要求15所述的方法,其中:
17.根據(jù)權(quán)利要求15所述的方法,其中:
18.根據(jù)權(quán)利要求15所述的方法,其進(jìn)一步包括:在所述定時(shí)窗口結(jié)束時(shí)或之后,讀出由所述一或多個(gè)事件視覺像素中的至少一者在所述定時(shí)窗口內(nèi)檢測(cè)到的所述事件的所述數(shù)目。
19.根據(jù)權(quán)利要求15所述的方法,其進(jìn)一步包括:針對(duì)所述一或多個(gè)事件視覺像素中的所述個(gè)別事件視覺像素中的每一者,僅當(dāng)所述個(gè)別事件視覺像素在所述定時(shí)窗口期間檢測(cè)到至少一個(gè)事件時(shí),才讀出在所述定時(shí)窗口內(nèi)檢測(cè)到的所述事件的所述數(shù)目。
20.根據(jù)權(quán)利要求15所述的方法,其進(jìn)一步包括至少部分地基于由所述一或多個(gè)事件視覺像素的全部或子集在所述定時(shí)窗口內(nèi)檢測(cè)到的事件的所述數(shù)目來形成對(duì)應(yīng)于所述定時(shí)窗口的偽幀。
21.根據(jù)權(quán)利要求20所述的方法,其中:
22.根據(jù)權(quán)利要求20所述的方法,其進(jìn)一步包括對(duì)所述偽幀執(zhí)行幀層級(jí)壓縮。
23.根據(jù)權(quán)利要求15所述的方法,其中跟蹤在所述定時(shí)窗口內(nèi)檢測(cè)到的所述事件的所述數(shù)目包含: