本公開(kāi)涉及人工智能技術(shù)，尤其是一種基于眼動(dòng)監(jiān)測(cè)信息的對(duì)焦方法、裝置和電子車(chē)載后視鏡。

背景技術(shù)：

1、間接視野裝置是駕駛員用來(lái)觀察直接視野無(wú)法觀察到的車(chē)輛鄰近交通區(qū)域的裝置。以電子后視鏡為例，它是一種可取代傳統(tǒng)光學(xué)后視鏡的新型后視鏡。它采用攝像頭和顯示設(shè)備的組合結(jié)構(gòu)，可以改變傳統(tǒng)光學(xué)后視鏡受限于鏡面曲率、形狀、大小角度等因素造成的視野限制，使得整個(gè)視野更加寬闊。但是，電子后視鏡基于攝像頭和顯示設(shè)備，受光學(xué)成像原理限制，其成像清晰的范圍只能固定在一定的范圍。景深之外的模糊圖像容易造成安全問(wèn)題，而且也容易造成視覺(jué)疲勞，導(dǎo)致駕駛員有頭暈等不適感。

技術(shù)實(shí)現(xiàn)思路

1、鑒于現(xiàn)有技術(shù)的以上問(wèn)題，本公開(kāi)實(shí)施例提供一種基于眼動(dòng)監(jiān)測(cè)信息的對(duì)焦方法、裝置和電子車(chē)載后視鏡。本公開(kāi)實(shí)施例可以隨著駕駛員注意力的改變而實(shí)時(shí)調(diào)整顯示屏上的圖像顯示效果，使得駕駛員能夠看到清晰的圖像，提升駕駛員的舒適度和行車(chē)安全性。

2、為達(dá)到上述目的，本公開(kāi)第一方面提供了一種基于眼動(dòng)監(jiān)測(cè)信息的對(duì)焦方法，包括：

3、接收眼動(dòng)檢測(cè)設(shè)備獲取到的駕駛員的眼動(dòng)信息；

4、根據(jù)眼動(dòng)信息，確定駕駛員在顯示屏上的注視區(qū)域；

5、基于注視區(qū)域控制圖像傳感器進(jìn)行對(duì)焦，使得注視區(qū)域清晰成像。

6、作為第一方面的一種可能的實(shí)現(xiàn)方式，接收眼動(dòng)檢測(cè)設(shè)備獲取到的駕駛員的眼動(dòng)信息，包括：

7、采集局部空間區(qū)域的光信號(hào)信息，并根據(jù)光信號(hào)信息轉(zhuǎn)換為脈沖信號(hào)；光信號(hào)信息包括反映眼動(dòng)的光流信息；

8、響應(yīng)于脈沖信號(hào)，將脈沖信號(hào)輸入眼動(dòng)跟蹤模型，由眼動(dòng)跟蹤模型輸出與脈沖信號(hào)對(duì)應(yīng)的眼動(dòng)信息；眼動(dòng)跟蹤模型基于脈沖神經(jīng)網(wǎng)絡(luò)生成。

9、作為第一方面的一種可能的實(shí)現(xiàn)方式，眼動(dòng)檢測(cè)設(shè)備和顯示屏設(shè)置于電子車(chē)載后視鏡中；圖像傳感器部署于車(chē)輛后方、側(cè)方或下方。

10、作為第一方面的一種可能的實(shí)現(xiàn)方式，眼動(dòng)信息包括駕駛員的眼睛以及角膜反射點(diǎn)的圖像信息。

11、作為第一方面的一種可能的實(shí)現(xiàn)方式，根據(jù)眼動(dòng)信息，確定駕駛員在顯示屏上的注視區(qū)域，包括：

12、將駕駛員的眼睛以及角膜反射點(diǎn)的圖像信息輸入預(yù)先訓(xùn)練的機(jī)器學(xué)習(xí)模型，由機(jī)器學(xué)習(xí)模型輸出駕駛員在顯示屏上的注視區(qū)域。

13、作為第一方面的一種可能的實(shí)現(xiàn)方式，控制圖像傳感器進(jìn)行對(duì)焦，包括：

14、通過(guò)調(diào)整圖像傳感器的鏡頭位置進(jìn)行對(duì)焦。

15、作為第一方面的一種可能的實(shí)現(xiàn)方式，調(diào)整圖像傳感器的鏡頭位置進(jìn)行對(duì)焦的方式包括對(duì)比度檢測(cè)法、相位差檢測(cè)法和混合對(duì)焦模式中的至少一種。

16、作為第一方面的一種可能的實(shí)現(xiàn)方式，基于注視區(qū)域控制圖像傳感器進(jìn)行對(duì)焦，使得注視區(qū)域清晰成像之后，上述方法還包括：

17、控制顯示屏中顯示的圖像的景深范圍。

18、作為第一方面的一種可能的實(shí)現(xiàn)方式，控制顯示屏中顯示的圖像的景深范圍，包括：

19、通過(guò)調(diào)整圖像傳感器的鏡頭光圈，控制圖像的景深范圍。

20、本公開(kāi)第二方面提供了一種基于眼動(dòng)監(jiān)測(cè)信息的對(duì)焦裝置，包括：

21、接收單元，用于：接收眼動(dòng)檢測(cè)設(shè)備獲取到的駕駛員的眼動(dòng)信息；

22、處理單元，用于：根據(jù)眼動(dòng)信息，確定駕駛員在顯示屏上的注視區(qū)域；

23、調(diào)整單元，用于：基于注視區(qū)域控制圖像傳感器進(jìn)行對(duì)焦，使得注視區(qū)域清晰成像。

24、作為第二方面的一種可能的實(shí)現(xiàn)方式，接收單元用于：

25、采集局部空間區(qū)域的光信號(hào)信息，并根據(jù)光信號(hào)信息轉(zhuǎn)換為脈沖信號(hào)；光信號(hào)信息包括反映眼動(dòng)的光流信息；

26、響應(yīng)于脈沖信號(hào)，將脈沖信號(hào)輸入眼動(dòng)跟蹤模型，由眼動(dòng)跟蹤模型輸出與脈沖信號(hào)對(duì)應(yīng)的眼動(dòng)信息；眼動(dòng)跟蹤模型基于脈沖神經(jīng)網(wǎng)絡(luò)生成。

27、作為第二方面的一種可能的實(shí)現(xiàn)方式，眼動(dòng)檢測(cè)設(shè)備和顯示屏設(shè)置于電子車(chē)載后視鏡中；圖像傳感器部署于車(chē)輛后方、側(cè)方或下方。

28、作為第二方面的一種可能的實(shí)現(xiàn)方式，眼動(dòng)信息包括駕駛員的眼睛以及角膜反射點(diǎn)的圖像信息。

29、作為第二方面的一種可能的實(shí)現(xiàn)方式，處理單元用于：

30、將駕駛員的眼睛以及角膜反射點(diǎn)的圖像信息輸入預(yù)先訓(xùn)練的機(jī)器學(xué)習(xí)模型，由機(jī)器學(xué)習(xí)模型輸出駕駛員在顯示屏上的注視區(qū)域。

31、作為第二方面的一種可能的實(shí)現(xiàn)方式，調(diào)整單元控制圖像傳感器進(jìn)行對(duì)焦，包括：

32、通過(guò)調(diào)整圖像傳感器的鏡頭位置進(jìn)行對(duì)焦。

33、作為第二方面的一種可能的實(shí)現(xiàn)方式，調(diào)整單元調(diào)整圖像傳感器的鏡頭位置進(jìn)行對(duì)焦的方式包括對(duì)比度檢測(cè)法、相位差檢測(cè)法和混合對(duì)焦模式中的至少一種。

34、作為第二方面的一種可能的實(shí)現(xiàn)方式，上述裝置還包括控制單元，控制單元用于：

35、基于注視區(qū)域控制圖像傳感器進(jìn)行對(duì)焦，使得注視區(qū)域清晰成像之后，控制顯示屏中顯示的圖像的景深范圍。

36、作為第二方面的一種可能的實(shí)現(xiàn)方式，控制單元用于：

37、通過(guò)調(diào)整圖像傳感器的鏡頭光圈，控制圖像的景深范圍。

38、本公開(kāi)第三方面提供了一種電子車(chē)載后視鏡，該電子車(chē)載后視鏡包括眼動(dòng)檢測(cè)設(shè)備、顯示屏、處理器和部署于車(chē)輛后方、側(cè)方和下方的多個(gè)圖像傳感器，其中：

39、眼動(dòng)檢測(cè)設(shè)備設(shè)置于與顯示屏適配的位置，用于獲取駕駛員的眼動(dòng)信息，并將眼動(dòng)信息發(fā)送給處理器；

40、處理器與眼動(dòng)檢測(cè)設(shè)備相連接，用于接收眼動(dòng)信息；并根據(jù)眼動(dòng)信息，確定駕駛員在電子車(chē)載后視鏡的顯示屏上的注視區(qū)域；

41、處理器還與圖像傳感器相連接，用于基于注視區(qū)域控制圖像傳感器進(jìn)行對(duì)焦，使得注視區(qū)域清晰成像。

42、本公開(kāi)第四方面提供了一種車(chē)輛，該車(chē)輛包括如上述第三方面任一項(xiàng)所述的電子車(chē)載后視鏡，電子車(chē)載后視鏡作為左側(cè)外后視鏡、右側(cè)外后視鏡和車(chē)內(nèi)中央后視鏡中的至少一種。

43、本公開(kāi)第五方面提供了一種電子設(shè)備，包括：處理器，以及與處理器通信連接的存儲(chǔ)器，還包括上述第二方面任一項(xiàng)所述的對(duì)焦裝置；

44、存儲(chǔ)器，用于存儲(chǔ)計(jì)算機(jī)執(zhí)行指令；

45、處理器，用于執(zhí)行存儲(chǔ)器中存儲(chǔ)的計(jì)算機(jī)執(zhí)行指令，以控制基于眼動(dòng)監(jiān)測(cè)信息的對(duì)焦裝置實(shí)現(xiàn)上述第一方面任一項(xiàng)所述的方法。

46、本公開(kāi)第六方面提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序指令，該計(jì)算機(jī)程序指令被處理器執(zhí)行時(shí)，實(shí)現(xiàn)上述第一方面任一項(xiàng)所述的方法。

47、本公開(kāi)第七方面提供了一種計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)上述第一方面任一所述的方法。

48、下面通過(guò)附圖和實(shí)施例，對(duì)本公開(kāi)的技術(shù)方案做進(jìn)一步的詳細(xì)描述。

技術(shù)特征：

1.一種基于眼動(dòng)監(jiān)測(cè)信息的對(duì)焦方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述接收眼動(dòng)檢測(cè)設(shè)備獲取到的駕駛員的眼動(dòng)信息，包括：

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述眼動(dòng)檢測(cè)設(shè)備和所述顯示屏設(shè)置于電子車(chē)載后視鏡中；所述圖像傳感器部署于車(chē)輛后方、側(cè)方或下方。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述眼動(dòng)信息包括所述駕駛員的眼睛以及角膜反射點(diǎn)的圖像信息。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述根據(jù)所述眼動(dòng)信息，確定所述駕駛員在顯示屏上的注視區(qū)域，包括：

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述控制圖像傳感器進(jìn)行對(duì)焦，包括：

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述調(diào)整所述圖像傳感器的鏡頭位置進(jìn)行對(duì)焦的方式包括對(duì)比度檢測(cè)法、相位差檢測(cè)法和混合對(duì)焦模式中的至少一種。

8.根據(jù)權(quán)利要求1至7中任一項(xiàng)所述的方法，其特征在于，所述基于所述注視區(qū)域控制圖像傳感器進(jìn)行對(duì)焦，使得所述注視區(qū)域清晰成像之后，所述方法還包括：

9.根據(jù)權(quán)利要求8所述的方法，其特征在于，所述控制所述顯示屏中顯示的圖像的景深范圍，包括：

10.一種基于眼動(dòng)監(jiān)測(cè)信息的對(duì)焦裝置，其特征在于，包括：

11.一種電子車(chē)載后視鏡，其特征在于，所述電子車(chē)載后視鏡包括眼動(dòng)檢測(cè)設(shè)備、顯示屏、處理器和部署于車(chē)輛后方、側(cè)方和下方的多個(gè)圖像傳感器，其中：

12.一種車(chē)輛，其特征在于，所述車(chē)輛部署有至少一個(gè)如權(quán)利要求11所述的電子車(chē)載后視鏡，所述電子車(chē)載后視鏡作為左側(cè)外后視鏡、右側(cè)外后視鏡和車(chē)內(nèi)中央后視鏡中的至少一種。

13.一種電子設(shè)備，其特征在于，包括：處理器，以及與所述處理器通信連接的存儲(chǔ)器，還包括權(quán)利要求10所述的對(duì)焦裝置；

14.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中存儲(chǔ)有計(jì)算機(jī)執(zhí)行指令，當(dāng)所述指令被執(zhí)行時(shí)，使得計(jì)算機(jī)執(zhí)行權(quán)利要求1-9任一所述的方法。

15.一種計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)程序，其中，所述計(jì)算機(jī)程序在被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1-9任一所述的方法。

技術(shù)總結(jié)
本公開(kāi)實(shí)施例公開(kāi)了一種基于眼動(dòng)監(jiān)測(cè)信息的對(duì)焦方法、裝置和電子車(chē)載后視鏡?；谘蹌?dòng)監(jiān)測(cè)信息的對(duì)焦方法包括：接收眼動(dòng)檢測(cè)設(shè)備獲取到的駕駛員的眼動(dòng)信息；根據(jù)眼動(dòng)信息，確定駕駛員在顯示屏上的注視區(qū)域；基于注視區(qū)域控制圖像傳感器進(jìn)行對(duì)焦，使得注視區(qū)域清晰成像。本公開(kāi)實(shí)施例可以隨著駕駛員注意力的改變而實(shí)時(shí)調(diào)整顯示屏上的圖像顯示效果，使得駕駛員能夠看到清晰的圖像，提升駕駛員的舒適度和行車(chē)安全性。

技術(shù)研發(fā)人員：李曉強(qiáng),侯金亭
受保護(hù)的技術(shù)使用者：視達(dá)未來(lái)科技（北京）有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2025/1/9