(12)發(fā)明專利(10)授權(quán)公告號(hào)CN120111208B(65)同一申請(qǐng)的已公布的文獻(xiàn)號(hào)(73)專利權(quán)人南昌虛擬現(xiàn)實(shí)研究院股份有限公司地址330000江西省南昌市紅谷灘區(qū)九龍大道5335號(hào)虛擬現(xiàn)實(shí)科創(chuàng)城F01-3#辦公樓101室(72)發(fā)明人魏敏晨周建國(guó)H04N13/122(2018.01)H04N13/117(2018.01)H04N13/133(2018.01)HO4N13/00(2018.01)(74)專利代理機(jī)構(gòu)北京清控智云知識(shí)產(chǎn)權(quán)代理專利代理師李少云利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法本發(fā)明涉及圖像數(shù)據(jù)處理技術(shù)領(lǐng)域，具體涉及一種利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法。方法包括：獲取VR設(shè)備當(dāng)前幀的雙目圖像和用戶注視行為特征；用戶注視行為特征包括注視區(qū)域和注視點(diǎn)；根據(jù)雙目圖像的視差圖，確定注視區(qū)域的視差顯著性；根據(jù)注視點(diǎn)在雙目圖像中對(duì)應(yīng)點(diǎn)的亮度階，確定初始亮度區(qū)間和雙目亮度差異程度；根據(jù)視差顯著性、雙目亮度差異程度和用戶注視行為特征，確定亮度階調(diào)整權(quán)重；根據(jù)亮度階調(diào)整權(quán)重，對(duì)初始亮度區(qū)間進(jìn)行調(diào)整，得到調(diào)整后的亮度區(qū)間；根據(jù)調(diào)整后的亮度區(qū)間，對(duì)雙目圖像的亮度進(jìn)行調(diào)整，基于調(diào)整后的雙目圖像得到VR設(shè)備當(dāng)前輸出的雙目根據(jù)注視點(diǎn)在雙目圖像中對(duì)應(yīng)點(diǎn)的亮度階，確定初始亮度亮度差異程度區(qū)間根據(jù)調(diào)整后的亮度區(qū)間，對(duì)雙目圖像的亮度進(jìn)行調(diào)整，基雙目圖像得到VR設(shè)備當(dāng)前輸出的雙目圖像21.一種利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，其特征在于，所述方法包獲取VR設(shè)備當(dāng)前幀的雙目圖像和用戶注視行為特征；所述用戶注視行為特征包括注視區(qū)域和注視點(diǎn)；根據(jù)所述雙目圖像的視差圖，確定所述注視區(qū)域的視差顯著性；根據(jù)所述注視點(diǎn)在所述雙目圖像中對(duì)應(yīng)點(diǎn)的亮度階，確定初始亮度區(qū)間和雙目亮度差異程度；根據(jù)所述視差顯著性、所述雙目亮度差異程度和所述用戶注視行為特征，確定亮度階調(diào)整權(quán)重；根據(jù)所述亮度階調(diào)整權(quán)重，對(duì)所述初始亮度區(qū)間進(jìn)行調(diào)整，得到調(diào)整后的亮度區(qū)間；根據(jù)所述調(diào)整后的亮度區(qū)間，對(duì)所述雙目圖像的亮度進(jìn)行調(diào)整，基于調(diào)整后的雙目圖像得到所述VR設(shè)備當(dāng)前輸出的雙目圖像。2.根據(jù)權(quán)利要求1所述的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，其特征計(jì)算所述雙目圖像的視差圖；計(jì)算所述注視區(qū)域在所述視差圖中對(duì)應(yīng)的視差總值，并計(jì)算所述視差圖全圖的視差總根據(jù)所述注視區(qū)域?qū)?yīng)的視差總值與所述全圖的視差總值的比值，確定所述注視區(qū)域的視差顯著性。3.根據(jù)權(quán)利要求1所述的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，其特征在于，所述根據(jù)所述注視點(diǎn)在所述雙目圖像中對(duì)應(yīng)點(diǎn)的亮度階，確定初始亮度區(qū)間和雙目將所述雙目圖像中一目圖像中的所述注視點(diǎn)通過所述視差圖對(duì)應(yīng)到另一目圖像中的相應(yīng)點(diǎn)；將所述一目圖像中所述注視點(diǎn)的亮度階和所述另一目圖像中所述相應(yīng)點(diǎn)的亮度階分根據(jù)所述初始亮度區(qū)間的階數(shù)跨度與全圖亮度階數(shù)的比值，確定雙目亮度差異程度。4.根據(jù)權(quán)利要求1所述的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，其特征在于，所述根據(jù)所述視差顯著性、所述雙目亮度差異程度和所述用戶注視行為特征，確定亮根據(jù)各幀雙目圖像分別對(duì)應(yīng)的用戶注視行為特征，確定各幀雙目圖像的初始渲染權(quán)計(jì)算各幀雙目圖像的細(xì)節(jié)留存度，根據(jù)所述細(xì)節(jié)留存度的變化，確定細(xì)節(jié)展示幀段；根據(jù)所述細(xì)節(jié)展示幀段中各幀雙目圖像的所述初始渲染權(quán)重組成的兩個(gè)序列的交點(diǎn)，確定交點(diǎn)雙目圖像；根據(jù)所述視差顯著性、所述雙目亮度差異程度、以及所述交點(diǎn)雙目圖像的所述初始渲5.根據(jù)權(quán)利要求4所述的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，其特征在于，所述根據(jù)各幀雙目圖像分別對(duì)應(yīng)的用戶注視行為特征，確定各幀雙目圖像的初始渲3分別針對(duì)每幀雙目圖像中每一目圖像，根據(jù)相應(yīng)的用戶注視行為特征，確定視線變動(dòng)程度、以及視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異；根據(jù)注視區(qū)域內(nèi)的色階數(shù)量與所述一目圖像中的色階總數(shù)量之間的比值，確定注視區(qū)域色階占比；根據(jù)所述視線變動(dòng)程度、所述視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異、以及所述注視區(qū)域色階占比，確定所述一目圖像的初始渲染權(quán)重。6.根據(jù)權(quán)利要求5所述的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，其特征在于，所述用戶注視行為特征還包括設(shè)備偏轉(zhuǎn)角度；所述根據(jù)相應(yīng)的用戶注視行為特征，確定視線變動(dòng)程度、以及視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的確定當(dāng)前幀與前一幀分別對(duì)應(yīng)的偏轉(zhuǎn)向量；所述偏轉(zhuǎn)向量是根據(jù)相鄰兩幀的注視點(diǎn)的變化確定的；根據(jù)當(dāng)前幀對(duì)應(yīng)的所述偏轉(zhuǎn)向量，確定視線變動(dòng)距離，根據(jù)所述視線變動(dòng)距離與所述注視區(qū)域的直徑之間的比值，確定視線變動(dòng)程度；根據(jù)所述當(dāng)前幀與前一幀分別對(duì)應(yīng)的所述偏轉(zhuǎn)向量之間的夾角，確定視線偏轉(zhuǎn)角度；根據(jù)所述視線偏轉(zhuǎn)角度和所述設(shè)備偏轉(zhuǎn)角度之間的差異，確定視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異。7.根據(jù)權(quán)利要求6所述的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，其特征在于，所述VR設(shè)備中包含眼動(dòng)追蹤模塊和慣所述眼動(dòng)追蹤模塊用于實(shí)時(shí)捕捉所述注視區(qū)域；所述慣性測(cè)量單元用于確定所述設(shè)備偏轉(zhuǎn)角度。8.根據(jù)權(quán)利要求4所述的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，其特征分別針對(duì)每幀雙目圖像中每一目圖像，確定所述一目圖像在LAB顏色空間中每個(gè)通道下的色階直方圖；根據(jù)所述色階直方圖中色階的分離程度，確定所述一目圖像在每個(gè)通道下的單通道細(xì)節(jié)留存度；根據(jù)每個(gè)通道下的所述單通道細(xì)節(jié)留存度的總和，確定所述一目圖像的細(xì)節(jié)留存度。9.根據(jù)權(quán)利要求4所述的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，其特征根據(jù)各幀雙目圖像的細(xì)節(jié)留存度，計(jì)算所述細(xì)節(jié)留存度的變化率；從所述變化率的正負(fù)號(hào)發(fā)生變化的幀位中確定離當(dāng)前幀最近的目標(biāo)幀位，將從所述目標(biāo)幀位到當(dāng)前幀的幀段確定為細(xì)節(jié)展示幀段。10.根據(jù)權(quán)利要求1至9中任一項(xiàng)所述的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，其特征在于，所述根據(jù)所述亮度階調(diào)整權(quán)重，對(duì)所述初始亮度區(qū)間進(jìn)行調(diào)整，得到調(diào)將所述亮度階調(diào)整權(quán)重作為所述注視區(qū)域?qū)?yīng)的調(diào)整權(quán)重；從所述注視區(qū)域向外迭代地?cái)U(kuò)展區(qū)域，確定每次擴(kuò)展出的區(qū)域?qū)?yīng)的調(diào)整權(quán)重；所述4擴(kuò)展出的區(qū)域?qū)?yīng)的調(diào)整權(quán)重，在所述亮度階調(diào)整權(quán)重的基礎(chǔ)上減少的程度與迭代次數(shù)呈正相關(guān)；根據(jù)各個(gè)區(qū)域?qū)?yīng)的調(diào)整權(quán)重，對(duì)所述初始亮度區(qū)間進(jìn)行調(diào)整，得到各個(gè)區(qū)域?qū)?yīng)的調(diào)整后的亮度區(qū)間。5技術(shù)領(lǐng)域[0001]本發(fā)明涉及圖像數(shù)據(jù)處理技術(shù)領(lǐng)域，具體涉及一種利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法。背景技術(shù)[0002]目前應(yīng)用于傳統(tǒng)顯示器的顯示技術(shù)通常通過提升位深(bitdepth)來提升顯示細(xì)節(jié)，例如，近幾年出現(xiàn)的10bit顯示技術(shù)比傳統(tǒng)8bit顯示技術(shù)增加顯示細(xì)節(jié)，包括亮度和色度細(xì)節(jié)。但這樣的提升方法存在三大缺陷：1、器件的顏色管理以及圖片的處理都需按照10bit進(jìn)行，這提升了處理時(shí)間和資源需求；2、所有的圖片和影片都需要使用10bit進(jìn)行編碼，這增加了文件的存儲(chǔ)容量；3、位深效果受人眼機(jī)理限制(韋伯定律),在低亮度下位深收益較小。[0003]針對(duì)上述問題，目前一般是按照固定幅度逐幀地調(diào)整注視點(diǎn)周邊像素點(diǎn)的顏色值或亮度值，從而增加顯示細(xì)節(jié)。然而，VR(Virtu由于隧穿效應(yīng)對(duì)于注視點(diǎn)鄰近位置的注意度顯著高于其余位置的特點(diǎn)，對(duì)注視點(diǎn)鄰近位置的調(diào)整投入較高，因此，在用戶轉(zhuǎn)移注視點(diǎn)后，顯示內(nèi)容的細(xì)節(jié)需要調(diào)整，容易導(dǎo)致顯示延遲的問題。發(fā)明內(nèi)容[0004]為了解決在保證顯示細(xì)節(jié)質(zhì)量的同時(shí)避免顯示延遲的技術(shù)問題，本發(fā)明的目的在于提供一種利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所采用的技術(shù)方案具體如[0005]本發(fā)明提供一種利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所述方法包[0006]獲取VR設(shè)備當(dāng)前幀的雙目圖像和用戶注視行為特征；所述用戶注視行為特征包括注視區(qū)域和注視點(diǎn)；[0007]根據(jù)所述雙目圖像的視差圖，確定所述注視區(qū)域的視差顯著性；[0008]根據(jù)所述注視點(diǎn)在所述雙目圖像中對(duì)應(yīng)點(diǎn)的亮度階，確定初始亮度區(qū)間和雙目亮度差異程度；[0009]根據(jù)所述視差顯著性、所述雙目亮度差異程度和所述用戶注視行為特征，確定亮度階調(diào)整權(quán)重；[0010]根據(jù)所述亮度階調(diào)整權(quán)重，對(duì)所述初始亮度區(qū)間進(jìn)行調(diào)整，得到調(diào)整后的亮度區(qū)[0011]根據(jù)所述調(diào)整后的亮度區(qū)間，對(duì)所述雙目圖像的亮度進(jìn)行調(diào)整，基于調(diào)整后的雙目圖像得到所述VR設(shè)備當(dāng)前輸出的雙目圖像。[0012]根據(jù)本發(fā)明提供的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所述根據(jù)所述雙目圖像的視差圖，確定所述注視區(qū)域的視差顯著性，包括：6[0013]計(jì)算所述雙目圖像的視差圖；[0014]計(jì)算所述注視區(qū)域在所述視差圖中對(duì)應(yīng)的視差總值，并計(jì)算所述視差圖全圖的視差總值；[0015]根據(jù)所述注視區(qū)域?qū)?yīng)的視差總值與所述全圖的視差總值的比值，確定所述注視區(qū)域的視差顯著性。[0016]根據(jù)本發(fā)明提供的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所述根據(jù)所述注視點(diǎn)在所述雙目圖像中對(duì)應(yīng)點(diǎn)的亮度階，確定初始亮度區(qū)間和雙目亮度差異程度，[0017]將所述雙目圖像中一目圖像中的所述注視點(diǎn)通過所述視差圖對(duì)應(yīng)到另一目圖像中的相應(yīng)點(diǎn)；[0018]將所述一目圖像中所述注視點(diǎn)的亮度階和所述另一目圖像中所述相應(yīng)點(diǎn)的亮度階分別作為區(qū)間端點(diǎn)，確定初始亮度區(qū)間；[0019]根據(jù)所述初始亮度區(qū)間的階數(shù)跨度與全圖亮度階數(shù)的比值，確定雙目亮度差異程度。[0020]根據(jù)本發(fā)明提供的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所述根據(jù)所述視差顯著性、所述雙目亮度差異程度和所述用戶注視行為特征，確定亮度階調(diào)整權(quán)重，[0021]根據(jù)各幀雙目圖像分別對(duì)應(yīng)的用戶注視行為特征，確定各幀雙目圖像的初始渲染[0022]計(jì)算各幀雙目圖像的細(xì)節(jié)留存度，根據(jù)所述細(xì)節(jié)留存度的變化，確定細(xì)節(jié)展示幀[0023]根據(jù)所述細(xì)節(jié)展示幀段中各幀雙目圖像的所述初始渲染權(quán)重組成的兩個(gè)序列的[0024]根據(jù)所述視差顯著性、所述雙目亮度差異程度、以及所述交點(diǎn)雙目圖像的所述初始渲染權(quán)重的差異，確定亮度階調(diào)整權(quán)重。[0025]根據(jù)本發(fā)明提供的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所述根據(jù)各幀雙目圖像分別對(duì)應(yīng)的用戶注視行為特征，確定各幀雙目圖像的初始渲染權(quán)重，包括：[0026]分別針對(duì)每幀雙目圖像中每一目圖像，根據(jù)相應(yīng)的用戶注視行為特征，確定視線變動(dòng)程度、以及視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異；[0027]根據(jù)注視區(qū)域內(nèi)的色階數(shù)量與所述一目圖像中的色階總數(shù)量之間的比值，確定注視區(qū)域色階占比；[0028]根據(jù)所述視線變動(dòng)程度、所述視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異、以及所述注視區(qū)域色階占比，確定所述一目圖像的初始渲染權(quán)重。[0029]根據(jù)本發(fā)明提供的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所述用戶注視行為特征還包括設(shè)備偏轉(zhuǎn)角度；[0030]所述根據(jù)相應(yīng)的用戶注視行為特征，確定視線變動(dòng)程度、以及視線偏轉(zhuǎn)與設(shè)備偏[0031]確定當(dāng)前幀與前一幀分別對(duì)應(yīng)的偏轉(zhuǎn)向量；所述偏轉(zhuǎn)向量是根據(jù)相鄰兩幀的注視點(diǎn)的變化確定的；7[0032]根據(jù)當(dāng)前幀對(duì)應(yīng)的所述偏轉(zhuǎn)向量，確定視線變動(dòng)距離，根據(jù)所述視線變動(dòng)距離與所述注視區(qū)域的直徑之間的比值，確定視線變動(dòng)程度；[0033]根據(jù)所述當(dāng)前幀與前一幀分別對(duì)應(yīng)的所述偏轉(zhuǎn)向量之間的夾角，確定視線偏轉(zhuǎn)角[0034]根據(jù)所述視線偏轉(zhuǎn)角度和所述設(shè)備偏轉(zhuǎn)角度之間的差異，確定視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異。[0035]根據(jù)本發(fā)明提供的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所述VR設(shè)備中包含眼動(dòng)追蹤模塊和慣性測(cè)量單元；[0036]所述眼動(dòng)追蹤模塊用于實(shí)時(shí)捕捉所述注視區(qū)域；[0037]所述慣性測(cè)量單元用于確定所述設(shè)備偏轉(zhuǎn)角度。[0038]根據(jù)本發(fā)明提供的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所述計(jì)算[0039]分別針對(duì)每幀雙目圖像中每一目圖像，確定所述一目圖像在LAB顏色空間中每個(gè)通道下的色階直方圖；[0040]根據(jù)所述色階直方圖中色階的分離程度，確定所述一目圖像在每個(gè)通道下的單通道細(xì)節(jié)留存度；[0041]根據(jù)每個(gè)通道下的所述單通道細(xì)節(jié)留存度的總和，確定所述一目圖像的細(xì)節(jié)留存度。[0042]根據(jù)本發(fā)明提供的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所述根據(jù)[0043]根據(jù)各幀雙目圖像的細(xì)節(jié)留存度，計(jì)算所述細(xì)節(jié)留存度的變化率；[0044]從所述變化率的正負(fù)號(hào)發(fā)生變化的幀位中確定離當(dāng)前幀最近的目標(biāo)幀位，將從所述目標(biāo)幀位到當(dāng)前幀的幀段確定為細(xì)節(jié)展示幀段。[0045]根據(jù)本發(fā)明提供的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法，所述根據(jù)所述亮度階調(diào)整權(quán)重，對(duì)所述初始亮度區(qū)間進(jìn)行調(diào)[0046]將所述亮度階調(diào)整權(quán)重作為所述注視區(qū)域?qū)?yīng)的調(diào)整權(quán)重；[0047]從所述注視區(qū)域向外迭代地?cái)U(kuò)展區(qū)域，確定每次擴(kuò)展出的區(qū)域?qū)?yīng)的調(diào)整權(quán)重；所述擴(kuò)展出的區(qū)域?qū)?yīng)的調(diào)整權(quán)重，在所述亮度階調(diào)整權(quán)重的基礎(chǔ)上減少的程度與迭代次數(shù)呈正相關(guān)；[0048]根據(jù)各個(gè)區(qū)域?qū)?yīng)的調(diào)整權(quán)重，對(duì)所述初始亮度區(qū)間進(jìn)行調(diào)整，得到各個(gè)區(qū)域?qū)?yīng)的調(diào)整后的亮度區(qū)間。[0049]本發(fā)明具有如下有益效果：[0050]通過根據(jù)當(dāng)前幀的雙目圖像的視差圖，確定注視區(qū)域的視差顯著性，能夠準(zhǔn)確評(píng)估注視區(qū)域內(nèi)存在的顯示細(xì)節(jié)以及匹配的失真情況，根據(jù)注視點(diǎn)在雙目圖像中對(duì)應(yīng)點(diǎn)的亮度階，確定初始亮度區(qū)間和雙目亮度差異程度，能夠準(zhǔn)確衡量雙目圖像的亮度差異，然后根據(jù)視差顯著性、雙目亮度差異程度和用戶注視行為特征，確定亮度階調(diào)整權(quán)重，能夠結(jié)合注視區(qū)域內(nèi)存在的顯示細(xì)節(jié)以及匹配的失真情況、雙目圖像的亮度差異和用戶注視情況動(dòng)態(tài)地確定亮度階調(diào)整權(quán)重，動(dòng)態(tài)決定哪些區(qū)域優(yōu)先渲染，然后根據(jù)亮度階調(diào)整權(quán)重，對(duì)初始亮度區(qū)間進(jìn)行調(diào)整，得到調(diào)整后的亮度區(qū)間，根據(jù)調(diào)整后的亮度區(qū)間，對(duì)雙目圖像的亮度進(jìn)行8調(diào)整，基于調(diào)整后的雙目圖像得到VR設(shè)備當(dāng)前輸出的雙目圖像，避免了按照固定幅度調(diào)整注視點(diǎn)周邊像素點(diǎn)在用戶轉(zhuǎn)移注視點(diǎn)后容易導(dǎo)致顯示延遲的問題，保證了顯示細(xì)節(jié)質(zhì)量。附圖說明[0051]為了更清楚地說明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案和優(yōu)點(diǎn)，下面將對(duì)實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡(jiǎn)單的介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對(duì)于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動(dòng)的前提下，還可以根據(jù)這些附圖獲得其它附圖。[0052]圖1為本發(fā)明一個(gè)實(shí)施例所提供的一種利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法的流程示意圖。具體實(shí)施方式[0053]為了更進(jìn)一步闡述本發(fā)明為達(dá)成預(yù)定發(fā)明目的所采取的技術(shù)手段及功效，以下結(jié)合附圖及較佳實(shí)施例，對(duì)依據(jù)本發(fā)明提出的一種利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)征、結(jié)構(gòu)或特點(diǎn)可由任何合適形式組合。[0054]除非另有定義，本文所使用的所有的技術(shù)和科學(xué)術(shù)語與屬于本發(fā)明的技術(shù)領(lǐng)域的技術(shù)人員通常理解的含義相同。[0055]下面結(jié)合附圖具體地說明本發(fā)明所提供的一種利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法的具體方案。[0056]請(qǐng)參閱圖1,其示出了本發(fā)明一個(gè)實(shí)施例提供的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法的流程示意圖，包括如下步驟：[0057]步驟101,獲取VR設(shè)備當(dāng)前幀的雙目圖像和用戶注視行為特征；用戶注視行為特征包括注視區(qū)域和注視點(diǎn)。[0059]在一個(gè)實(shí)施例中，用戶注視行為特征除了包括注視區(qū)域和注視點(diǎn)之外，還可以包括設(shè)備偏轉(zhuǎn)角度。其中，注視點(diǎn)可以是注視區(qū)域的中心點(diǎn)。設(shè)備偏轉(zhuǎn)角度是指VR設(shè)備的偏轉(zhuǎn)角度。[0060]在一個(gè)實(shí)施例中，VR設(shè)備可以包含眼動(dòng)追蹤模塊、慣性測(cè)量單元、GPU(GraphicsProcessingUnit,圖形處理器)和顯示屏。其中，眼動(dòng)追蹤模塊可以是集成式的高精度眼動(dòng)追蹤模塊，例如：瞳孔中心角膜反射(PCCR,Press器，用于實(shí)時(shí)捕捉注視區(qū)域。慣性測(cè)量單元(IMU,InertialMeasurementUnit),用于測(cè)量VR設(shè)備的實(shí)時(shí)的姿態(tài)及移動(dòng)方向，從而可以用于獲取設(shè)備偏轉(zhuǎn)角度。慣性測(cè)量單元可以集支持。GPU以連續(xù)幀的方式得到幀位次序?qū)R的左眼圖像和右眼圖像，并執(zhí)行本發(fā)明各實(shí)施例中的利用雙目差別機(jī)制提升VR設(shè)備細(xì)節(jié)顯示質(zhì)量的方法。顯示屏可以是高分辨率顯示屏，至少支持雙眼4K分辨率，支持10bit及以上色深的OLED(OrganicLight-EmittingDiode,有機(jī)發(fā)光二極管)或Micro-LED(Micro-Light-EmittingDiode,微發(fā)光二極管)屏9幕，確保高動(dòng)態(tài)范圍(HDR,HighDynamicRangeImaging)內(nèi)容的準(zhǔn)確呈現(xiàn)。[0061]步驟102,根據(jù)雙目圖像的視差圖，確定注視區(qū)域的視差顯著性。[0062]其中，視差圖用于反映左眼圖像和右眼圖像之間的像素偏移情況。視差顯著性用于衡量注視區(qū)域的視差顯著程度。[0063]在一個(gè)實(shí)施例中，可以對(duì)雙目圖像以NCC(NormalizedCross-Correlation,歸一化互相關(guān))方式進(jìn)行匹配，得到視差圖。[0064]在一個(gè)實(shí)施例中，可以計(jì)算注視區(qū)域在視差圖中對(duì)應(yīng)的視差總值，并計(jì)算視差圖全圖的視差總值，根據(jù)注視區(qū)域?qū)?yīng)的視差總值和全圖的視差總值，確定注視區(qū)域的視差[0065]步驟103,根據(jù)注視點(diǎn)在雙目圖像中對(duì)應(yīng)點(diǎn)的亮度階，確定初始亮度區(qū)間和雙目亮度差異程度。[0066]其中，雙目亮度差異程度，用于衡量注視點(diǎn)在雙目圖像中對(duì)應(yīng)點(diǎn)的亮度階之間的差異大小。[0067]在一個(gè)實(shí)施例中，可以將注視點(diǎn)在雙目圖像中對(duì)應(yīng)點(diǎn)的亮度階分別作為區(qū)間端[0068]在一個(gè)實(shí)施例中，可以根據(jù)初始亮度區(qū)間的階數(shù)跨度和全圖亮度階數(shù)，確定雙目亮度差異程度。[0069]步驟104,根據(jù)視差顯著性、雙目亮度差異程度和用戶注視行為特征，確定亮度階調(diào)整權(quán)重。[0070]在一個(gè)實(shí)施例中，可以根據(jù)用戶注視行為特征確定各幀雙目圖像的初始渲染權(quán)重，根據(jù)各幀圖像的初始渲染權(quán)重確定交點(diǎn)雙目圖像，確定交點(diǎn)雙目圖像的初始渲染權(quán)重[0071]在一個(gè)實(shí)施例中，亮度階調(diào)整權(quán)重與視差顯著性呈正相關(guān)。亮度階調(diào)整權(quán)重與雙目亮度差異程度呈正相關(guān)。亮度階調(diào)整權(quán)重與交點(diǎn)雙目圖像的初始渲染權(quán)重的差異呈正相關(guān)。[0072]步驟105,根據(jù)亮度階調(diào)整權(quán)重，對(duì)初始亮度區(qū)間進(jìn)行調(diào)整，得到調(diào)整后的亮度區(qū)[0073]在一個(gè)實(shí)施例中，計(jì)算1減去亮度階調(diào)整權(quán)重的值，可以將初始亮度區(qū)間的右端點(diǎn)乘以亮度階調(diào)整權(quán)重，將初始亮度區(qū)間的左端點(diǎn)乘以1減去亮度階調(diào)整權(quán)重的值，得到調(diào)整后的亮度區(qū)間。[0074]在一個(gè)實(shí)施例中，可以將亮度階調(diào)整權(quán)重作為注視區(qū)域?qū)?yīng)的調(diào)整權(quán)重，在亮度階調(diào)整權(quán)重的基礎(chǔ)上進(jìn)行減小得到注視區(qū)域以外的區(qū)域?qū)?yīng)的調(diào)整權(quán)重，根據(jù)各個(gè)區(qū)域分別對(duì)應(yīng)的調(diào)整權(quán)重，對(duì)初始亮度區(qū)間進(jìn)行調(diào)整，得到各個(gè)區(qū)域分別對(duì)應(yīng)的調(diào)整后的亮度區(qū)[0075]步驟106,根據(jù)調(diào)整后的亮度區(qū)間，對(duì)雙目圖像的亮度進(jìn)行調(diào)整，基于調(diào)整后的雙目圖像得到VR設(shè)備當(dāng)前輸出的雙目圖像。[0076]在一個(gè)實(shí)施例中，根據(jù)調(diào)整后的亮度區(qū)間，對(duì)雙目圖像的亮度進(jìn)行調(diào)整，主要視線圖像提升亮度，次要視線圖像降低亮度。[0077]在一個(gè)實(shí)施例中，可以計(jì)算雙目圖像的細(xì)節(jié)留存度，對(duì)比雙目圖像中左眼圖像和右眼圖像分別對(duì)應(yīng)的細(xì)節(jié)留存度的大小，將細(xì)節(jié)留存度大的左眼圖像/右眼圖像作為主要以及匹配的失真情況，根據(jù)注視點(diǎn)在雙目圖像中亮度階數(shù)進(jìn)行調(diào)整，使其在細(xì)節(jié)增強(qiáng)的同時(shí)避免失真。[0091]在一個(gè)實(shí)施例中，根據(jù)視差顯著性、雙目亮度差異程度和用戶注視行為特征，確定亮度階調(diào)整權(quán)重，包括：根據(jù)各幀雙目圖像分別對(duì)應(yīng)的用戶注視行為特征，確定各幀雙目圖像的初始渲染權(quán)重；計(jì)算各幀雙目圖像的細(xì)節(jié)留存度，根據(jù)細(xì)節(jié)留存度的變化，確定細(xì)節(jié)展示幀段；根據(jù)細(xì)節(jié)展示幀段中各幀雙目圖像的初始渲染權(quán)重組成的兩個(gè)序列的交點(diǎn)，確定交點(diǎn)雙目圖像；根據(jù)視差顯著性、雙目亮度差異程度、以及交點(diǎn)雙目圖像的初始渲染權(quán)重的[0092]其中，細(xì)節(jié)展示幀段，是從上一次細(xì)節(jié)留存度的變化方向發(fā)生突變對(duì)應(yīng)的目標(biāo)幀位到當(dāng)前幀的幀段。[0093]在一個(gè)實(shí)施例中，細(xì)節(jié)展示幀段中各幀左眼圖像和各幀右眼圖像的初始渲染權(quán)重組成兩個(gè)初始渲染權(quán)重序列，從兩個(gè)初始渲染權(quán)重序列的交點(diǎn)中取最接近當(dāng)前幀的目標(biāo)交點(diǎn)，將目標(biāo)交點(diǎn)對(duì)應(yīng)的雙目圖像確定為交點(diǎn)雙目圖像。[0094]在一個(gè)實(shí)施例中，可以根據(jù)如下公式計(jì)算亮度階調(diào)整權(quán)重：表示交點(diǎn)雙目圖像中另外一目圖像的初始渲染權(quán)重。Zp-Zp"表示交點(diǎn)雙目圖像的初始渲染權(quán)重的差異，反映實(shí)際注視位置的圖像顯示細(xì)節(jié)的偏差。[0097]上述實(shí)施例中，由于用戶視線變動(dòng)劇烈的情況往往是顯示素材對(duì)用戶的視線產(chǎn)生足夠大程度的吸引之后，用戶注視的方向與素材顯示的內(nèi)容產(chǎn)生互動(dòng)效果，所以通過初始渲染權(quán)重對(duì)用戶的視角移動(dòng)環(huán)境進(jìn)行評(píng)估。對(duì)用戶初始渲染權(quán)重的變異時(shí)段進(jìn)行提取，通過視差顯著性所表現(xiàn)的紋理復(fù)雜度結(jié)合雙目亮度差異程度，隨著初始渲染權(quán)重所代表的圖像的用戶視覺視線變動(dòng)方向進(jìn)行限制范圍的協(xié)同設(shè)定，用以對(duì)亮度調(diào)整的具體規(guī)模加以限制，能夠確保在影像不失真的情況下輸出高質(zhì)量的顯示細(xì)節(jié)。[0098]在一個(gè)實(shí)施例中，根據(jù)各幀雙目圖像分別對(duì)應(yīng)的用戶注視行為特征，確定各幀雙目圖像的初始渲染權(quán)重，包括：分別針對(duì)每幀雙目圖像中每一目圖像，根據(jù)相應(yīng)的用戶注視行為特征，確定視線變動(dòng)程度、以及視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異；根據(jù)注視區(qū)域內(nèi)的色階數(shù)量與一目圖像中的色階總數(shù)量之間的比值，確定注視區(qū)域色階占比；根據(jù)視線變動(dòng)程度、視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異、以及注視區(qū)域色階占比，確定一目圖像的初始渲染權(quán)重。[0099]在一個(gè)實(shí)施例中，初始渲染權(quán)重與視線變動(dòng)程度呈正相關(guān)。初始渲染權(quán)重與視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異呈負(fù)相關(guān)。初始渲染權(quán)重與注視區(qū)域色階占比呈負(fù)相關(guān)。[0100]在一個(gè)實(shí)施例中，可以確定視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異的余弦值，根據(jù)視線變動(dòng)程度與余弦值的乘積除以注視區(qū)域色階占比，確定初始渲染權(quán)重。[0101]在一個(gè)實(shí)施例中，可以根據(jù)如下公式計(jì)算初始渲染權(quán)重：[0104]在一個(gè)實(shí)施例中，可以根據(jù)如下公式計(jì)算注視區(qū)域色階占比：示一目圖像中的色階總數(shù)量?？梢岳斫猓⒁晠^(qū)域內(nèi)的色階數(shù)量能夠描述注視區(qū)域內(nèi)的紋理豐富情況，根據(jù)注視區(qū)域內(nèi)的色階數(shù)量與一目圖像中的色階總數(shù)量之間的比值，確定注視區(qū)域色階占比，能夠?qū)ψ⒁朁c(diǎn)是否落在重要紋理區(qū)域進(jìn)行判斷。[0107]上述實(shí)施例中，視線變動(dòng)程度越大，初始渲染權(quán)重需要越高，以滿足用戶視線大幅度變化所產(chǎn)生的幅度調(diào)節(jié)比例。視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異越小，說明用戶觀看行為活躍，初始渲染權(quán)重需要越高，以滿足細(xì)節(jié)顯示的目的。注視區(qū)域色階占比越大，說明注視點(diǎn)落在重要紋理區(qū)域，初始渲染權(quán)重需要越低。因此，根據(jù)視線變動(dòng)程度、視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異、以及注視區(qū)域色階占比，確定一目圖像的初始渲染權(quán)重，能夠自適應(yīng)地優(yōu)[0108]在一個(gè)實(shí)施例中，用戶注視行為特征還包括設(shè)備偏轉(zhuǎn)角度；根據(jù)相應(yīng)的用戶注視行為特征，確定視線變動(dòng)程度、以及視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異，包括：確定當(dāng)前幀與前一幀分別對(duì)應(yīng)的偏轉(zhuǎn)向量；偏轉(zhuǎn)向量是根據(jù)相鄰兩幀的注視點(diǎn)的變化確定的；根據(jù)當(dāng)前幀對(duì)應(yīng)的偏轉(zhuǎn)向量，確定視線變動(dòng)距離，根據(jù)視線變動(dòng)距離與注視區(qū)域的直徑之間的比值，確定視線變動(dòng)程度；根據(jù)當(dāng)前幀與前一幀分別對(duì)應(yīng)的偏轉(zhuǎn)向量之間的夾角，確定視線偏轉(zhuǎn)角度；根據(jù)視線偏轉(zhuǎn)角度和設(shè)備偏轉(zhuǎn)角度之間的差異，確定視線偏轉(zhuǎn)與設(shè)備偏轉(zhuǎn)的角度差異。[0109]在一個(gè)實(shí)施例中，當(dāng)前幀對(duì)應(yīng)偏轉(zhuǎn)向量VPoR是從上一幀的注視點(diǎn)iPoR,f-1指向當(dāng)前幀的注視點(diǎn)iPoR的向量。上一幀對(duì)應(yīng)的偏轉(zhuǎn)向量VPoR,f-1是從上上幀的注視點(diǎn)iPoR,f-2指向上一幀的注視點(diǎn)iPoR,f-1的向量。當(dāng)前幀對(duì)應(yīng)偏轉(zhuǎn)向量VPoR與上一幀對(duì)應(yīng)的偏轉(zhuǎn)向量VPoR,f-1[0110]在一個(gè)實(shí)施例中，可以將當(dāng)前幀對(duì)應(yīng)的偏轉(zhuǎn)向量的模vPoR作為視線變動(dòng)距離。視線變動(dòng)程度可以根據(jù)如下公式計(jì)算：[0113]在一個(gè)實(shí)施例中，設(shè)備偏轉(zhuǎn)角度可以是VR設(shè)備相對(duì)于顯示屏所處平面XoZ的偏轉(zhuǎn)[0114]上述實(shí)施例中，根據(jù)當(dāng)前幀對(duì)應(yīng)的偏轉(zhuǎn)向量，確定視線變動(dòng)距離，根據(jù)視線變動(dòng)距離與注視區(qū)域的直徑之間的比值，確定視線變動(dòng)程度，根據(jù)當(dāng)前幀與前一幀分別對(duì)應(yīng)的偏轉(zhuǎn)向量之間的夾角，確定視線偏轉(zhuǎn)角度，根據(jù)視線偏轉(zhuǎn)角度和設(shè)備偏轉(zhuǎn)角度之間的差異，確(從深綠色到灰色再到亮粉紅色的顏色通道)和B通道(從亮藍(lán)色到灰色再到黃色的顏色通階數(shù)量。ne表示通道E中單個(gè)色階e下的像素點(diǎn)數(shù)量。max(ne)E表示色階像素點(diǎn)數(shù)量最大定離當(dāng)前幀最近的目標(biāo)幀位，將從目標(biāo)幀位到當(dāng)前幀的幀段確定為細(xì)節(jié)展示幀段。[0126]在一個(gè)實(shí)施例中，可以計(jì)算相鄰兩幀的細(xì)節(jié)留存度之間的比值減去1,得到細(xì)節(jié)留存度的變化率。可以用如下公式計(jì)算細(xì)節(jié)留存度的變化率：[0128]其中，P表示細(xì)節(jié)留存度的變化率。sum(X)p表示一目圖像p的細(xì)節(jié)留存度，即一目圖像p在各通道下的單通道細(xì)節(jié)留存度的總和。sum(X)p+1表示下一幀的一目圖像p+1的細(xì)節(jié)留存度，即一目圖像p+1在各通道下的