一種立體視頻舒適度評價方法及裝置與流程

文檔序號:11237006
一種立體視頻舒適度評價方法及裝置與流程

本發明涉及通信領域的視頻技術,尤其涉及一種立體視頻舒適度評價方法 及裝置。



背景技術:

立體視頻通常有兩個視頻通道,利用立體眼鏡可使左右眼分別看到兩幅不 同的畫面,使眼睛聚焦的點(在屏幕上)與雙眼視線匯聚點(屏幕前或后)不 在一個平面上,從而產生具有一定景深的3D畫面。這種基于雙眼視差原理的 3D顯示技術與人正常觀看物體時,聚焦和匯聚在一個點上的生理狀態是不同 的,因此長時間會導致視覺疲勞。

立體視頻的舒適性是影響立體視頻發展的主要問題之一,改善立體視頻觀 看舒適度的前提是評價立體視頻的舒適度。



技術實現要素:

本發明實施例提供了一種立體視頻舒適度評價方法及裝置,用以實現對立 體視頻的舒適度進行評價。

第一方面,提供一種立體視頻舒適度評價方法,該方法包括:

獲取立體視頻段的視頻幀;

估計所述立體視頻段的視頻幀的視差;

確定所述立體視頻段的視頻幀內每個像素的權值,將具有最大權值的像素 的位置確定為所述立體視頻段的視頻幀的視覺焦點位置;

根據所述立體視頻段的視頻幀的視覺焦點位置確定所述立體視頻段的視 頻幀的可視區域;

根據所述立體視頻段的視頻幀的視差以及所述立體視頻段的視頻幀的可 視區域,提取所述立體視頻段的視頻幀的空域特性和時域特性;

根據所述立體視頻段的視頻幀的空域特性和時域特性,確定所述立體視頻 段的觀看舒適度;

所述像素的權值采用如下公式計算:

W=γ*|mv|+η*|dispcrossed|+λ*|δd|

其中,W為坐標為(x,y)的像素的權值,γ、η和λ為加權值; 表示所述坐標為(x,y)的像素的平面運動矢量,dx和dy分別 為所述坐標為(x,y)的像素的水平位移和垂直位移,所述dx和dy在所述坐標 為(x,y)的像素所在視頻幀及所述坐標為(x,y)的像素所在的視頻幀的相鄰 視頻幀內搜索得到;dispcrossed為交叉視差值;δd為所述立體視頻段的視頻幀 及其相鄰視頻幀的匹配塊的平均視差的差值。

第二方面,提供一種立體視頻舒適度評價裝置,包括:

獲取模塊,用于獲取立體視頻段的視頻幀;

提取模塊,用于估計所述立體視頻段的視頻幀的視差;確定所述立體視頻 段的視頻幀內每個像素的權值,將具有最大權值的像素的位置確定為所述立體 視頻段的視頻幀的視覺焦點位置;根據所述立體視頻段的視頻幀的視覺焦點位 置確定所述立體視頻段的視頻幀的可視區域;根據所述立體視頻段的視頻幀的 視差以及所述立體視頻段的視頻幀的可視區域,提取所述立體視頻段的視頻幀 的空域特性和時域特性;

評價模塊,用于根據所述提取模塊提取到的所述立體視頻段的視頻幀的空 域特性和時域特性,確定所述立體視頻段的觀看舒適度。

所述提取模塊采用如下公式計算所述像素的權值:

W=γ*|mv|+η*|dispcrossed|+λ*|δd|

其中,W為坐標為(x,y)的像素的權值,γ、η和λ為加權值; 表示所述坐標為(x,y)的像素的平面運動矢量,dx和dy分別 為所述坐標為(x,y)像素的水平位移和垂直位移,所述dx和dy在所述坐標為 (x,y)的像素所在視頻幀及所述坐標為(x,y)的像素所在的視頻幀的相鄰視 頻幀內搜索得到;dispcrossed為交叉視差值;δd為所述立體視頻段的視頻幀及 其相鄰視頻幀的匹配塊的平均視差的差值。

本發明的上述實施例中,通過檢測立體視頻段內視頻幀的空域特性和時域 特性,并根據視頻幀的空域特性和時域特性對整個立體視頻段的觀看舒適度進 行評價。本發明實施例提出的立體視頻舒適度評價方案考慮了視差空間分布 (即空域特性)和時間分布(即時域特性)對立體視頻舒適度的影響,且可突 出舒適度較差的幀對整體舒適度的影響,從而可以較為客觀的對立體視頻舒適 度進行評價。

附圖說明

圖1為本發明實施例提供的立體視頻舒適度評價流程示意圖;

圖2為本發明實施例提供的單幀頻域特性和時域特性提取流程示意圖;

圖3為本發明實施例提供的基于單幀頻域特性和時域特性對立體視頻段舒 適度進行評價的流程示意圖;

圖4為本發明另一實施例提供的基于單幀頻域特性和時域特性對立體視頻 段舒適度進行評價的流程示意圖;

圖5為本發明實施例提供的立體視頻舒適度評價裝置示意圖;

圖6為本發明另一實施例提供的立體視頻舒適度評價裝置示意圖。

具體實施方式

本發明實施例首先獲得立體視頻段包含的視頻幀的視差圖,然后提取視頻 幀的空域特性和時域特性,經過舒適度評價模型獲得整個段的舒適度。本發明 實施例提出的舒適度評價方法,考慮到了物體時域視差大小以及頻率的變化對 立體視頻舒適度的影響。觀眾在觀看視頻過程中,質量較差的片段往往對整體 觀看體驗的影響更大,現有技術不能體現出較差幀或者較差片段的影響,而本 發明實施例提出的評估方法,可以突出舒適度較差幀的影響。

為了使本發明的目的、技術方案和優點更加清楚,下面將結合附圖對本發 明作進一步地詳細描述,顯然,所描述的實施例僅僅是本發明一部份實施例, 而不是全部的實施例?;诒景l明中的實施例,本領域普通技術人員在沒有做 出創造性勞動前提下所獲得的所有其它實施例,都屬于本發明保護的范圍。

參見圖1,為本發明實施例提供的立體視頻舒適度評價流程示意圖,如圖 所示,該流程可包括:

步驟101:獲取待評價的立體視頻段的視頻幀。

步驟102:提取所述立體視頻段的視頻幀的空域特性和時域特性。

步驟103:根據該立體視頻段的視頻幀的空域特性和時域特性,確定該立 體視頻段的觀看舒適度。

步驟102中,可通過以下方式實現:針對立體視頻段的每一個視頻幀,執 行以下操作:估計該視頻幀的視差,根據該視頻幀的視差以及運動信息確定該 視頻幀的視覺焦點位置,根據該視頻幀的視覺焦點位置確定該視頻幀的可視區 域,根據該視頻幀的視差以及該視頻幀的可視區域。為了更清楚的對步驟102 進行說明,圖2示出了圖1中步驟102的一種可選實現方式,該流程可包括:

步驟201:初始化i值,即設置i=1。

步驟202:估計第i幀的視差。

通常,立體視頻的每一幀包含左眼圖像和右眼圖像,稱為立體圖像對。視 頻幀內一個像素的視差是指一個立體圖像對中匹配的像素間的距離,通常交叉 視差為負,非交叉視差為正。立體視頻的視差估計算法有多種,本發明實施例 可選立體匹配算法來進行視差估計,比如可利用基于顏色分割的立體匹配算法 獲得稠密視差圖。通過立體匹配算法獲得視差后,還可以進一步進行濾波,以 去除視差圖中的誤匹配點,使得到的視差圖平滑、連續、準確。具體實施時, 可以使用中值濾波去除異常點。

在利用基于顏色分割的立體匹配算法獲得稠密視差圖的過程中,通常需要 定義搜索窗口,根據定義的搜索窗口進行立體匹配(即搜索匹配的像素)。比 如,以當前像素為基準向左和向右分別搜索32個像素(此時搜索范圍為32, 視差的范圍為-32~32),即在該搜索范圍內搜索與當前像素匹配的像素。本發 明實施例中,根據視頻段內容的不同,可以調整搜索窗口的大小。搜索窗口的 大小除了與視頻的分辨率有關,還與視頻幀的整體視差大小相關。若搜索窗口 太小,會導致部分像素找不到匹配像素;若窗口太大,誤匹配的概率會增大, 得到的視差圖準確度較低。為避免上述問題,搜索窗口的大小可與視頻幀的視 差幅度相近。

采用基于顏色分割的立體匹配算法估計視差時,有可能有些像素得不到視 差,比如,當存在遮擋等問題時,部分像素不能獲得視差。為解決該問題,本 發明實施例中,在進行立體匹配過程中,若某像素未找到與之匹配的像素,則 可將該像素的視差可設置為經驗值,表明未找到匹配的像素,比如,仍以上述 搜索范圍是32為例,若針對當前像素未搜索到匹配的像素,則將該當前像素 的視差設置為搜索范圍加一,即設置為33。

步驟203:根據第i幀的視差以及運動信息,確定第i幀的視覺焦點位置。

該步驟中,可首先確定第i幀內每個像素的權值,將具有最大權值的像素 的位置確定為第i幀的視覺焦點位置。進一步的,若第i幀內具有最大權值的 像素有多個,則可將該多個具有最大權值的像素中,距離第i幀的圖像中心位 置最近的像素的位置,確定為第i幀的視覺焦點位置。

由于視頻中較為劇烈的運動(比如平面運動和/或深度方向的運動)和較大 的交叉視差容易引起觀眾的注意,因此本發明實施例在計算像素的權值時,可 根據視頻幀內匹配像素的平面運動(包括水平運動和垂直運動)、深度方向的 運動以及交叉視差進行計算。其中,交叉視差是指物體成像于屏幕前方。

具體的,可根據以下公式計算第i幀內像素的權值:

W=γ*|mv|+η*|dispcrossed|+λ*|δd|………………………………[1]

其中,W為坐標為(x,y)的像素的權值,γ、η和λ為加權值,γ、η和λ 之和可以取值為1,可選的,γ=0.2,η=0.4,λ=0.4;mv表示平面運動矢量, mv的大小表明平面運動的劇烈程度,表示坐標為(x,y)的像 素的平面運動矢量,dx和dy分別為第i幀內的坐標為(x,y)像素的水平位移 和垂直位移,所述dx和dy在第i幀及第i幀的相鄰視頻幀(所述第i幀的相鄰 視頻幀例如為第i-1幀或第i+1幀)內搜索得到,比如,通過比較第i幀中坐標 為(x,y)的像素以及與該像素匹配的像素在第i-1幀中的坐標,可得到該像素 的dx和dy;dispcrossed為交叉視差值,對于每一個像素,只有在其視差為交叉視 差時dispcrossed才有值,如果像素的視差為非交叉,則將dispcrossed取值為0;δd 為第i幀及第i幀的相鄰視頻幀(所述第i幀的相鄰視頻幀例如為第i-1幀或第 i+1幀)的匹配塊的平均視差的差值,δd的大小表明深度方向運動的快慢。

步驟204:根據第i幀的視覺焦點位置確定該視頻幀的可視區域。

該步驟中,在確定出視頻幀i的視覺焦點位置后,可根據人眼分辨視域和 觀看距離確定圖像可視區域。本發明實施例中,可選的可以取以焦點為中心、 15°視角范圍內的區域為可視區域。比如,一個立體視頻段的分辨率為 640*480,該立體視頻段中的一個視頻幀的可視區域可能在350*262像素范圍 內。

步驟205:根據第i幀的視差以及該視頻幀的可視區域,提取第i幀的空域 特性和時域特性。

本發明實施例中,一個視頻幀的空域特性可包括以下參數之一或任意組 合:該視頻幀的參考視差(以下將第i幀的參考視差表示為minDisp)、參考 視差的百分比(以下表示為P(minDisp))、邊框效應的嚴重程度、是否滿足“下 近上遠”空間布局。其中:

視頻幀的參考視差minDisp,可以是視頻幀的可視區域內的最小像素視差 值。進一步的,考慮到在立體匹配時可能存在誤匹配的現象,有時候會有一些 像素的視差異常大或者異常小,但是這些像素往往都是離散的、數量較少的一 些像素。但實際上,對于同一個物體來說,相鄰區域的像素視差都應該是相同 或相近的,因此像素視差的數量較少時就認為這些像素的匹配是不準的,因此 可以在排除這些視差異常的像素后,根據其余的像素的視差選取出最小視差, 作為該視頻幀的參考視差。比如,可將所述視頻幀的可視區域內,除噪聲像素 以外的其他像素的視差中的最小值,確定為所述視頻幀的參考視差;其中,針 對噪聲像素的每一個視差值,其對應的像素(即具有該視差值的像素)數量低 于設定像素數量閾值。這樣,可以避免一些噪點對參考視差的選擇,進而提高 舒適度評估的準確性。

參考視差的百分比P(minDisp),是指視頻幀的可視區域內,視差值為參考 視差minDispi的像素數目與有效像素數目的比值,其中,有效像素的視差絕對 值小于搜索范圍。立體匹配過程中,存在一些像素匹配失敗的現象,此時該像 素的視差被設置為一個確定的經驗值來標志該像素匹配失敗,比如之前所說的 搜索范圍為32時,將匹配失敗的像素的視差值設置為33。由于搜索窗口的大 小限制了有效視差范圍為[-32,32],因此視差在[-32,32]內的像素為匹配成功的 像素,即有效像素,而視差不在[-32,32]內的像素即為無效像素,即誤匹配像素, 比如視差為33的像素即為誤匹配像素。

邊框效應,是指對于一個視頻幀,如果位于屏幕邊緣的物體(即成像于屏 幕邊緣的物體)的視差為交叉視差(即物體成像于屏幕前方),且物體的一部 分超出了屏幕范圍,則該視頻幀存在邊框效應(frame-effect),這會使觀眾在 觀看時產生極其不舒服的感覺。

“下近上遠(bottom-up)”,是指一個視頻幀對應的屏幕底端的物體(即成 像于屏幕底端的物體)的感知深度離觀眾近、屏幕頂端物體(即成像于屏幕頂 端的物體)的感知深度離觀眾遠。符合“下近上遠”的空間布局的視頻幀不易 導致視覺疲勞。

具體實施時,可使用觀看舒適度影響因子dispdistribution(可稱為第一觀看舒 適度影響因子)來表示邊框效應的嚴重程度以及是否滿足“下近上遠”空間布 局。參考視差、參考視差的百分比,以及dispdistribution反映了視頻幀內視差的空 間分布情況。

下面以第i幀為例,說明視頻幀的參考視差minDisp、參考視差的百分比 P(minDisp),以及dispdistribution的計算方法。

對于第i幀,確定其參考視差minDispi的方法可以是:在第i幀的可視區 域內所有像素的視差中,選取最小值作為第i幀的參考視差的取值。另一種可 選的實現方式可以是:確定第i幀對應的視差集合,該視差集合為所i幀可視 區域內的像素視差集合,且其中的每個視差值對應的像素數量均大于所述設定 閾值;將該視差集合中的最小視差值確定為第i幀的minDispi。比如,在N*N (N為像素數量)的統計窗口內,取最小視差,判斷具有該最小視差值的像素 數量是否大于閾值0.875*N*N,若大于,則將該最小視差作為第i幀的參考視 差;若小于,則在該統計窗口內再選取除該最小視差以外的其余視差中的最小 值,判斷具有該最小值的像素數量是否大于閾值0.875*N*N,若大于,則將該 最小視差作為第i幀的參考視差,否則參照上述方式排除該最小值,在其余的 視差中再選擇一個最小值,并參照上述方式進行判斷和處理。

對于第i幀,參考視差的百分比P(minDisp)可通過計算第i幀的可視區域 內,視差為參考視差minDispi的像素數目與有效像素數目的比值得到。

對于第i幀,可通過檢測第i幀對應的屏幕邊緣一定范圍內,是否存在集 中的小于設定視差值的交叉視差,來確定第i幀是否存在邊框效應。比如,對 于第i幀,可在屏幕邊緣一定范圍內,通過N*N的搜索窗口檢測小于設定視差 門限T的交叉視差的數目是否大于閾值0.75*N*N,如果大于,則判斷第i幀 存在邊框效應,否則判斷第i幀不存在邊框效應。其中,門限T的取值要求小 于“comfort zone”的下界,而“comfort zone”的范圍與視頻的分辨率、人眼 瞳距、觀看距離等一系列因素相關,因此門限T的取值不是一個固定值,可選 值也與視頻的分辨率相關?!癱omfort zone”是指:視差小于一定范圍時,人眼 不會產生視覺疲勞,比如當前視頻分辨率下“comfort zone”是{-5pixels,8 pixels],則門限T的值應該小于-5。比如,對于分辨率為640*480的視頻幀, 在屏幕邊緣5%的范圍內,如果在20*20的窗口內檢測到小于-5的交叉視差的 數目大于300個,則判斷該視頻幀存在邊框效應。

對于第i幀,可將第i幀按照一定比例劃分為三個區域,通過比較三個區 域內有效像素的平均視差的大小關系來判斷第i幀是否滿足“下近上遠”的空 間布局。比如,對于第i幀,可將第i幀圖像按照Q%、1-Q%(0<Q<100) 的圖像高度劃分為三個區域,通過比較三個區域內有效像素的平均視差的大小 關系判斷是否滿足“下近上遠”。例如,將第i幀圖像在高度方向劃分為三個區 域,從上到下每個區域的高度比例為:0~20%、20%~80%、80%~1,分別計算 每個區域有效像素的平均視差,如果topdisp<middledisp<bottomdisp,,則判斷第i 幀滿足“下近上遠”的空間布局。其中topdisp、middledisp、bottomdisp分別代表 三個區域內有效像素的平均視差值。當然,也可以將第i幀按照一定比例劃分 為兩個區域或多于三個區域,按照上述原則,通過比較各個區域內有效像素的 平均視差的大小關系來判斷第i幀是否滿足“下近上遠”的空間布局。

如上所述,本發明實施例可根據邊框效應的嚴重程度和是否滿足“下近上 遠”的空間布局,確定視差空間布局對舒適度的影響因子dispdistribution。 dispdistribution取值高,表明視差分布較好,不易使觀看者產生視覺疲勞, dispdistribution取值低,表明視差分布較差,容易使觀看者產生視覺疲勞。在具體 實施時,dispdistribution的取值范圍可設置為[0,1],在視頻幀不存在邊框效應且滿 足下近上遠空間布局的情況下,可將dispdistribution取較大值,比如可在[0.9,1]的 范圍內取值。在視頻幀存在邊框效應且不滿足下近上遠空間布局的情況下,可 將dispdistribution取值較小。

本發明實施例給出了以下一種dispdistribution取值的可選方案:

若僅滿足“下近上遠”的空間分布,則dispdistribution=0.8;

若僅滿足不存在邊框效應,則dispdistribution=0.9;

若滿足最佳布局,即,不存在邊框效應且滿足“下近上遠”的空間分布, 則dispdistribution=1;

若存在邊框效應且不滿足“下近上遠”的空間分布,則dispdistribution=0.7。

可以看出,dispdistribution在視頻幀不存在邊框效應且滿足下近上遠空間布局 時取第一值,在視頻幀存在邊框效應但滿足下近上遠空間布局時取第二值,在 視頻幀不存在邊框效應但不滿足下近上遠空間布局時取第三值,在視頻幀存在 邊框效應且不滿足下近上遠空間布局時取第四值,其中,第一值、第二值、第 三值和第四值為預設值,且第一值小于第四值,第三值在第一值和第二值之間 且與第一值和第二值均不相等??蛇x的,第一值、第二值、第三值和第四值的 取值范圍為:大于零且小于等于1。按照dispdistribution取值從小到大的順序,計 算得到的觀看舒適度評價分值也按照從小到大的順序增加(觀看舒適度評價分 值越高,表明觀看舒適度越高)

一個視頻幀的時域特性可包括該視頻幀的可視區域內的視差在深度方向 的變化。具體實施時,可使用觀看舒適度影響因子Vd(可稱為第二觀看舒適度 影響因子)來表示可視區域內的視差在深度方向的變化的影響。

視差在深度方向的變化(Vd)的影響因素有兩個,一個是參考視差的在時 域的變化(V1),另一個是參考視差出現的頻率在時域的變化(V2),Vd=f(V1,V2)。 本發明實施例中,可根據一個視頻幀的參考視差在時域的變化,和/或該視頻幀 的參考視差出現的頻率在時域的變化,計算得到該視頻幀的觀看舒適度影響因 子Vd。

對于第i幀,一種簡單度量視差在深度方向的變化(Vd)的函數為:

其中,V1i表示第i幀的參考視差在時域的變化;表示第i幀的參考視差 出現的頻率在時域的變化;γ和μ為加權值,比如,γ+μ=1,可選的,γ和μ 均取0.5??梢愿鶕1i和影響的重要程度,調整γ和μ的值。一種極端的做 法是γ=1,μ=0,此時只考慮視差在時域變化的影響?;蛘擀蹋?,γ=0,此時只 考慮參考視差出現的頻率在時域的變化的影響。

對于第i幀的V1i,本發明實施例提供了兩種可選計算方法:

方法1:將立體視頻段分段,同一視頻段內的視頻幀的參考視差單調變化 且變化速度相同,根據以下公式計算第i幀的V1i

V1i=(displast-dispfirst)/(Np-1)…………………………………[3]

其中,dispfirst和displast分別為第i幀所屬視頻段的第一幀和最后一幀的參 考視差,Np為第i幀所屬視頻段的視頻幀數量。

方法2:根據以下公式計算第i幀的V1i

V1i=minDispi-minDispi-1……………………………………[4]

其中,minDispi和minDispi-1分別為第i幀和第i-1幀的參考視差。

對于第i幀的可根據以下公式計算:

其中,P(minDispi)和P(minDispi-1)分別為第i幀和第i-1幀的參考視差 的百分比。

步驟206:遞增i值,即設置i=i+1,并判斷遞增后的i值是否超過所述立 體視頻段的視頻幀數目N,若判斷為否,則轉入步驟202,否則結束本流程。

通過以上流程可以看出,由于視頻幀中較為劇烈的運動(比如平面運動和 /或深度方向的運動)和較大的交叉視差容易引起觀眾的注意,因此本發明實施 例在計算像素的權值時,可根據視頻幀內匹配像素的平面運動(包括水平運動 和垂直運動)、深度方向的運動以及交叉視差進行計算,選取其中權值最大的 像素作為視覺焦點,根據該視覺焦點確定可視區域,該可視區域通常為觀眾感 興趣的區域,從而可以針對觀眾感興趣的區域進行觀看舒適度評價。

立體視頻播放過程中,人眼無法準確識別每一個視頻幀的舒適度,對于視 頻舒適度的反映是基于視頻段的,而不是基于視頻幀。因此,在圖1的步驟103 中,需要評估視頻段的舒適度。

圖3示出了圖1中步驟103的一種可選實現方法,如圖所示,該方法可包 括以下步驟:

步驟301:計算立體視頻段的每一個視頻幀的觀看舒適度。一個視頻幀的 舒適度由時域特性和空域特性共同決定。

在具體實施時,一個視頻幀的舒適度模型可以為(以下以第i幀為例):

其中,為第i幀的觀看舒適度,Spatial_frame_vci為第i幀的空域特 性決定的第i幀的觀看舒適度,Temperal_frame_vci為第i幀的時域特性決定 的第i幀的觀看舒適度,α和β為加權值。

其中,dispdistributioni為第i幀的dispdistribution因子,minDispi為第i幀的參考視 差,P(minDispi)為第i幀的參考視差的百分比,b1為模型參數;為第i幀的 Vd因子;b2為模型參數,b2的取值與V1i和minDispi的符號有關。b1和b2是 在擬合主觀數據的過程中訓練出來的模型參數,其取值可根據實際訓練結果來 確定。

可選的,如果對視頻觀看舒適度的主觀評估時采用的是5分制,最低1分 最高5分,則上述公式7和公式8中的參數c1取值為4。由于視頻觀看舒適度 的主觀評估時采用的是5分制,最低1分最高5分,將c1取值為4可保證最 小值為1和最大值為5。同理,如果是其他分制,如11分制或百分制,則可對 公式7和公式8中的模型參數的取值進行相應調整。

表1示出了一組可選的模型參數值。

表1模型參數

步驟302:根據所述立體視頻段每一個視頻幀的視覺焦點位置,對所述立 體視頻段進行子段劃分,每個子段至少包含一個視頻幀,每個子段的視頻幀的 視覺焦點位置轉移量不大于設定轉移量閾值,然后計算每個子段的觀看舒適 度。

該步驟中,分段依據是焦點在空間位置的轉換量大小,如果連續多幀的焦 點的空間位置相近,則將該連續多幀劃分到一個子段內。比如,若相鄰視頻幀 的空間焦點位置轉移量δp小于5,則將所述相鄰視頻幀劃分到一個子段,否 則將所述相鄰視頻幀劃分為不同子段。其中,dx和dy分別代 表焦點轉移的水平和垂直位移。

具體實施時,計算每個子段的觀看舒適度的具體計算公式可以是:

其中,為第k個子段的舒適程度,NF為第k個子段內視頻幀的數目, P1為聯合參數,為設定數值,比如可選取值為7。P1可取值為大于1的整數。P1的可選值的選取可根據已有的測試段和對應的主觀舒適度分值訓練得到,通過 設置合理取值,可以使主觀分值和客觀分值的相關性最高。

可選的,如果對視頻觀看舒適度的主觀評估時采用的是5分制,最低1分 最高5分,則上述公式9和公式10中的參數c2取值為5,即取值為主觀評估 的最高分。同理,如果是其他分制,如11分制或百分制,則可對公式7和公 式8中的模型參數的取值進行相應調整。

步驟303:根據每個子段的觀看舒適度計算所述立體視頻段的觀看舒適度。

具體實施時,具體計算公式可以是:

其中,Q為所述立體視頻段的觀看舒適度,NS為所述視頻段內子段的數 目,P2為時域聯合參數,為設定值,比如可選取值為3。P2可取值為大于1的 整數。P2的可選值的選取可根據已有的測試段和對應的主觀舒適度分值訓練得 到,通過設置合理取值,可以使主觀分值和客觀分值的相關性最高。

圖4示出了圖1中步驟103的另一種可選實現方法,該方法中,觀看舒適 度評價模型中提取的特性參數均為段的統計參數,不需要單獨計算每個視頻幀 的舒適度以及子段的舒適度。如圖所示,該方法可包括以下步驟:

步驟401:根據立體視頻段的每一個視頻幀的空域特性,計算該立體視頻 段的空域特性。

所述立體視頻段的空域特性可包括以下參數之一或任意組合:該立體視頻 段的參考視差、該立體視頻段的觀看舒適度影響因子

具體實施時,立體視頻段的參考視差可通過如下方式計算得到:計算所述 立體視頻段中所有視頻幀的參考視差的加權平均值。具體計算公式可以是:

其中,為所述立體視頻段中所有視頻幀的參考視差的加權平均值, N為所述立體視頻段中視頻幀的數目,minDispi為第i幀的參考視差, P(minDispi)為第i幀的參考視差的百分比。

具體實施時,立體視頻段的觀看舒適度影響因子可通過如下方式 計算得到:計算所述立體視頻段內所有視頻幀的觀看舒適度影響因子 dispdistribution的平均值。具體計算公式可以是:

其中,為所述立體視頻段內所有視頻幀的觀看舒適度影響因子 dispdistribution的平均值,dispdistributioni為第i幀的觀看舒適度影響因子dispdistribution;

步驟402:根據該立體視頻段的每一個視頻幀的時域特性,計算該立體視 頻段的時域特性。

所述立體視頻段的時域特性可包括該立體視頻段的觀看舒適度影響因子 所述立體視頻段的觀看舒適度影響因子Vd,具體可通過以下公式計算:

其中,為所述立體視頻段的觀看舒適度影響因子Vd,為所述立體視 頻段內第i幀的觀看舒適度影響因子Vd,Pi為設定值,Pi的取值根據V1i和 minDispi的符號來確定,即,Pi的值與V1i和minDispi的符號有關,一種可取 的值為:

當V1i與minDispi異號時,Pi=0.8;

當V1i與minDispi同號時,Pi=1;

通過Pi可區分不同運動方向對觀看舒適度的不同影響。當V1i與minDispi同號時,物體向遠離屏幕的方向運動,這種情況下的舒適度非常差,Pi可取較 大值,比如上述Pi=1;當V1i與minDispi異號時,物體向靠近屏幕的方向運動, 這種情況下的舒適度較好,Pi可取較小值,比如上述Pi=0.8。

步驟403:根據步驟401~402計算出的參數,計算所述立體視頻段的觀看 舒適度。

具體計算公式可以是:

VC=α*Spatial_vc+β*Temperal_vc………………………………[14]

其中,VC為所述立體視頻段的觀看舒適度,α和β為加權值,可選的, α+β=1;b1為模型參數。一組可用的模型參數為:α=0.8,β=0.2,b1=0.04。 b1的可選值的選取可根據已有的測試段和對應的主觀舒適度分值訓練得到,取 該值時,主觀分值和客觀分值的相關性最高。

可選的,如果對視頻觀看舒適度的主觀評估時采用的是5分制,最低1分 最高5分,則上述公式15和公式16中的參數c3取值為4,即取值為主觀評估 的最高分。同理,如果是其他分制,如11分制或百分制,則可對公式15和公 式16中的模型參數的取值進行相應調整。

通過以上流程可以看出,本發明實施例通過檢測人眼視覺焦點位置,根據 人眼視角范圍確定可視區域,利用可視區域內輻輳與調節沖突的嚴重程度度量 立體視頻觀看舒適度。輻輳與調節沖突的嚴重程度是通過分析立體視頻空間視 差分布狀況以及時域視差分布情況度量的。本發明實施例提出的評估方法充分 考慮了視差空間分布和時間分布對立體視頻舒適度的影響,且可突出舒適度較 差的幀對整體舒適度的影響。

綜上所述,立體視頻舒適度評估是改善立體視頻觀看舒適度的前提條件, 是影響立體視頻發展的關鍵技術之一。本發明實施例提出的立體視頻舒適度的 客觀評價方案,計算復雜度低,可靠性高,可以廣泛應用與立體視頻舒適度評 估及監測。該方案與已有方案相比充分考慮了立體視頻的空域特性和時域特性 對立體視頻舒適度的影響,且考慮到了人類視覺特性以及觀眾觀看習慣,涵蓋 了影響觀看舒適度的最主要影響因素,從而使立體視頻觀看舒適度評價較為客 觀和準確。

基于相同的技術構思,本發明實施例還提供了一種立體視頻評價裝置。

參見圖5,為本發明實施例提供的立體視頻評價裝置的結構示意圖。

獲取模塊501,用于獲取立體視頻段的視頻幀;

提取模塊502,用于提取所述獲取模塊獲取到的立體視頻段的視頻幀的空 域特性和時域特性;

評價模塊503,用于根據所述提取模塊提取到的所述立體視頻段的視頻幀 的空域特性和時域特性,確定所述立體視頻段的觀看舒適度。

結合上述裝置,在第一種可能的實現方式中,提取模塊502具體用于:估 計所述立體視頻段的視頻幀的視差,根據所述立體視頻段的視頻幀的視差以及 運動信息確定所述立體視頻段的視頻幀的視覺焦點位置,根據所述立體視頻段 的視頻幀的視覺焦點位置確定所述立體視頻段的視頻幀的可視區域,以及根據 所述立體視頻段的視頻幀的視差以及所述立體視頻段的視頻幀的可視區域,提 取所述立體視頻段的視頻幀的空域特性和時域特性。

結合上述裝置的第一種可能的實現方式,在第二種可能的實現方式中,提 取模塊502可確定所述立體視頻段的視頻幀內每個像素的權值,將具有最大權 值的像素的位置確定為所述立體視頻段的視頻幀的視覺焦點位置。

結合上述裝置的第二種可能的實現方式,在第三種可能的實現方式中,提 取模塊502可采用公式(1)計算所述像素的權值,公式(1)的表達式以及相 關參數的含義同前所述,在此不再重復。

結合上述裝置的第二種或第三種可能的實現方式,在第四種可能的實現方 式中,提取模塊502具體用于:若所述立體視頻段的視頻幀內具有最大權值的 像素有多個,則將所述多個具有最大權值的像素中,距離所述立體視頻段的視 頻幀的圖像中心位置最近的像素的位置,確定為所述立體視頻段的視頻幀的視 覺焦點位置。

結合上述裝置的第一種至第四種可能的實現方式中的任意一種可能的實 現方式,在第五種可能的實現方式中,所述空域特性包括以下參數之一或任意 組合:參考視差、參考視差的百分比、第一觀看舒適度影響因子;

提取模塊502具體用于:確定所述立體視頻段的視頻幀對應的視差集合, 所述視差集合為所述立體視頻段的視頻幀可視區域內的像素視差集合,且其中 的每個視差值對應的像素數量均大于所述設定閾值;將所述視差集合中的最小 視差值確定為所述立體視頻段的視頻幀的參考視差;

計算所述立體視頻段的視頻幀的可視區域內,視差為所述參考視差的像素 的數目與有效像素的數目的比值,得到所述立體視頻段的視頻幀的參考視差的 百分比,所述有效像素是指的視差絕對值小于搜索范圍的像素;

根據所述立體視頻段的視頻幀是否存在邊框效應以及是否滿足下近上遠 空間布局,確定所述立體視頻段的視頻幀的第一觀看舒適度影響因子,所述第 一觀看舒適度影響因子在所述立體視頻段的視頻幀不存在邊框效應且滿足下 近上遠空間布局時取第一值,在所述立體視頻段的視頻幀存在邊框效應但滿足 下近上遠空間布局時取第二值,在所述立體視頻段的視頻幀不存在邊框效應但 不滿足下近上遠空間布局時取第三值,在所述立體視頻段的視頻幀存在邊框效 應且不滿足下近上遠空間布局時取第四值,其中,第一值、第二值、第三值和 第四值為預設值,且第一值小于第四值,第三值在第一值和第二值之間且與第 一值和第二值均不相等;所述邊框效應是指對于一個視頻幀,如果成像于屏幕 邊緣的物體的視差為交叉視差,且所述物體的一部分超出了屏幕范圍,則存在 邊框效應;所述下近上遠是指一個視頻幀對應的成像于屏幕底端的物體的感知 深度離觀眾近、成像于屏幕頂端的物體的感知深度離觀眾遠。

結合上述裝置的第一種至第五種可能的實現方式中的任意一種可能的實 現方式,在第六種可能的實現方式中,所述時域特性包括第二觀看舒適度影響 因子;

提取模塊502具體用于:根據所述立體視頻段的視頻幀的參考視差在時域 的變化,和/或所述立體視頻段的視頻幀的參考視差出現的頻率在時域的變化, 計算得到所述立體視頻段的視頻幀的第二觀看舒適度影響因子,所述第二觀看 舒適度影響因子數值的大小表示視頻幀的參考視差在深度方向變化的程度。

結合上述裝置的第六種可能的實現方式,在第七種可能的實現方式中,提 取模塊502具體用于:將所述立體視頻段進行子段劃分,同一子段內的視頻幀 的參考視差單調變化且變化速度相同,根據公式(3)計算所述立體視頻段的 視頻幀的參考視差在時域的變化,根據公式(5)計算所述立體視頻段的視頻 幀的參考視差出現的頻率在時域的變化,根據公式(2)計算所述立體視頻段 的視頻幀的第二觀看舒適度影響因子。公式(3)、公式(2)和公式(5)的表 達式以及相關參數的含義同前所述,在此不再重復。

結合上述裝置的第六種可能的實現方式,在第八種可能的實現方式中,提 取模塊502可根據公式(4)計算所述立體視頻段的視頻幀的參考視差在時域 的變化,根據公式(5)計算所述立體視頻段的視頻幀的參考視差出現的頻率 在時域的變化,根據公式(2)計算所述立體視頻段的視頻幀的第二觀看舒適 度影響因子。公式(4)、公式(5)和公式(2)的表達式以及相關參數的含義 同前所述,在此不再重復。

結合上述裝置或者上述裝置的第一種至第八種可能的實現方式中的任意 一種可能的實現方式,在第九種可能的實現方式中,評價模塊503具體用于:

根據所述立體視頻段的每一個視頻幀的空域特性和時域特性,分別計算所 述每一個視頻幀的觀看舒適度;

根據所述立體視頻段的每一個視頻幀的視覺焦點位置,對所述立體視頻段 進行子段劃分,每個子段的視頻幀的視覺焦點位置轉移量不大于設定轉移量閾 值;根據每個子段內每個視頻幀的觀看舒適度,分別計算所述每個子段的觀看 舒適度;

根據每個子段的觀看舒適度計算所述立體視頻段的觀看舒適度。

結合上述裝置的第九種可能的實現方式,在第十種可能的實現方式中,評 價模塊503可根據公式(6)、公式(7)和公式(8)計算所述立體視頻段的視 頻幀的觀看舒適度。公式(4)、公式(5)和公式(2)的表達式以及相關參數 的含義同前所述,在此不再重復。計算過程中涉及到的立體視頻段的視頻幀的 參考視差、立體視頻段的視頻幀的參考視差的百分比、第一觀看舒適度影響因 子、第二觀看舒適度影響因子等參數的計算方法,同前所述,在此不再重復。

結合上述裝置的第九種或第十種可能的實現方式,在第十一種可能的實現 方式中,評價模塊503具體用于:根據公式(9)計算所立體視頻段的的觀看 舒適度。公式(9)表達式以及相關參數的含義同前所述,在此不再重復。

結合上述裝置的第九種至第十一種可能的實現方式中的任意一種可能的 實現方式,在第十二種可能的實現方式中,評價模塊503可根據公式(10)計 算所述立體視頻段的觀看舒適度。公式(10)表達式以及相關參數的含義同前 所述,在此不再重復。

結合上述裝置或者上述裝置的第一種至第十二種可能的實現方式中的任 意一種可能的實現方式,在第十三種可能的實現方式中,評價模塊503可根據 所述立體視頻段的視頻幀的空域特性,計算所述立體視頻段的空域特性,根據 所述立體視頻段的視頻幀的時域特性,計算所述立體視頻段的時域特性,根據 所述立體視頻段的空域特性和時域特性,計算所述立體視頻段的觀看舒適度。

結合上述裝置的第十三種可能的實現方式,在第十四種可能的實現方式 中,所述立體視頻段的視頻幀的空域特性包括以下參數之一或任意組合:所述 立體視頻段的視頻幀的參考視差,參考視差的百分比和第一觀看舒適度影響因 子,這些參數的具體計算方法同前所述,在此不再重復。相應的,評價模塊503 可根據公式(11)計算所述立體視頻段中所有視頻幀的參考視差的加權平均值, 根據公式(12)計算所述立體視頻段內所有視頻幀的第一觀看舒適度影響因子 的平均值。公式(11)和公式(12)表達式以及相關參數的含義同前所述,在 此不再重復。

結合上述裝置的第十三種或第十四種可能的實現方式,在第十五種可能的 實現方式中,所述立體視頻段的視頻幀的時域特性包括:所述立體視頻段的視 頻幀的第二觀看舒適度影響因子(具體計算方法同前所述,在此不再重復), 評價模塊503可根據公式(13)計算所述立體視頻段的第二觀看舒適度影響因 子。公式(13)表達式以及相關參數的含義同前所述,在此不再重復。

結合上述裝置的第十三種至第十五種可能的實現方式中的任意一種可能 的實現方式,在第十六種可能的實現方式中,評價模塊503可根據公式(14)、 公式(15)和公式(16)計算所述立體視頻段的觀看舒適度。公式(14)、公 式(15)和公式(16)表達式以及相關參數的含義同前所述,在此不再重復。

基于相同的技術構思,本發明實施例還提供了一種立體視頻評價裝置。

參見圖6,為本發明實施例提供的立體視頻評價裝置的結構示意圖。該裝 置可包括:收發器601、存儲器602和處理器603。存儲器602用于存儲應用 程序、算法規則、計算參數等信息,還可用來存儲處理器603處理過程中產生 的中間結果。

收發器601,用于獲取立體視頻段的視頻幀;

處理器603,用于提取所述獲取模塊獲取到的立體視頻段的視頻幀的空域 特性和時域特性;根據所述提取模塊提取到的所述立體視頻段的視頻幀的空域 特性和時域特性,確定所述立體視頻段的觀看舒適度。

結合上述裝置,在第一種可能的實現方式中,處理器603具體用于:估計 所述立體視頻段的視頻幀的視差,根據所述立體視頻段的視頻幀的視差以及運 動信息確定所述立體視頻段的視頻幀的視覺焦點位置,根據所述立體視頻段的 視頻幀的視覺焦點位置確定所述立體視頻段的視頻幀的可視區域,以及根據所 述立體視頻段的視頻幀的視差以及所述立體視頻段的視頻幀的可視區域,提取 所述立體視頻段的視頻幀的空域特性和時域特性。

結合上述裝置的第一種可能的實現方式,在第二種可能的實現方式中,處 理器603可確定所述立體視頻段的視頻幀內每個像素的權值,將具有最大權值 的像素的位置確定為所述立體視頻段的視頻幀的視覺焦點位置。

結合上述裝置的第二種可能的實現方式,在第三種可能的實現方式中,處 理器603可采用公式(1)計算所述像素的權值,公式(1)的表達式以及相關 參數的含義同前所述,在此不再重復。

結合上述裝置的第二種或第三種可能的實現方式,在第四種可能的實現方 式中,處理器603具體用于:若所述立體視頻段的視頻幀內具有最大權值的像 素有多個,則將所述多個具有最大權值的像素中,距離所述立體視頻段的視頻 幀的圖像中心位置最近的像素的位置,確定為所述立體視頻段的視頻幀的視覺 焦點位置。

結合上述裝置的第一種至第四種可能的實現方式中的任意一種可能的實 現方式,在第五種可能的實現方式中,所述空域特性包括以下參數之一或任意 組合:參考視差、參考視差的百分比、第一觀看舒適度影響因子;

處理器603具體用于:確定所述立體視頻段的視頻幀對應的視差集合,所 述視差集合為所述立體視頻段的視頻幀可視區域內的像素視差集合,且其中的 每個視差值對應的像素數量均大于所述設定閾值;將所述視差集合中的最小視 差值確定為所述立體視頻段的視頻幀的參考視差;

計算所述立體視頻段的視頻幀的可視區域內,視差為所述參考視差的像素 的數目與有效像素的數目的比值,得到所述立體視頻段的視頻幀的參考視差的 百分比,所述有效像素是指的視差絕對值小于搜索范圍的像素;

根據所述立體視頻段的視頻幀是否存在邊框效應以及是否滿足下近上遠 空間布局,確定所述立體視頻段的視頻幀的第一觀看舒適度影響因子,所述第 一觀看舒適度影響因子在所述立體視頻段的視頻幀不存在邊框效應且滿足下 近上遠空間布局時取第一值,在所述立體視頻段的視頻幀存在邊框效應但滿足 下近上遠空間布局時取第二值,在所述立體視頻段的視頻幀不存在邊框效應但 不滿足下近上遠空間布局時取第三值,在所述立體視頻段的視頻幀存在邊框效 應且不滿足下近上遠空間布局時取第四值,其中,第一值、第二值、第三值和 第四值為預設值,且第一值小于第四值,第三值在第一值和第二值之間且與第 一值和第二值均不相等;所述邊框效應是指對于一個視頻幀,如果成像于屏幕 邊緣的物體的視差為交叉視差,且所述物體的一部分超出了屏幕范圍,則存在 邊框效應;所述下近上遠是指一個視頻幀對應的成像于屏幕底端的物體的感知 深度離觀眾近、成像于屏幕頂端的物體的感知深度離觀眾遠。

結合上述裝置的第一種至第五種可能的實現方式中的任意一種可能的實 現方式,在第六種可能的實現方式中,所述時域特性包括第二觀看舒適度影響 因子;

處理器603具體用于:根據所述立體視頻段的視頻幀的參考視差在時域的 變化,和/或所述立體視頻段的視頻幀的參考視差出現的頻率在時域的變化,計 算得到所述立體視頻段的視頻幀的第二觀看舒適度影響因子,所述第二觀看舒 適度影響因子數值的大小表示視頻幀的參考視差在深度方向變化的程度。

結合上述裝置的第六種可能的實現方式,在第七種可能的實現方式中,處 理器603具體用于:將所述立體視頻段進行子段劃分,同一子段內的視頻幀的 參考視差單調變化且變化速度相同,根據公式(3)計算所述立體視頻段的視 頻幀的參考視差在時域的變化,根據公式(5)計算所述立體視頻段的視頻幀 的參考視差出現的頻率在時域的變化,根據公式(2)計算所述立體視頻段的 視頻幀的第二觀看舒適度影響因子。公式(3)、公式(2)和公式(5)的表達 式以及相關參數的含義同前所述,在此不再重復。

結合上述裝置的第六種可能的實現方式,在第八種可能的實現方式中,處 理器603可根據公式(4)計算所述立體視頻段的視頻幀的參考視差在時域的 變化,根據公式(5)計算所述立體視頻段的視頻幀的參考視差出現的頻率在 時域的變化,根據公式(2)計算所述立體視頻段的視頻幀的第二觀看舒適度 影響因子。公式(4)、公式(5)和公式(2)的表達式以及相關參數的含義同 前所述,在此不再重復。

結合上述裝置或者上述裝置的第一種至第八種可能的實現方式中的任意 一種可能的實現方式,在第九種可能的實現方式中,處理器603具體用于:

根據所述立體視頻段的每一個視頻幀的空域特性和時域特性,分別計算所 述每一個視頻幀的觀看舒適度;

根據所述立體視頻段的每一個視頻幀的視覺焦點位置,對所述立體視頻段 進行子段劃分,每個子段的視頻幀的視覺焦點位置轉移量不大于設定轉移量閾 值;根據每個子段內每個視頻幀的觀看舒適度,分別計算所述每個子段的觀看 舒適度;

根據每個子段的觀看舒適度計算所述立體視頻段的觀看舒適度。

結合上述裝置的第九種可能的實現方式,在第十種可能的實現方式中,處 理器603可根據公式(6)、公式(7)和公式(8)計算所述立體視頻段的視頻 幀的觀看舒適度。公式(4)、公式(5)和公式(2)的表達式以及相關參數的 含義同前所述,在此不再重復。計算過程中涉及到的立體視頻段的視頻幀的參 考視差、立體視頻段的視頻幀的參考視差的百分比、第一觀看舒適度影響因子、 第二觀看舒適度影響因子等參數的計算方法,同前所述,在此不再重復。

結合上述裝置的第九種或第十種可能的實現方式,在第十一種可能的實現 方式中,處理器603具體用于:根據公式(9)計算所立體視頻段的的觀看舒 適度。公式(9)表達式以及相關參數的含義同前所述,在此不再重復。

結合上述裝置的第九種至第十一種可能的實現方式中的任意一種可能的 實現方式,在第十二種可能的實現方式中,處理器603可根據公式(10)計算 所述立體視頻段的觀看舒適度。公式(10)表達式以及相關參數的含義同前所 述,在此不再重復。

結合上述裝置或者上述裝置的第一種至第十二種可能的實現方式中的任 意一種可能的實現方式,在第十三種可能的實現方式中,處理器603可根據所 述立體視頻段的視頻幀的空域特性,計算所述立體視頻段的空域特性,根據所 述立體視頻段的視頻幀的時域特性,計算所述立體視頻段的時域特性,根據所 述立體視頻段的空域特性和時域特性,計算所述立體視頻段的觀看舒適度。

結合上述裝置的第十三種可能的實現方式,在第十四種可能的實現方式 中,所述立體視頻段的視頻幀的空域特性包括以下參數之一或任意組合:所述 立體視頻段的視頻幀的參考視差,參考視差的百分比和第一觀看舒適度影響因 子,這些參數的具體計算方法同前所述,在此不再重復。相應的,處理器603 可根據公式(11)計算所述立體視頻段中所有視頻幀的參考視差的加權平均值, 根據公式(12)計算所述立體視頻段內所有視頻幀的第一觀看舒適度影響因子 的平均值。公式(11)和公式(12)表達式以及相關參數的含義同前所述,在 此不再重復。

結合上述裝置的第十三種或第十四種可能的實現方式,在第十五種可能的 實現方式中,所述立體視頻段的視頻幀的時域特性包括:所述立體視頻段的視 頻幀的第二觀看舒適度影響因子(具體計算方法同前所述,在此不再重復), 處理器603可根據公式(13)計算所述立體視頻段的第二觀看舒適度影響因子。 公式(13)表達式以及相關參數的含義同前所述,在此不再重復。

結合上述裝置的第十三種至第十五種可能的實現方式中的任意一種可能 的實現方式,在第十六種可能的實現方式中,處理器603可根據公式(14)、 公式(15)和公式(16)計算所述立體視頻段的觀看舒適度。公式(14)、公 式(15)和公式(16)表達式以及相關參數的含義同前所述,在此不再重復。

本發明是參照根據本發明實施例的方法、設備(系統)、和計算機程序產 品的流程圖和/或方框圖來描述的。應理解可由計算機程序指令實現流程圖和 /或方框圖中的每一流程和/或方框、以及流程圖和/或方框圖中的流程和/ 或方框的結合??商峁┻@些計算機程序指令到通用計算機、專用計算機、嵌入 式處理機或其他可編程數據處理設備的處理器,使得通過該計算機或其他可編 程數據處理設備的處理器執行的指令可實現流程圖中的一個流程或多個流程 和/或方框圖一個方框或多個方框中指定的功能。

這些計算機程序指令也可存儲在能引導計算機或其他可編程數據處理設 備以特定方式工作的計算機可讀存儲器中,使得存儲在該計算機可讀存儲器中 的指令產生包括指令裝置的制造品,該指令裝置實現在流程圖一個流程或多個 流程和/或方框圖一個方框或多個方框中指定的功能。

這些計算機程序指令也可裝載到計算機或其他可編程數據處理設備上,使 得在計算機或其他可編程設備上執行一系列操作步驟以產生計算機實現的處 理,從而在計算機或其他可編程設備上執行的指令提供用于實現在流程圖的一 個流程或多個流程和/或方框圖的一個方框或多個方框中指定的功能的步驟。

盡管已描述了本發明的可選實施例,但本領域內的技術人員一旦得知了基 本創造性概念,則可對這些實施例作出另外的變更和修改。所以,所附權利要 求意欲解釋為包括可選實施例以及落入本發明范圍的所有變更和修改。

顯然,本領域的技術人員可以對本發明進行各種改動和變型而不脫離本發 明的精神和范圍。這樣,倘若本發明的這些修改和變型屬于本發明權利要求及 其等同技術的范圍之內,則本發明也意圖包含這些改動和變型在內。

再多了解一些
當前第1頁1 2 3 
網友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1
做爱视频