最新【精品PPT】新一代3D立体显示技术之研究及应用(II)讲学课件

前一頁
下一頁
Y
Cb
Cr
13
應用與實驗
靜態計算:
計算影像內清晰度和對 比度，並依顏色屬性組 合靜態深度，供深度還 原法使用。
清晰度強度
銳利度強度
顏色屬性分類圖
靜態深度圖
14
應用與實驗
梯度圖
動態搜尋:
影像前後頁動態搜尋光 流向量，得出光流近似 深度，供深度還原法使 用。
MHI 光流向量圖
閉合有效圖
光流近似深度圖
影像應用性廣:
不需要真實的深度圖和其他相機参數設定，也不需要雙眼模式拍攝，一般 影片的影像資料，經轉換成左右眼立體影片檔後，再透過立體顯示器播放， 不需戴眼鏡即可呈現立體效果的影片。
立體品質:
利用新深度還原法製作出的立體影片，前景部分有浮出顯示畫面外視覺， 與背景有明顯的空間距離感，大面積移動的物件也有景深的層次感，並不 為只有單一深度的感覺，整體畫面構成已經有不錯的立體的感受。
增強立體效果 左右眼移動方向
新還原法
物件距離 遠 中 近
t 量
(x1x2)/2 (x1x2)/4
0
CID法調整 t
10
立體顯示轉換
移動上下頁光流點創造立體圖
xLeft x1xshift xRig htx2xshift yLeft y1yshift yRig hty2yshift
移動左眼立體圖
移動右眼立體圖
移動時差建立深度還原法:
而當A點移動到C點會經過B點，這時A點和B點 的關係就只差異一個時間差上，且等比率的也 差異在C點和D點上，若令A點為t時間的點，C 點為t+1時間的點時，B、D點就以A點加時間差 和來表示。
9
立體顯示轉換
深度還原法調整
當移動量不大時，其 t 值太 小，經觀察其立體視差效果 不顯著，更動由原圖當左眼 圖方式，符合在AC點運動向 量方法內，變成創造新的左 眼圖來加強深度感。但由於 都由前一頁 A點產生，產生 的圖形左右對應有較嚴重的 變形，故在改由下一頁 B點 來產生右眼圖點比較洽當， 所以最後更動由C 點旁的右 眼圖。
較小而有較佳的效果。
光流有效 區塊
演算差值
光流移動判斷
4步搜尋光流
動態光流 向量圖
演算CID
CID判別
光流移動判斷
靜態區塊 深度圖
由CID調整判 斷
儲存左眼圖 右眼圖
製作左右眼圖
顯示雙眼圖
系統架構圖
12
應用與實驗
立體轉換前處裡:
取出影像各頁，濾波消除
雜訊，並色彩轉換至Y、
Cb、Cr，供後續處理使
用。
17
結論與未來展望
未來的研究方向，可以朝向三個方面著手進行: 3D 顯示器或投影設備規格研究：
現行使用顯示器3D模式或廠商提供的播放軟體，因每種3D顯示器顯示原 理和硬體規格不同，而有立體感受差異，尚須研究每一類型規格，由自 製的程式自動控制播放來訂定最佳顯示模式。
更精準的深度圖研究：
可自訂加入已知條件，如相機参數、光源點、景深比例，室內、走道、 郊外各場景，在越多已知的條件下應可更準確的產生深度圖。
15
應用與實驗
依光流深度還原法製作左右眼圖，並由顯示器提供之軟體進 行影像的插排融合(interlace)，再藉由線條遮障陣列顯示器 （Barrier Arrays）的遮蔽效果觀看的立體圖。
(a)左眼圖
(b)右眼圖
插排立體圖
16
結論與未來展望
歸納總結以下研究結論： 深度資訊擷取:
分析產生靜態深度結構，再加上光流法搜尋動態前後頁影像的移動向量， 結合靜態與動態深度資訊，已可估出近似的影像深度。
由原圖當底圖疊上移動量
完整左眼立體圖
完整右眼立體圖
11
應用與實驗
實驗方法:
影像檔
使用高解析640x480 以上的電 前後兩
影和動畫影像，經由本實驗各 頁影像
步驟轉換成立體影像後，使用
sharp和DTI狹縫視差遮障型立 轉換成
體顯示器播放，觀察其立體效
YCbCr
果，作為研究效果分析，顯示
上因sharp在3D模式亮度衰減
閉合處理(closing)： 待處理影像先經過擴張(dilation) 運算後再進行侵蝕(erosion)運算
0 1 0
A
1
1
1
0 1 0
O ( x , y ) C s , t • A C s , t A A s , t S xy Mx,y MHI
D(x, y) 差值量
區塊移動補點研究：
若要讓3D顯示效果更佳，則變形和移動會更加劇烈，這時會產生許多空 洞點、雜點，尋求一個良好的演算法，彌補失真降至最低，達到更立體 清晰浮現的顯示。
2
動態影像立體深度搜尋
前置處理
Ex Ey ,,0255
G ( x ,y ) ( s ,t ) s ,t S
d E i t, D f ( x , f y ) d ( s , t i ) f s , t Biblioteka BaiduS
M x , y D s , t M s , t / 2 s , t S xy G(x,y) 梯度量
i 1 9
C errr o rIk 1 C(x,ry)Ik 1 C(x,ry)2
i 1
ErrYerr oC r eb rr oC r errro r T 27
步驟一 步驟三
步驟二
步驟四
8
立體顯示轉換
觀察空間中某一點；
在左眼看到位置在A點時，右眼因角度看到B點， 這兩個位置在空間中是同一點，當那點移動後， 由左眼觀看A點移動到C點時，B點也移動到D點， 而ABCD四點恰巧會呈現直線相連的方式存在， 也就是左眼的A至C點與右眼B至D點具有相同的 圖素和向量方向的，因投影的關係在左平面和 右平面位置不同。
【精品PPT】新一代3D立体显 示技术之研究及应用(II)
立體顯示原理
觀看立體顯示的方法:
兩張立體圖片分別由對應的左右眼觀看， 經由大腦自然融合後，就可讓物體浮現 或凹陷深入場景的感知。
視差遮障(Parallax Barrier)：
利用左右影像插排融合技術，利用透光 狹縫（Slit）與不透光遮障(Barrier） 垂直相間的光柵條紋，放置於融合圖形 之上，來限制左右眼分別看到左右影像， 右圖為視差遮障型的立體顯示器。
O(x, y) 光流有效區域
7
動態影像立體深度搜尋
四步搜尋光流
搜尋區塊中心點與其鄰近相 隔一半搜尋範圍點位置的八 個區域，加上本身共有九個 區域作為與要比較區塊的判 別目標物搜尋的方向資訊。
LSM判別法
9
Yerr o r IkY(x,y)Ik1Y(x,y)2
i1 9
Cerb r o rIkC(xb ,y)Ik 1 C(xb ,y)2