對半導體供應商來說，Google新發表的虛擬實境(VR)平台Daydream，是與它的名稱(白日夢)正好相反、具備實際商機潛力的產物；高通(Qualcomm)虛擬處理技術部門主管Tim Leland，就是眾多與Google合作了好一段時間的廠商代表之一，協助催生了可支援行動虛擬實境功能的新一代升級版Android手機，如三星(Samsung)以GearVR產品所展現的實例。

Leland的團隊協助開發了一個針對單緩衝渲染(single-buffer rendering)最佳化的Android架構，該整合於高通最新Snapdragon 820單晶片(SoC)的繪圖處理核心經過調整，可提供精細紋理的搶佔技術(fine grained pre-emption)，以降低移動延遲(motion-to-photon latency)；移動延遲是確保VR頭戴顯示器畫面變換速度與使用者頭部移動速度一樣快的關鍵指標。

Leland表示，藉由深入SoC設計讓Android平台的應用達到20毫秒(millisecond)的延遲目標是個大工程，Snapdragon晶片需要改變與各個感測器之間的交握(handshake)方式才能降低延遲；而感測器本身則需要支援更快速的、從100MHz到1GHz等級的採樣。

為此高通開發了一種稱為「視覺慣性測程(visual inertial odometry)」的演算法，以追蹤六個自由度的頭部運動；該演算法會在Snapdragon內建的Hexagon數位訊號處理器(DSP)中執行，將來自頭戴裝置的加速度計、陀螺儀、磁力計、攝影機的資料相互關聯。

開發工程師能透過高通即將上市的軟體開發套件(SDK)取得上述技術，而Google也打算在Android N作業系統加入能處理感測器融合(sensor fusion)任務的功能，應該是為了那些採用未具備感測器融合功能之SoC的廠商。

高通在一篇技術白皮書中聲稱，Snapdragon 820的移動延遲低於18毫秒；該白皮書寫道：「以實際的角度來看這個挑戰，60Hz顯示器每17毫秒會更新一次畫面，而90Hz顯示器則是每11毫秒更新一次。」

大多數採用Daydream平台的頭戴式裝置，會是像三星的GearVR那樣需要結合智慧型手機使用的產品 (圖片來源：Google)

結合頭戴式裝置使用的手機通常會需要採用AMOLED顯示器，因為能比傳統液晶顯示器支援更快的切換時間，否則容易出現所謂的「鬼影」；而繪圖處理核心則會採用一系列的渲染影像技巧，提供使用者運動時的流暢感、同時最小化耗電量。

舉例來說，該類元件會儘可能時常重複使用巨集區塊(macro-blocks；或譯“宏區塊”、“宏塊”)，以減少渲染影像的需要。一個簡單的技巧是先在顯示器的中央渲染影像，假設使用者的目光聚焦於此；而更先進的解決方案是使用智慧型手機攝影機來追蹤使用者的眼球運動，來判定哪個角度的影像該優先渲染。

繪圖資料的壓縮已經成為在提升處理速率同時降低耗電的關鍵；另一個技巧是改變影像的色調，讓它看起來似乎更亮，因此不需要調高耗電量大的背光。這確實是個挑戰，因為目前的手機只是在車上開個導航功能就會開始發燙，而今年秋天上市的手機則是要能貼近使用者的臉。無論如何，VR功能期望能為成長趨緩的手機市場注入新動力。

對首批與未來VR手機產品的期望

大多數供應商預期會推出類似三星GearVR裝置的Daydream平台產品，也就是需要搭配智慧型手機使用的被動型VR頭戴式裝置；不過Leland表示，該類產品是Daydream平台的典型頭戴式裝置，也會有廠商推出特殊應用行動VR頭戴式裝置，甚至也有業者在開發擴增實境(AR)產品，但那會較晚問世。

特殊應用行動VR頭戴式裝置可能包括一系列高價位產品，配備更昂貴的顯示器、更大儲存容量以及先進的空間音訊(spatial audio)；該類頭戴式顯示器預期價格範圍也會更廣。

Daydream平台的最後一個部分硬體，就是內建軌跡板的雙按鍵控制手把，類似第一代任天堂(Nintendo)遊戲機Wii的手把；其中一個應用程式按鍵是為開發廠商留的，另一個回到主頁(Home)按鍵則是保留給Android。根據曾經開發電玩、對遊戲互動十分熟習的Google VR部門主管Clay Bavor表示，該控制手把的精確度媲美雷射筆。

Daydream平台的主頁畫面沒有太複雜的背景影像，將焦點集中在各應用程式內容 (圖片來源：Google)

將在今年秋天陸續問世的Daydream平台產品只是個開始，Leland 表示：「產業界將持續努力降低移動延遲──這也會是接下來幾年大家會常聽到的話題，因為雖然20毫秒的延遲性已經很好了，15毫秒、甚至低於10毫秒當然更好，這能讓VR畫面看起來更真實，不會讓使用者感覺好像是畫面很努力要趕上自己。」

Leland指出，這類需求將影響感測器處理是如何完成，以及攝影機子系統如何開發、繪圖渲染如何與顯示器介面協作，擴及所有的處理器。為此高通正在尋求新的SoC功能區塊，以說服原廠願意多花點錢取得差異化；而現在Daydream則是已經準備好進駐預計年底耶誕節/新年假期上市的產品。

至於Google本身則是積極為Daydream提供所需的內容，其地圖應用程式的街景服務(Street View)以及線上視訊平台YouTube，都已經準備好提供360度照片以及視訊，YouTube也能支援空間音訊以及運動強度評分(motion-intensity ratings)。

此外Google也與好萊塢(Hollywood)與各家媒體商接觸，除了與Imax等業者開發配備16台攝影機的360度影像拍攝裝置，派拉蒙(Paramount)、發現頻道(Discovery)以及紐約時報(The New York Times)等都是其VR內容合作夥伴。

Daydream平台開發工具已經開始提供，能讓使用C++語言的程式設計師取得底層應用程式介面(API)與硬體；Google總部的Daydream實驗室一直試圖一天快速開發兩個VR實驗性應用程式原型，將透過發表部落格文章的方式分享其學習經驗。

Leland結論指出，Android平台上的VR體驗，將會讓那些認為VR頭戴式裝置都需要跟一台PC綁在一起的人驚艷。而使用者只要耐心等待幾個月，就可以看到是否蘋果(Apple)也會加入這個趨勢，讓iPhone 7也有自己的VR方案…或者該公司看到的是另一種「現實」。

編譯：Judith Cheng

(參考原文： Google’s Daydream is Silicon Reality，by Rick Merritt)

活動簡介

未來寬能隙半導體元件會在哪些應用成為主流？元件供應商又會開發出哪些新的應用寬能隙元件的電路架構，以協助電力系統開發商進一步簡化設計複雜度、提升系統整體效率？TechTaipei「寬能隙元件市場與技術發展研討會」將邀請寬能隙半導體的關鍵供應商一一為與會者解惑。

贊助廠商

立即報名