看到這個(gè)標(biāo)題就熱血沸騰了吧,,繼之前寫的第一篇關(guān)于如何低成本打造虛擬演播室直播MR視頻的文章后,,每天星佳的郵件和微博,微信后臺(tái)都有各種關(guān)于MR視頻拍攝技術(shù)的咨詢和交流,,除此之外還有很多壓根連文章都沒仔細(xì)實(shí)驗(yàn)步驟的懶癌患者們直接上來要工具要成果要分享經(jīng)驗(yàn)(你拿點(diǎn)真情實(shí)意也好,,不然直接就來真金白銀多好,鄙視這類企圖不勞而獲的懶癌患者們?。,。谑潜緦m只能對(duì)那類人表示免疫了,,而星佳更高興的是有機(jī)會(huì)可以和那些拿資源和耐心誠意來談線下店和線下推廣活動(dòng)的合作伙伴,,和仔仔細(xì)細(xì)用心按照教程操作了的朋友彼此切磋,改善流程的耐心交流.... 如果你還沒有看過那篇"處心積慮"和團(tuán)隊(duì)小伙伴們研發(fā)的MR教程,,務(wù)必點(diǎn)進(jìn)來看看我們辛苦熬了很久做出來的成果哦: 附上番外篇,幾個(gè)月前關(guān)于全景視頻直播的技術(shù)分享,,當(dāng)然最近又有新的進(jìn)展了會(huì)在時(shí)機(jī)成熟后分享部分非核心技術(shù)內(nèi)容(廢話,,核心都分享給你了怎么賺錢,養(yǎng)活研究團(tuán)隊(duì)呢,?),,我們很明顯的可以看到直播巨頭也在全景直播的技術(shù)上開始花功夫了,比如斗魚已經(jīng)在內(nèi)測(cè)全景視頻直播了哦,,當(dāng)然花椒也在努力走全民全景直播的路子,,我們拭目以待巨頭能早日支持新技術(shù),給我們帶來新的可能.... 好吧,,太久沒寫東西,難免會(huì)啰啰嗦嗦,,接下來進(jìn)入干貨時(shí)間,,在此之前星佳還需要再苦口婆心的給大家解釋下到底什么才是真正的MR實(shí)時(shí)視頻,那些說美國大片的綠幕摳像,,CG合成,,AE后期處理什么的不再本文討論范圍,雖然實(shí)現(xiàn)在目前的成熟技術(shù)水平來看也不是太難的事情,,但再看看MR成果視頻里的透視關(guān)系,,看看實(shí)體手柄和虛擬世界物體的實(shí)時(shí)互動(dòng),,如果你真的覺得很容易,星佳只能說你太年輕了.....
回想起星佳第一次看到官方的宣傳視頻,之后知道這玩意兒叫MR虛擬現(xiàn)實(shí)混合視頻,,之后和HTC官方工作人員聯(lián)系,,搞了個(gè)微信群,之后認(rèn)識(shí)了圈內(nèi)的很多低調(diào)的大牛們一起研究(致敬感謝VrPlay的老潘,,上海的藍(lán)色月光,,臺(tái)灣微星的朋友,脈輪,,網(wǎng)紅何悠悠,,強(qiáng)氧科技的Seven等等圈內(nèi)低調(diào)的大牛,以后多多照顧星佳哈,,O(∩_∩)O),。 說起來好笑,起初還找了個(gè)拍電影的朋友信誓旦旦的就要做"摳像",,too young too native的星佳覺得有個(gè)綠幕+攝像機(jī)+HTC Vive就可以輕松解決,,萬萬沒想到,居然搞了這么久才折騰出來拿得出手的成果.... 什么是MR(Mixed Reality)視頻,?
Mixed Reality視頻就是VR影像+人的影像合成的視頻,。相比普通錄制電腦屏幕游戲畫面和游戲者錄像實(shí)拍分屏顯示的假VR視頻,Mixed Reality視頻更適合用來做游戲直播和制作虛擬現(xiàn)實(shí)應(yīng)用宣傳視頻,比如著名的google tilt bursh繪畫程序(請(qǐng)點(diǎn)擊查看如下視頻,,其實(shí)星佳正在努力的方向就是實(shí)現(xiàn)以后所有虛擬現(xiàn)實(shí)應(yīng)用讓他人看來能夠有身臨其境的宣傳視頻和直播),。 不得不說下面這兩種經(jīng)常在直播平臺(tái)所謂的VR直播里出現(xiàn)的摳像畫面不得不讓人質(zhì)疑,隨便搞個(gè)綠屏這樣做的VR直播有什么意義呢,?真的可以給消費(fèi)者們普及『萬能的虛擬現(xiàn)實(shí)』嗎,?只會(huì)更霧里看花..... 體驗(yàn)者根本沒有同步映射出現(xiàn)在游戲畫面里,而只看游戲畫面旁觀者根本不明白到底游戲者在干嘛,,對(duì)不對(duì),? 再來看看google給tile brush應(yīng)用做的MR宣傳視頻,很贊對(duì)不對(duì),? 這才是真正的MR視頻,,很酷是不是?還好,,星佳和他的團(tuán)隊(duì)小伙伴們已經(jīng)實(shí)現(xiàn)了哦,,注意看手柄的映射,真實(shí)物理空間的人物比例,,虛擬應(yīng)用里場(chǎng)景的透視,,畫面遮擋關(guān)系哦,。 所以,我們來看看星佳團(tuán)隊(duì)的成果唄(請(qǐng)忽略因場(chǎng)地和資金造成的穿幫): 接下來說說此次探索MR視頻的一些感觸: 1. 實(shí)現(xiàn)方案(詳情操作過程請(qǐng)查閱上篇文檔): 硬件部分:至少5*5的綠幕和均勻布光,,佳能單反或者羅技攝像頭,,第三只HTC手柄,USB延長線和支架,。 軟件部分:首先需要開源軟件OBS做圖層合成和直播功能,,配合若干Unity引擎開發(fā)的適配固定視角的虛擬現(xiàn)實(shí)內(nèi)容即可成功的開啟四分屏模式(需要調(diào)整了很久的cfg配置參數(shù)文件在內(nèi)容根目錄下的幫助), 2. 還需要完善的一些地方: ①由于窮苦星佳的辦公室地方限制,,導(dǎo)致綠幕空間達(dá)不到理想標(biāo)準(zhǔn),,而燈光也因?yàn)榇_實(shí)窮所以買不起貴的而打的并不均勻,由此造成了成果視頻里摳圖的不干凈和穿幫,,在此只想呼吁土豪贊助足夠綠和足夠大的場(chǎng)地讓我們發(fā)揮才華唄,,萬一幫有眼光的土豪投資人賺到錢也說不定呢,隨便想想無數(shù)線下體驗(yàn)店都需要MR視頻幫忙攬客也是個(gè)好生意,,有木有,? ②我們正在探索移動(dòng)機(jī)位的可能性,一方面是由于場(chǎng)地小,,除此之外移動(dòng)相機(jī)和綁在上面的第三只映射手柄不得不再采購一套巨貴的斯坦尼康,,所以移動(dòng)鏡頭的解決方案不得不暫時(shí)擱淺了,但是如上面成果視頻的固定機(jī)位已經(jīng)很酷了是不是,?當(dāng)然目前能夠支持多機(jī)位和移動(dòng)的虛擬攝像機(jī)的內(nèi)容也沒有幾款,,歡迎推薦給星佳來測(cè)試哦。 ③此種方法目前還只適用于Unity引擎開發(fā)的游戲,,大家都在等UE4引擎給出和SteamVR底層的接口,,而經(jīng)過嘗試可以在某些游戲上搞出來四分屏,換句話說,,能成功弄出來四分屏也就離成功確實(shí)不遠(yuǎn)了,,可惜的是,缺乏足夠技術(shù)能力的星佳團(tuán)隊(duì)在底層接口這方面不得不繼續(xù)埋頭苦干,,希望能找到業(yè)內(nèi)樂意合作的前輩們一起做一款集成傻瓜式的軟件,,最大程度的解放MR技術(shù)在配置參數(shù)上的種種麻煩。除此之外,,眼前的當(dāng)務(wù)之急是尋找一款比OBS更好用的專業(yè)軟件,,在實(shí)時(shí)摳像和圖層疊加,分辨率損失上都可以做的更好,,如果這方面你有好的經(jīng)驗(yàn)歡迎分享給星佳哦,。好吧,其實(shí)還缺一款支持4K分辨率的分屏顯示器.... ④目前很多游戲應(yīng)用內(nèi)置的虛擬攝像機(jī)并不支持移動(dòng),,換句話說,,我們真的很希望以后虛擬現(xiàn)實(shí)游戲應(yīng)用開發(fā)者可以直接在開發(fā)的時(shí)候就規(guī)劃好虛擬攝像機(jī),,甚至可以考慮直接內(nèi)置多機(jī)位的虛擬攝像機(jī),方便在做MR視頻和直播的時(shí)候一鍵切換最優(yōu)質(zhì)的視野和觀看角度,。 ⑤說到底還是窮,,所以也就沒辦法談情懷,我們一方面希望Unity和UE4官方可以盡早開放MR底層的接口,,也可以給廣大的虛擬現(xiàn)實(shí)內(nèi)容開發(fā)者給一些相關(guān)MR虛擬攝像機(jī)開發(fā)的DEMO工程文件學(xué)習(xí),,和很多像星佳這樣行業(yè)內(nèi)第一批的吃螃蟹的從業(yè)者們一起把虛擬現(xiàn)實(shí)更早更全面完整的普及到尋常百姓家。 ⑥希望有土豪可以看得到我們正在做的這件事上的價(jià)值,,當(dāng)然也歡迎各種大腿的合作,比如感謝騰訊科技的蘇大大,,淘寶購物節(jié)的線下活動(dòng)MR展示邀約,,還有連鎖加盟店的線下MR展示區(qū)技術(shù)支持等的商業(yè)合作,為了給接下來還會(huì)投入巨大的研究經(jīng)費(fèi)給予力所能及的支持,。 聊了那么多,,我們?cè)賮碚務(wù)勄閼?... 星佳說: 至于為何花這么大的精力去研究MR虛擬現(xiàn)實(shí)混合視頻的制作技術(shù),懂的人應(yīng)該不言而喻,,尤其是對(duì)那些已經(jīng)開了線下體驗(yàn)館的老板們肯定更能明白其中的商業(yè)價(jià)值,,除了可以節(jié)省每個(gè)新玩家的教學(xué)時(shí)間外,也可以給路過的旁觀者一個(gè)很好的實(shí)時(shí)演示畫面,,讓他們看到后就明白這群戴著眼鏡,,拿著手柄走來走去的人到底在干嗎? 除此之外幫各種豐富的行業(yè)商業(yè)應(yīng)用帶來更多新的可能,,比如老師在虛擬內(nèi)容環(huán)境里的真人教學(xué),,多人身臨其境的互動(dòng)展示,科普內(nèi)容等行業(yè)應(yīng)用會(huì)因此改變的展現(xiàn)方式會(huì)更友好,。 當(dāng)然目前最能短平快賺錢的無非還是直播領(lǐng)域,,和Steam,Viveport等分發(fā)平臺(tái)上的游戲介紹視頻制作業(yè)務(wù),,畢竟作為從業(yè)者我們有責(zé)任要給那些玩膩了山寨眼鏡盒子后吐槽虛擬現(xiàn)實(shí)無用的他們一個(gè)看得見的理由,,通過大量優(yōu)質(zhì)的玩家自制MR視頻試圖去說服那些悲觀者去購買一款真正的虛擬現(xiàn)實(shí)設(shè)備,去體驗(yàn)真正的虛擬現(xiàn)實(shí),,而不是幾百塊的山寨盒子,。 最后想說,作為國內(nèi)最早從業(yè)虛擬現(xiàn)實(shí)的行業(yè)從業(yè)者,,我們應(yīng)該抱團(tuán)成長,,把這個(gè)市場(chǎng)做的足夠大,把虛擬現(xiàn)實(shí)給圈內(nèi)人帶來的驚喜讓更多行外的朋友們實(shí)實(shí)在在的了解,,也希望媒體朋友們不要道聽途說,,真正體會(huì)過真正的虛擬現(xiàn)實(shí)再去寫一些文章去傳播,。 拿星佳的經(jīng)驗(yàn)來說,一套跑得起HTC Vive的主機(jī)和電腦根本不像你們寫的那些動(dòng)輒數(shù)萬元,,6888元的HTCVive消費(fèi)者版本+4000元配置的電腦主機(jī)足矣(星佳團(tuán)隊(duì)窮苦的研究員不到4000塊DIY個(gè)主機(jī),,i5+GTX960的低配足矣體驗(yàn)虛擬現(xiàn)實(shí)了)。 有點(diǎn)啰嗦了,,但都是內(nèi)心真實(shí)的寫照,,從寧夏這個(gè)小地方做虛擬現(xiàn)實(shí)起步真的很困難,不過還好我們依然踏踏實(shí)實(shí)的在做著促進(jìn)行業(yè)成長的一些力所能及的小事情,,所以每次去北上廣都很希望能得到去業(yè)內(nèi)頂尖公司拜訪的機(jī)會(huì),,而HTC官方給予了巨大的支持,在此特別感謝HTC北京總部的朋友們,。 15號(hào)又要去北京學(xué)習(xí)了,,參加Kat Walk的發(fā)布會(huì),相信這款國內(nèi)團(tuán)隊(duì)自主研發(fā)虛擬現(xiàn)實(shí)外設(shè):全向跑步機(jī),,會(huì)給業(yè)內(nèi)帶來很大的驚喜,,讓老美也贊嘆不已。 如果您在北京對(duì)于虛擬現(xiàn)實(shí)有些成果想和星佳一起交流的話,,歡迎聯(lián)系人家哦: 微博@星佳是個(gè)小人物 微信:xingjia10086 |
|