戴上頭盔在虛擬世界里遨游，感受全新的視覺盛宴，充滿視覺沖擊力的體驗讓VR（虛擬現(xiàn)實）這一前沿技術(shù)異?；鸨?。近年來，AR（增強現(xiàn)實）技術(shù)與現(xiàn)實世界高度融合，在真實場景中加入虛擬物品，將視覺沖擊體驗帶上了新的高峰。在直播環(huán)境下，利用AR技術(shù)，我們可以看到虛擬巨鯨在現(xiàn)實體育場中躍水而出，可以對停在現(xiàn)實馬路上的虛擬汽車進(jìn)行360度的觀摩。

　　2017年，隨著蘋果在WWDC上發(fā)布ARKit，AR技術(shù)一時間占據(jù)各種有利區(qū)位，成為市場和資本聚焦的重點。

　　“大眾對全新視覺體驗的需要和市場旺盛的需求，讓AR歷經(jīng)蛻變，從之前的象牙塔走入了‘尋常百姓家’。ARKit的推出，推動了AR在全行業(yè)的快速發(fā)展。此外，作為當(dāng)前最前沿的視覺體驗技術(shù)之一，AR技術(shù)在直播中的價值也在不斷被挖掘。”在6月22日的GMTC2018全球大前端技術(shù)大會現(xiàn)場，滬江CCtalk音視頻架構(gòu)專家李超向在場技術(shù)大咖分享AR技術(shù)在直播中的運用現(xiàn)狀及挑戰(zhàn)。

　　GMTC全球大前端技術(shù)大會是由極客邦科技和InfoQ中國主辦的頂級技術(shù)盛會，關(guān)注移動、前端、AI應(yīng)用等多個技術(shù)領(lǐng)域，促進(jìn)全球技術(shù)交流，推動國內(nèi)技術(shù)升級。GMTC為期2天，主要面向各行業(yè)對移動開發(fā)、前端、AI技術(shù)感興趣的中高端技術(shù)人員，大會聚焦前沿技術(shù)及實踐經(jīng)驗，旨在幫助參會者了解移動開發(fā)&前端領(lǐng)域最新的技術(shù)趨勢與最佳實踐。

　　深耕音視頻領(lǐng)域十余年，李超在GMTC 2018音視頻會議專場進(jìn)行了主題為《AR在直播中的應(yīng)用》的技術(shù)分享。

　　“不同于VR技術(shù)完全的虛擬環(huán)境，AR技術(shù)基于現(xiàn)實的環(huán)境加入了虛擬的元素，讓視覺體驗更加真實”，李超舉例說，“例如利用VR技術(shù)，我們可以重現(xiàn)虛擬的物品、環(huán)境；而AR技術(shù)，可以讓虛擬汽車在現(xiàn)實的馬路上‘馳騁’，還可以在我們的手臂上‘戴上’虛擬的手表，而且手表上的時間與現(xiàn)實中的時間能夠保持一致，我們還能根據(jù)需要‘換’手表，‘調(diào)’時間。這種真實與虛擬交叉的特性增加了AR更加逼真的體驗。”

　　互聯(lián)網(wǎng)技術(shù)飛速發(fā)展帶動了直播領(lǐng)域的熱情高漲，在線教育互動直播風(fēng)口重起。作為大前端的重要子領(lǐng)域，音視頻如何優(yōu)化，如何做好實時處理，如何將AR技術(shù)應(yīng)用于在線教育場景，也是目前深受關(guān)注的話題。

　　以VR、AR、MR之間的區(qū)別聯(lián)系、AR技術(shù)的現(xiàn)狀與發(fā)展方向為線索，李超詳細(xì)梳理了AR的核心概念、ARKit與ARCore的運行機制，分享了AR在各種直播系統(tǒng)中的真實應(yīng)用、開發(fā)過程中的技術(shù)難題、解決方案，與與會者探討了AR技術(shù)的未來以及對整個生態(tài)的展望。

　　在現(xiàn)場，李超還列舉了CCtalk平臺上利用AR技術(shù)在線教學(xué)的網(wǎng)師案例——“剖哥”李哲。李哲曾在電視節(jié)目上淡定自若地解剖烤鴨，是名副其實的實踐3D解剖教學(xué)、玩轉(zhuǎn)AR技術(shù)實景模擬教學(xué)的“解剖達(dá)人”，將看似冰冷的解剖學(xué)成為平臺用戶追捧的對象。

　　現(xiàn)場展示視頻中，李哲打開AR設(shè)備，從屏幕里“取出”右心室的圖片，讓它呈現(xiàn)在學(xué)員眼前，可以看到心臟內(nèi)部的三尖瓣正在不停跳動……這是李哲日常使用AR技術(shù)授課的場景。

　　在“剖哥”李哲看來，學(xué)員在學(xué)習(xí)結(jié)構(gòu)類知識時，需要視覺的刺激。對于學(xué)習(xí)者、授課者來說，內(nèi)容是整個教學(xué)過程中的靈魂，而教學(xué)手段的多元化是極為重要的途徑。

　　“AR給直播環(huán)境帶來了諸多可能，讓直播中的交互變得更富趣味性與吸引力，”李超表示，“但目前直播真正完美呈現(xiàn)AR技術(shù)，還需要解決很多問題。諸如遠(yuǎn)端視頻如何在虛擬屏幕上渲染，AR與非AR客戶端、ARKit與ARCore如何互通，AR端無法直接從AR Camera獲取視頻，幀率過高導(dǎo)致傳輸碼流過大等問題。這些都制約AR技術(shù)的實現(xiàn)，當(dāng)然也是諸多工程師致力突破的挑戰(zhàn)。”

　　目前AR發(fā)展尚屬初級階段，李超樂觀地說，“但通過手機我們可以實現(xiàn)部分‘黑科技’，可以將 AR 認(rèn)為是一個瓶子，這個瓶子可以裝天下。我們可以暢想，可以共同營造生態(tài)，盡管AR之路并非坦途”。

　　滬江CCtalk聯(lián)合創(chuàng)始人、CTO楊繼珩認(rèn)為，從當(dāng)前技術(shù)發(fā)展分析，短期內(nèi)AR比VR更容易找到實際應(yīng)用場景，而且在CCtalk平臺已經(jīng)有些老師很扎實的把AR和MR帶到了授課過程中，授課效果、質(zhì)量都很棒，很多學(xué)員第一次看到的時候非常震驚。事實上，很多技術(shù)現(xiàn)在已經(jīng)不是科幻了，更多場景技術(shù)的出現(xiàn)也只是產(chǎn)業(yè)鏈條和時間問題。