郭一璞 發自 凹非寺

量子位 報道 | 公衆号 QbitAI

要不大家現在都喜歡科技互聯網公司呢。

如今每年春節，這些公司都是絞盡腦汁、争前恐後想給全國人民拜年、互動，發紅包。

這不，BAT之後，今年快手奪得花魁：央視春晚期間，就壕砸10億。

但可能你還不知道的是，快手雄心不止于發錢拜年獲流量，還想借此機會一展技術實力和品牌。

不老說快手“土”嘛，大概也就是要用最前沿的黑科技玩法，讓大家既要拿錢開心，也要玩得酷炫。

至于這些新技術新玩法跟紅包的直接聯系，我們也基本完整地打聽到了方案。

這就一一解析。

注意，無論年齡、用戶所在地、機型，都可以參與——快手為老鐵都能互動操碎了心。

新年燈牌

如果你還沒有為房間換上春節的裝扮，可以考慮一下快手的「新年燈牌」特效：

在快手上拍攝視頻，就可以在家中牆壁上打上春節祝福的動态燈牌，配上各種紅燈籠等節慶裝飾品，整間屋子都洋溢着過年的氛圍。

辦公場景中，也能一秒挂燈籠：

其中主要用到的是混合現實（MR）技術。該特效将春節元素與真實世界進行融合，結合虛實遮擋、虛拟燈光、平面貼合給用戶提供新的交互體驗。

與AR、VR不同，MR通過實時的空間計算和場景理解，将物理現實與數字世界無縫地混合在一起，創造了一個虛拟和物理對象共存，并且能夠實時交互的環境，從而帶來極具沉浸感的用戶體驗。

MR結合了虛拟和現實，在虛拟的3D空間内實時運行，需要結合真實世界的位置數據進行，借助空間映射和理解，讓機器認識到周邊的邊界、表面、照明等空間光影信息，結合空間的相關對象，創建出混合的世界，再輸入特效素材。

這樣，雖然人看到的是在真實世界上多了一些虛拟素材，但實際上系統感知并理解了整個空間。

因此，目前MR實現所需要的硬件成本比較高，僅僅是輸入設備，就可能要用到ToF攝像頭、3D結構光等特殊設備，比如微軟做了HoloLens 2這款MR頭顯，人民币價格27388元。在一些沒有高端相機模組的手機上是很難實現的。

快手技術團隊介紹，這次用在快手App上的MR算法依靠單攝像頭采集圖像數據，結合深度學習和傳統的立體幾何算法，除可準确估計相機的位置，還實時輸出了高質量的場景深度數據和法向、Mesh等3D信息。

這樣就能将MR效果十分貼合的融合到真實世界圖景中了。

為了保證模型能在手機端運行，快手技術團隊在保證預測質量的情況下，對模型的計算量進行了大幅縮減，這樣，配置不高的手機也能成功運行模型了。

有了這樣的MR技術基礎，除了新年燈牌特效之外，快手上還能實現許多種特效，比如利用3D打光給真實場景添加虛拟光，演唱會的氛圍立馬就有了：

創造出的虛拟物體，也能虛實結合的遮擋在真實物體的後面：

虛實物理碰撞，虛拟的物體碰撞在真實的樓梯上，按照真實世界的物理規律運行，影子也投影在了樓梯上：

模拟物體沿真實世界體表運動，這隻瓢蟲能随着牆壁的形狀、拐角改變行進的方向：

在室外場景也可以：

還可以做真實的流體特效，水倒出來流動的軌迹、反射的光亮幾乎和現實世界肉眼看上去毫無差别：

這些特效都和真實場景緊密結合，呈現效果和在真實場景中出現的事物幾乎一模一樣。

如果你想看更多驚豔細節，不妨點開視頻瞧瞧：

地标AR

除了MR之外，AR技術，也被快手用在了春節互動中。

如果你回家會路過哈爾濱站、鄭州站、廣州站這些火車站，或是會去西安鐘樓這些景點遊覽，打開快手拍視頻，地标建築上就會出現AR煙花特效。

我們提前拿到了效果，在鄭州火車站，就是一隻頭帶金色王冠、有着兩隻萌萌的大眼睛、Q版紅色前爪的青蛙，張嘴呱一聲，頭頂就會出現“快手祝你新春快樂”的煙花字樣：

到了哈爾濱火車站，火車站大樓就變成了一隻揮舞着紅色巨鉗的大螃蟹，從大樓正面張開嘴，伸舌頭吐泡泡，泡泡和快手的新春祝福一起升上天空：

廣州則是一隻鴨子的造型，鴨子頭頂還頂着半個蛋殼，一副剛剛破殼而出的樣子：

拍下視頻，就可以假裝自己去了日本花火大會；在自己家鄉的地标拍下拜年視頻，還可以給全國各地的同學朋友彰顯家鄉特色。

此前，快手也曾在全國不少地标上做過類似的AR特效，比如嶽陽樓上被加上了《嶽陽樓記》的彈幕：

天津勸業場大樓上，AR熊貓爬上了樓頂：

萌娃拜年

第三個技術效果非常适合給親戚朋友發送拜年視頻，名字叫做「萌娃拜年」。

在我們預先體驗到的測試版本中，錄制快手視頻時切換到這個特效，你的臉就會變成小娃娃的樣子，整個人看上去仿佛小了幾（十）歲，非常可愛。

生成的娃娃臉都是根據每個人不同的樣貌特征而“兒童化”的，用到的技術，就是GAN（生成對抗網絡） AR（增強現實），借助部署在本地的模型把視頻效果變成小時候的自己。

堪稱“賣萌利器”，不少明星網紅也加入了賣萌的隊伍，馮提莫就用它來給網友們送上了祝福：

還有胡海泉，你能認出來嗎？

因《野狼disco》而聞名的寶石老舅也在玩這個互動特效：

AR特效會給人物的頭上戴了一頂清朝式帽子，看起來有那麼一點金童玉女的樣子，仿佛下一秒就要被人截屏貼到門口，迎接前來拜年的親友。

至于小時候的自己是不是真的有這麼可愛，那你可能就要等火車到家問一問媽媽了。

我的一生

最後，還有一個玩法：「我的一生」——現在已經上線，可以根據你的容貌特征，生成從小到老不同年齡段自己的樣子，即使你10歲，也能生成80歲的樣子：

效果看上去非常有警示性作用，二三十歲的年輕人呀，如果再不珍惜時間、保養身體，可能很快就會變成滿臉皺紋的樣子呦~

“老了”之後，還能變回10歲的模樣。

“變老”讓人有些難以接受，但“變嫩”就喜聞樂見了。

用這個特效，可以試試讓爺爺奶奶看到自己20歲的模樣，回憶一下青春，也是年夜飯上的精彩環節。

而它背後的技術和前面的「我的一生」類似，用到的是我們熟悉的生成對抗網絡。

讓技術落地

跑過計算機視覺開源算法的同學都知道，讓這些技術落地到移動端并不是一件容易的事兒，尤其是當你并不知道用戶“老鐵”們用的是骁龍855還是性能較低的手機的時候。

而在手機端，不少功能快手都是業内第一次實現的。作為一個主攻下沉市場、擁有2億多日活用戶的應用，快手讓千千萬萬日常生活和科技行業并不交集的普通用戶都有了體驗最新科技的機會，并用這些技術創造内容與樂趣。

這自然是技術情懷。

但另一方面，讓用戶無差别體驗産品的最新技術，自然也是可以讓用戶無差别參與到紅包中來。

算是一個比較聰明的方式吧。

— 完 —

量子位 QbitAI · 頭條号簽約

關注我們，第一時間獲知前沿科技動态