告別“擋臉”,虎牙AI彈幕背後的直播技術“硬實力”
現如今,大家在看電影、劇集、視訊、遊戲直播的時候,開啟彈幕已經成為規定動作。
彈幕文化之所以受歡迎,是因為一個人在面對手機螢幕的時候,往往會有點孤獨感。而彈幕恰恰給使用者製造了一種社群氛圍,一些好玩的彈幕除了帶給我們腦洞大開的資訊以外,還會給我們的觀看行為帶來娛樂性和互動性,產生一種伴隨感。
但是,彈幕這東西有一個問題,就是彈幕如果太多,就會覆蓋整個螢幕,造成滿屏都是彈幕,甚至會影響了觀看主體。最終變成這樣的結果,越是熱門的內容,彈幕會越多,造成了主播的臉都看不見,彈幕帶給我們一種“喧賓奪主”的感覺。
大家看看下面這段視訊,就知道彈幕有多凶悍了,滿屏的彈幕把劉亦菲和吳亦凡的臉部都給擋住了。黑馬哥由於有密集恐懼症,遇到彈幕轟炸的情況時,往往只能忍痛割愛把彈幕給關了。
不過,最近黑馬哥在虎牙上看直播的時候,發現虎牙直播有一種“AI彈幕”的功能,恰恰能夠解決上面的問題。使用者在虎牙觀看直播時,只需要在彈幕選擇中設定好,彈幕就會地自動閃避人體,從主播的“身後”飄過。據悉該功能採用了AI人景分離技術等黑科技,這是直播行業首次採用相關技術。
這時候,一些經常看直播的老司機可能會說了,這種能繞著人走的彈幕,B站此前也推出過。黑馬哥開啟B站,確實發現B站有些視訊也實現了彈幕不擋臉的功能。
比如,在B站上這條《金庸評論神鵰俠侶》的視訊,就採用了這種彈幕不擋臉的功能。但是,仔細對照這兩個彈幕,又有所區別。比如,B站的這個彈幕,好像PS摳像一樣,讓主體懸浮在場景之上。而虎牙直播的彈幕,則是更加自然,彈幕既能夠繞行,又沒把場景全部覆蓋住。
據分析,虎牙的人工智慧彈幕跟B站的不擋臉彈幕,看著類似,但在技術層面有實質的區別:
一、與B站在已有視訊上‘離線’(Offline)處理不同,虎牙是針對直播進行‘實時’處理。由於直播間主播的位置是移動的,對主播進行實時處理,難度更大,技術要求更高。
二、B站採用類似PS蒙版技術,人工為特定視訊新增蒙版;虎牙採用人景分離技術,讓人物與場景分離,讓彈幕在人物之後,場景之前,所以畫面會更加自然和生動。
三、AI智慧彈幕與傳統直播彈幕相比,幾乎不增加頻寬,而B站在視訊點播中則需要大量的流量來支撐彈幕傳輸,大大降低了頻寬成本。
怎麼樣?虎牙的AI智慧彈幕黑科技,是不是讓人眼前一亮。在黑馬哥看來,在眾多直播平臺中,虎牙是以技術和創新見長的。除了AI智慧彈幕以外,幾年來虎牙在直播黑科技方面不斷攻關,以下幾個方面實現了突破和創新:
一、觀看體驗方面:2014年,虎牙推出1080P高清位元速率直播服務;2016年,啟用HTML5直播技術,讓使用者可以享受到秒開的暢快體驗;2017年,與英特爾達成戰略合作,推出藍光畫質;2018年,虎牙率先推出20M藍光,成為遊戲直播平臺最高傳輸碼流。
二、AI智慧識別方面:2018年8月,6.0版本更新,實現了AI智慧識別,在唱歌、跳舞內容中,提供熱舞中、唱歌中標籤,吃雞類遊戲(刺激戰場、絕地求生、堡壘之夜等)提供擊殺實時數量標籤,方便使用者識別,避免錯過精彩內容。
談到AI識別技術,這裡要多說兩句。虎牙AI識別技術領先的地方,通過人工智慧的深度學習技術,實現了兩大技術革新——實時識別+精準識別。實時識別領域,單品類每秒可以做到100+內容識別,同步實現場景識別(跳舞),語音識別(唱歌),視訊結構化分析(吃雞遊戲遊戲)等多項黑科技,保證延遲控制在5秒以內的行業領先水平。精準識別可以達到95%以上識別率,遠超直播行業水平。
三、“彈幕操控遊戲”: 2018年6月,虎牙直播聯合騰訊WeGame,將觀眾彈幕互動式直播首次引入國內。“彈幕操控遊戲”顧名思義就是在直播時候“依靠彈幕操控遊戲程序和走向”。新模式遊戲人物的走向、技能施放要依靠玩家在直播間的彈幕來決定,彈幕資訊指令相同的數量最高才能指使人物操作,是讓玩家很有參與感的彈幕遊戲。
四、VR全景直播:2017年5月,使用者通過Insta360 VR全景相機可率先在虎牙直播平臺輕鬆實現沉浸式VR全景直播。360度全景功能帶來的現場感和互動效果的提升無疑會直接刺激虎牙直播平臺上所有主播自產內容的積極性。
五、AI智慧彈幕識別:融合AI技術,彈幕智慧識別主播,“繞路而行”以免彈幕覆蓋主播影響觀看體驗。
在黑馬哥看來,移動直播的發展大致分為三個階段:
一、流量為王。 在移動直播最為紅火的2015、2016年,網紅和娛樂直播的概念熱的發燙,映客、花椒等直播平臺,在資本的助推之下,不斷地跑馬圈地,甚至不惜花大價錢邀請明星入駐直播平臺,燒錢和流量為王,成為當時的代名詞。誰能請來流量明星,誰就能夠獲得最大的關注度。
二、內容為王。 隨著大家對秀場直播的審美疲勞,網紅直播慢慢退潮。像虎牙等一些專注遊戲直播的平臺,反而依靠垂直和細分內容取勝,獲得使用者的持續關注度。2018年5月11日,虎牙直播成功在紐約證券交易所掛牌交易,成為遊戲直播第一股。
三、技術為王。 隨著直播行業的競爭越來越激勵,在內容和運營層面,已經沒有什麼門檻可言,直播技術成為直播平臺的核心競爭力。隨著VR技術、AR技術、人工智慧等技術在直播中的應用,直播平臺之間的競爭,很大程度也成為技術的競爭和角力。
在黑馬哥看來,隨著遊戲直播進入下半場,創新性地推出AI彈幕的虎牙直播,憑藉其多項直播黑科技,在技術層面已經跟競爭對手拉開身位。這也讓虎牙在“技術為王”時代,佔據先機,成為未來最具競爭力的遊戲直播平臺。