在剛結(jié)束的計(jì)算機(jī)視覺頂級(jí)學(xué)術(shù)會(huì)議 CVPR 2021 上,涌現(xiàn)了多種優(yōu)秀的計(jì)算機(jī)視覺 AI 算法解決方案。
其中最佳論文獎(jiǎng)為?GIRAFFE: Representing Scenes as Compositional Generative Neural Feature Fields。該論文關(guān)注當(dāng)下流行的深度神經(jīng)網(wǎng)絡(luò)的圖像合成議題,論文作者提出一個(gè)假設(shè):在圖像合成模型中,假如引入三維環(huán)境,那么生成的過(guò)程將變得更可控,圖像的合成效果將更好,基本原理是在深度學(xué)習(xí)模型中加入新生成的神經(jīng)特征場(chǎng),來(lái)幫助模型更好地理解場(chǎng)景的形成。
不難發(fā)現(xiàn),如今計(jì)算機(jī)視覺等技術(shù)成為學(xué)界的熱點(diǎn),吸引了全球 AI 高手的關(guān)注,中國(guó)也不例外。在本次參與?CVPR 2021 的?21036 名作者中,來(lái)自中國(guó)的選手約占四成,達(dá) 8203 人,遠(yuǎn)超英、美、韓等國(guó)家,并在論文數(shù)、冠軍數(shù)上均有不俗的表現(xiàn)。
作為國(guó)內(nèi)長(zhǎng)視頻網(wǎng)站頭部企業(yè),芒果TV也參與了CVPR2021,并在視頻人體時(shí)空定位賽事中,與國(guó)內(nèi)外高校、研究所等多支計(jì)算機(jī)視覺頂級(jí)研究團(tuán)隊(duì)共同競(jìng)技,最終一舉拿下亞軍!
如今芒果TV?依托行業(yè)領(lǐng)先的技術(shù)硬實(shí)力和品牌影響力,?欲匯聚業(yè)內(nèi)頂尖技術(shù)人才,深度聚焦人工智能的技術(shù)創(chuàng)新與行業(yè)應(yīng)用,共探產(chǎn)業(yè)未來(lái),與中國(guó)(長(zhǎng)沙)馬欄山視頻文創(chuàng)產(chǎn)業(yè)園聯(lián)合舉辦第二屆“馬欄山杯”國(guó)際音視頻算法大賽。該賽踐行“技術(shù)驅(qū)動(dòng)產(chǎn)業(yè)智能化”的宗旨,真正關(guān)注技術(shù)與實(shí)際場(chǎng)景的應(yīng)用與實(shí)踐,致力解決企業(yè)實(shí)際的技術(shù)與業(yè)務(wù)的難題,推動(dòng)產(chǎn)業(yè)升級(jí)。
01 專業(yè)賽題來(lái)自千億企業(yè)的思考,聚焦行業(yè)真實(shí)場(chǎng)景
繼往開來(lái),面向音視頻領(lǐng)域的未來(lái),行業(yè)探索的前沿方向有哪些?作為市值千億的企業(yè),芒果超媒旗下核心平臺(tái)芒果TV一直以來(lái)用實(shí)踐引領(lǐng)產(chǎn)業(yè)升級(jí)。在本次大賽中,根據(jù)多年真實(shí)的業(yè)務(wù)場(chǎng)景,錘煉了三大專業(yè)音視頻技術(shù)賽題:
第一個(gè)賽題是視頻補(bǔ)全,要求參賽者利用?AI 算法對(duì)視頻的內(nèi)容進(jìn)行分析和操作,對(duì)缺失區(qū)域做相關(guān)的補(bǔ)全。
為何視頻補(bǔ)全技術(shù)如此受重視?我們先看個(gè)例子:6 月 30 日,人民日?qǐng)?bào)發(fā)布的#AI 修復(fù)讓李大釗陳延年們露出微笑#沖上熱搜第一,當(dāng)看到?AI 技術(shù)讓李大釗、陳延年等革命先驅(qū)露出微笑時(shí),令人感動(dòng)不已。無(wú)獨(dú)有偶,回首 2020 年頻頻上熱搜的#AI 修復(fù)老北京影像#,同樣讓人為 AI?修復(fù)技術(shù)點(diǎn)贊。
除了對(duì)老照片、老視頻的修復(fù)外,在視頻后期場(chǎng)景中,如何智能、高效地將不和諧因素、穿幫鏡頭、廣告等抹除掉,也是每個(gè)視頻平臺(tái)亟待解決的需求。因此大賽希望借此視頻補(bǔ)全賽題,推動(dòng)相關(guān)技術(shù)進(jìn)步,促進(jìn)行業(yè)發(fā)展,給觀眾呈現(xiàn)蘊(yùn)含高科技元素的視聽盛宴。
第二個(gè)賽題是視頻推薦。隨著移動(dòng)互聯(lián)網(wǎng)時(shí)代的信息井噴,為了匹配海量?jī)?nèi)容和用戶的需求,吸引用戶點(diǎn)擊,視頻推薦技術(shù)功不可沒。否則,無(wú)論用戶如何搜索,也將看到同樣的首頁(yè)內(nèi)容。而視頻推薦則可根據(jù)用戶的行為習(xí)慣,提供個(gè)性化服務(wù),讓不同的用戶看到不同的首頁(yè),提升用戶體驗(yàn),促進(jìn)轉(zhuǎn)化率。
本大賽以芒果 TV點(diǎn)播信息流模塊的實(shí)際推薦業(yè)務(wù)場(chǎng)景為原型,提供海量用戶的真實(shí)點(diǎn)擊行為數(shù)據(jù),希望視頻推薦賽題的參與者設(shè)計(jì)出一套精準(zhǔn)有效的推薦模型,生成多元化的推薦展示結(jié)果。
第三個(gè)賽題是音樂(lè)節(jié)拍檢測(cè)。節(jié)奏和節(jié)拍就像音樂(lè)的骨骼和脈搏,我們可通過(guò)算法自動(dòng)將音樂(lè)節(jié)拍等要素檢測(cè)出來(lái)再衍生應(yīng)用,如此一來(lái),可極大地豐富音樂(lè)的沉浸感和可玩性。目前音樂(lè)節(jié)拍檢測(cè)技術(shù)在音樂(lè)風(fēng)格遷移、K歌評(píng)分、音樂(lè)自動(dòng)配視頻、游戲等領(lǐng)域發(fā)揮重要作用。
本賽題提供1100條音樂(lè)片段和相對(duì)應(yīng)的節(jié)拍、重拍的時(shí)間點(diǎn)標(biāo)注數(shù)據(jù)集,鼓勵(lì)參賽者使用動(dòng)態(tài)規(guī)劃、深度學(xué)習(xí)等方法,提取音頻中的點(diǎn)位,并結(jié)合計(jì)算機(jī)音樂(lè)學(xué),一起趣味玩轉(zhuǎn)節(jié)拍檢測(cè)。
綜上可見,本大賽作為行業(yè)高規(guī)格的國(guó)際賽事,結(jié)合音視頻領(lǐng)域的主流技術(shù)與應(yīng)用,提供海量真實(shí)數(shù)據(jù)集,深剖行業(yè)痛點(diǎn),引領(lǐng)全球開發(fā)者緊跟技術(shù)浪潮。
02 UCD、清北復(fù)交全球名校同臺(tái)競(jìng)爭(zhēng),阿里、騰訊大廠爭(zhēng)相參與
2020 年,首屆“馬欄山杯”國(guó)際音視頻算法大賽吸引來(lái)自中國(guó)、美國(guó)、日本、英國(guó)、德國(guó)、印度、新西蘭等十幾個(gè)國(guó)家和地區(qū)的知名高校、業(yè)界大廠等上千支隊(duì)伍的參與,各界音視頻 AI 高手一起交流學(xué)習(xí)。其規(guī)模之大,影響范圍之廣,在 2020 年的音視頻算法賽事上形成標(biāo)桿效應(yīng)。
今年“馬欄山杯”國(guó)際音視頻算法大賽重磅回歸, 正式賽一經(jīng)啟動(dòng),便吸引到國(guó)內(nèi)阿里、騰訊、小米、京東、華為等 100 多家知名企業(yè)隊(duì)伍參賽,更有紐約大學(xué)、加利福尼亞大學(xué)戴維斯分校(UCD)、清華大學(xué)、北京大學(xué)、復(fù)旦大學(xué)、上海交通大學(xué)等?100 多所全球高校踴躍參與。賽事正如火如荼展開,AI?高手們同臺(tái) PK各展所長(zhǎng),不斷突破技術(shù)瓶頸,如視頻補(bǔ)全賽道上,當(dāng)前暫列第一名的參賽隊(duì)伍比baseline指標(biāo)還高13%。
現(xiàn)在精彩仍在繼續(xù)!第二屆“馬欄山杯”國(guó)際音視頻算法大賽跨越學(xué)術(shù)研究與技術(shù)生產(chǎn),深耕音視頻技術(shù)與產(chǎn)業(yè)應(yīng)用,正火熱進(jìn)行中!
03 豐厚獎(jiǎng)勵(lì),只為最懂 AI算法的你!
本次大賽不僅融合前沿 AI 技術(shù),聚焦企業(yè)真實(shí)應(yīng)用場(chǎng)景,為廣大開發(fā)者提供展示創(chuàng)意和想法的舞臺(tái)。更誠(chéng)意十足準(zhǔn)備了心動(dòng)獎(jiǎng)金和豐厚獎(jiǎng)勵(lì),鼓勵(lì)更多 AI 開發(fā)者加入實(shí)戰(zhàn)!
冠軍團(tuán)隊(duì)有機(jī)會(huì)獲取高達(dá) 33 萬(wàn)獎(jiǎng)金大獎(jiǎng),優(yōu)勝者還有可能獲得大廠 Offer!大賽現(xiàn)已火熱報(bào)名中,高手虛位以待。
獎(jiǎng)項(xiàng)設(shè)置情況如下:
正式賽的賽程安排情況如下:
本次大賽的使命是成就 AI 開發(fā)者,無(wú)論你是?AI 學(xué)習(xí)者、AI工程師、研究者、還是數(shù)據(jù)科學(xué)等其他領(lǐng)域工程師,通過(guò)本次大賽均有機(jī)會(huì)與高手交流學(xué)習(xí)音視頻技術(shù),共同進(jìn)步。
還等什么?趕快掃描下方二維碼,加入大賽,向冠軍出發(fā)!
閱讀原文鏈接: