北京冬奧昨日結束,17天的賽事精彩紛呈,各種集錦視頻也引爆新媒體平臺,其中不少可能是阿里AI的“作品”。因為能理解比賽內容、分析運動員動作,阿里AI實時生成多種類型的集錦視頻,冬奧期間共生產出39878段素材,時長超過200小時,覆蓋超200場比賽。
為了讓冬奧賽事短視頻內容兼顧“實效、精彩、人文、美學”,央視體育新媒體、總臺技術團隊、阿里云、阿里巴巴達摩院聯合打造出“AI云智剪”。這款產品可以實時解析并提取賽事視頻中的運動員信息、精彩動作、鏡頭類型、賽程信息、運動員特點等,猶如庖丁解牛。并且,AI還能像裁判一樣對比賽的精彩程度進行打分,給各種視頻素材調整權重,最終根據主題需求生產出豐富多樣的集錦視頻。
經過訓練,AI剪輯還能呈現體育的美感。針對冰球、花滑、速滑、短道速滑等,設置有主題“冰之舞”;針對單板滑雪和自由滑雪,則有主題“雪之舞”。此外,還從速度型賽事的特殊視角,如花滑的旋轉、冰球的進球等,呈現“速度之美”;對于跳躍性動作豐富的滑雪賽事,則塑造“凌空之美”。
依托阿里云強大的流媒體處理能力,直播過程中即可實時生成集錦素材,提升了媒體搶占先機的能力和觀眾享受冬奧賽事的體感。冬奧期間,阿里AI一共生產出39878段視頻素材,時長超過200小時,覆蓋200場以上的比賽,部分發布于央視體育新媒體平臺。
據專家介紹,AI快剪的背后是達摩院自研的視頻理解技術EMC2,只需要一個基于預訓練-多分枝的AI計算模型即可完成多賽事、多來源、多種類的內容理解,單模型效果媲美多模型,且速度更快。EMC2曾在計算機視覺領域頂級會議CVPR2021中獲得5項競賽冠軍,領先業界。
責任編輯:Rex_08