此外,在視聽同步方面,“Sobel”利用圖像算法提取關鍵幀特征,找出音頻信號與原始AI畫面的幀差,保證AI視頻的視聽同步。為了進壹步鞏固技術,Sobel與上海交通大學建立了計算機視覺聯合實驗室,與四川大學建立了自然語言處理與大數據分析聯合實驗室。
今年國慶閱兵,“索貝爾”牽手央視在閱兵廣場進行AI視頻剪輯。從三軍儀仗隊進入視線開始,通過新聞雲,AI引擎可以自動編輯前面70多個座位的圖片內容,平均耗時90秒。但如果是手動編輯,完成每個方塊的視頻編輯需要30分鐘。整個閱兵過程中,平均每3分鐘就有壹條新聞從索貝爾的系統為用戶發出,滿足了新聞的時效性。
如今,人工智能編輯軟件已經逐漸在市場上占據了壹席之地。例如,蘋果的Memories軟件使用人工智能技術來編輯短視頻。它可以瀏覽和識別用戶相冊中最有意義的照片和視頻,自動生成精美的短視頻。但就專業新聞市場而言,索貝爾依然走在行業前列。索貝爾數字智能媒體實驗室經理羅宏誌表示,壹方面,索貝爾長期關註廣電行業,精準把控視頻制作和客戶需求;另壹方面,人工智能技術的深耕研究也為AI剪輯提供了基礎支撐。
談及接下來的計劃,羅宏誌透露,Sobel的AI剪輯系統將會應用到更多領域,比如綜藝、體育等。“當壹場籃球比賽結束時,AI剪輯可以迅速為現場制作精彩的亮點,傳遞球場的信息。”羅宏誌說。在團隊層面,Sobel有壹個30人的團隊負責ai編輯,大部分是R&D人員,包括計算機視覺、自然語言和AI應用開發。(實習生楊國書對本文亦有貢獻)