最近,人工智能(AI)頻頻刷屏,各行各業(yè)的AI應(yīng)用層出不窮,AI似乎已經(jīng)變得無(wú)所不在。在媒體行業(yè),AI應(yīng)用也漸漸走入視野,智慧媒體時(shí)代呼之欲出。在傳統(tǒng)媒體領(lǐng)域領(lǐng)先多年的成都索貝數(shù)碼科技股份有限公司(以下簡(jiǎn)稱索貝),當(dāng)然不逞多讓,在AI領(lǐng)域積極布局,除自建團(tuán)隊(duì)之外,還積極各AI頭部企業(yè)尋求合作,面向媒體應(yīng)用場(chǎng)景,走出了一條獨(dú)特的自主創(chuàng)新之路。
AI面向媒體應(yīng)用場(chǎng)景
之前很多人對(duì)索貝的印象還停留在傳統(tǒng)廣電企業(yè)上,實(shí)際上,索貝通過(guò)積極的戰(zhàn)略布局,在視頻云、大數(shù)據(jù)、區(qū)塊鏈等領(lǐng)域進(jìn)展迅速,并在媒體AI領(lǐng)域形成突破。
比起阿里、騰訊等互聯(lián)網(wǎng)巨頭,作為世界級(jí)專業(yè)視頻技術(shù)及解決方案提供商及視頻技術(shù)創(chuàng)新工場(chǎng),索貝更關(guān)心媒體用戶在AI落地上的訴求和痛點(diǎn)。通過(guò)調(diào)研發(fā)現(xiàn),隨著人工智能技術(shù)越來(lái)越多普及,其他行業(yè)應(yīng)用落地的發(fā)展,媒體行業(yè)用戶對(duì)AI落地期望很高,例如,根據(jù)文稿能直接制作出短視頻;體育、綜藝、時(shí)政、影視等多種節(jié)目形態(tài)的快速智能剪輯;新聞節(jié)目中各片段的拆分,綜藝節(jié)目拆分,影視劇關(guān)鍵段落拆分等。
根據(jù)這些應(yīng)用場(chǎng)景,最開(kāi)始,索貝也像其他廠商一樣,只是將AI能力引入到系統(tǒng)中來(lái),原來(lái)的轉(zhuǎn)碼、合成之類的服務(wù)器,加上新的AI執(zhí)行器,比如語(yǔ)音識(shí)別、人臉識(shí)別等等,以集成為主。但很快,通過(guò)不斷的實(shí)踐,索貝和客戶達(dá)成共識(shí),這樣的做法行不通。
因?yàn)樵贏I的三大要素——算法、算力、數(shù)據(jù)中,算法和數(shù)據(jù)都會(huì)因不同場(chǎng)景而不同,如果在媒體行業(yè)中AI能力“有什么用什么”,一方面在業(yè)務(wù)場(chǎng)景上有局限性,另一方面也因?yàn)橛?xùn)練數(shù)據(jù)集的差異,在泛化能力上是有局限性。因此,索貝需要的是實(shí)現(xiàn)“要什么做什么”,實(shí)現(xiàn)媒體行業(yè)獨(dú)有的AI。
只有建立起面向用戶價(jià)值場(chǎng)景的AI應(yīng)用的實(shí)際能力,才能實(shí)現(xiàn)AI與媒體行業(yè)深層次的融合,所以索貝AI的做法是——面向媒體場(chǎng)景算法和數(shù)據(jù),實(shí)現(xiàn)媒體行業(yè)自己的AI技術(shù)與能力。
自建團(tuán)隊(duì)攻關(guān)AI
在人工智能方面,索貝堅(jiān)持長(zhǎng)期的資源、資金和人力投入。根據(jù)對(duì)用戶需求和痛點(diǎn)的分析,索貝專門成立媒體智能實(shí)驗(yàn)室,由30余名AI算法工程師組成算法研究團(tuán)隊(duì),并與上海交大、四川大學(xué)、鵬城實(shí)驗(yàn)室等科研單位進(jìn)行深度合作。目前,索貝已經(jīng)發(fā)表SCI檢索已達(dá)10篇,專利10余項(xiàng)。最近一篇被接受的SCI論文《孿生標(biāo)簽LDA:一種面向文檔分類的監(jiān)督式主題模型》。
據(jù)了解,索貝是業(yè)內(nèi)唯一這樣做的廠商,索貝認(rèn)為,有自建團(tuán)隊(duì)才有自主研發(fā)算法的可能,這也符合國(guó)家核心技術(shù)全面國(guó)產(chǎn)化,核心設(shè)備國(guó)產(chǎn)化的發(fā)展要求。索貝始終堅(jiān)持AI結(jié)合業(yè)務(wù)的研發(fā)原則,旨在打造最懂媒體行業(yè)的人工智能技術(shù)。
對(duì)于通用的,成熟的AI能力,索貝已與商湯、訊飛、華為、騰訊等廠商也建立了戰(zhàn)略合作關(guān)系,不論在技術(shù)和市場(chǎng)層面都有著良好的合作。索貝始終站在客戶角度,以實(shí)際應(yīng)用效果出發(fā),為客戶選擇提供更好的AI落地效果。
推進(jìn)媒資智能化發(fā)展
在BIRTV2020期間,索貝自主研發(fā)的新一代融合媒體內(nèi)容管理平臺(tái)Media Asset Hive(簡(jiǎn)稱MAH)正式亮相。
索貝AI團(tuán)隊(duì)針對(duì)新聞、體育、綜藝節(jié)目等不同種類節(jié)目建立起智能化標(biāo)簽體系,以自研AI算法為支撐,產(chǎn)生了豐富的語(yǔ)義標(biāo)簽,提高內(nèi)容搜索效率,支撐了內(nèi)容推薦,快速編目,內(nèi)容交換等應(yīng)用場(chǎng)景,為電視臺(tái)以及其他媒體行業(yè)提供專業(yè)內(nèi)容管理解決方案及服務(wù)。
MAH獨(dú)創(chuàng)性得實(shí)現(xiàn)了新聞融合生產(chǎn)過(guò)程中各種內(nèi)容對(duì)象關(guān)聯(lián)關(guān)系的管理。結(jié)合智能內(nèi)容挖掘,結(jié)合智能內(nèi)容挖掘,MAH可顯著降低節(jié)目制作過(guò)程中的人力成本,提高新媒體發(fā)布的處理效率,將更多的人力從資源管理、素材歸檔等工作中釋放到內(nèi)容創(chuàng)作中去,帶來(lái)良好的社會(huì)效益和經(jīng)濟(jì)效益。
MAH還是媒體行業(yè)第一個(gè)投入實(shí)用的Cloud Native媒體內(nèi)容管理平臺(tái),讓媒資系統(tǒng)不再只是具備歸檔、編目等簡(jiǎn)單功能,而是要不斷推動(dòng)媒資向平臺(tái)化演進(jìn)。在今年全國(guó)兩會(huì)期間,廣東臺(tái)創(chuàng)新運(yùn)用了“5G+AI”的創(chuàng)新技術(shù),實(shí)現(xiàn)了每天約3小時(shí)的直播收錄、智能分析、基于分析結(jié)果快速編輯、發(fā)布,索貝新一代MAH智能媒資系統(tǒng)也首次在省級(jí)臺(tái)中亮相,提高了生產(chǎn)效率。
自8月17日起,索貝VR全景展廳在官方網(wǎng)站(www.sobey.com)正式開(kāi)啟,屆時(shí),MAH也開(kāi)放體驗(yàn),所有人可以通過(guò)VR互動(dòng)的方式,訪問(wèn)相關(guān)頁(yè)面,用自己的視頻、圖片等素材,真切體驗(yàn)到MAH的強(qiáng)大智能以及電視臺(tái)AI應(yīng)用的真實(shí)環(huán)境。
新聞AI制作大放異彩
在2019年的國(guó)慶大閱兵現(xiàn)場(chǎng),中央廣播電視總臺(tái)AI剪輯的短視頻令人印象深刻,其幕后支撐技術(shù)正是來(lái)自索貝。
索貝牽手央視新聞對(duì)現(xiàn)場(chǎng)的閱兵方陣進(jìn)行了AI視頻剪輯的實(shí)地操作。從大閱兵三軍儀仗隊(duì)進(jìn)入視線開(kāi)始,通過(guò)新聞云,AI引擎能夠自動(dòng)編輯前方70余個(gè)機(jī)位的畫面內(nèi)容,平均耗時(shí)90秒。而如果以人工剪輯,每個(gè)方陣的視頻剪輯完成需30分鐘。整個(gè)閱兵期間,平均每隔3分鐘就有一篇新聞從索貝的系統(tǒng)發(fā)出面向用戶,滿足了新聞的時(shí)效性。這是央視新聞新媒體首次運(yùn)用AI人工智能技術(shù)到短視頻剪輯當(dāng)中,同時(shí)也是索貝媒體智能布局成果展示,事實(shí)證明,索貝實(shí)至名歸。
索貝AI團(tuán)隊(duì)在接到任務(wù)后,經(jīng)過(guò)梳理發(fā)現(xiàn),針對(duì)新聞新媒體國(guó)慶報(bào)道AI剪輯需求,實(shí)現(xiàn)敬禮動(dòng)作識(shí)別、有效鏡頭檢測(cè)、方陣識(shí)別等這些算法都不是通用算法,市場(chǎng)上想買都買不到,必須依靠索貝自身的算法研究團(tuán)隊(duì)。最終,團(tuán)隊(duì)基于索貝麒智AI平臺(tái),開(kāi)發(fā)出視頻AI智能剪輯系統(tǒng),利用平臺(tái)積累的計(jì)算機(jī)視覺(jué)、音頻、自然語(yǔ)言處理算法,進(jìn)行快速定制、訓(xùn)練算法提取視音頻特征,同時(shí)結(jié)合平臺(tái)具備的大數(shù)據(jù)分析處理算法及工具,進(jìn)一步完成數(shù)據(jù)及特征分析整合,形成應(yīng)用所需的有用的信息及知識(shí),最后結(jié)合編輯場(chǎng)景所需完成最后的知識(shí)應(yīng)用,形成AI編輯生產(chǎn)力,完成之前需要大量人力投入的編輯工作。AI剪輯平臺(tái)以圖像識(shí)別技術(shù)為基礎(chǔ),結(jié)合語(yǔ)音識(shí)別等人工智能技術(shù),設(shè)計(jì)開(kāi)發(fā)了隊(duì)伍方陣識(shí)別、有效鏡頭檢測(cè)、自動(dòng)合成剪輯三大類智能處理模型,通過(guò)三類模型的綜合應(yīng)用,實(shí)現(xiàn)智能剪輯功能。
也就是說(shuō),在媒體行業(yè),一項(xiàng)AI技術(shù)的落地要經(jīng)過(guò)深度業(yè)務(wù)理解、工程建模,再配合自研的特定算法選型、特定數(shù)據(jù)訓(xùn)練和調(diào)優(yōu)以及相關(guān)領(lǐng)域的知識(shí)才能完成,這恰好也是通用AI廠商所欠缺的。
事實(shí)證明,索貝面向媒體融合的AI道路是正確的,索貝AI應(yīng)用不斷落地。除了70周年大閱兵AI剪輯,早在2019年初,索貝第一次將智能技術(shù)用于體育節(jié)目后期制作——CBA籃球智能剪輯,大幅提升體育賽事縮編效率,快速實(shí)現(xiàn)互聯(lián)網(wǎng)發(fā)布。2020年春晚進(jìn)行時(shí),索貝又第一次將AI應(yīng)用在綜藝制作領(lǐng)域,突破AI剪輯的“綜藝”禁區(qū),實(shí)現(xiàn)了從0到1的驚人突破,超預(yù)期滿足了總臺(tái)電視節(jié)目播出和新媒體發(fā)布的高質(zhì)量要求。
在媒體AI領(lǐng)域的暫時(shí)領(lǐng)先并不會(huì)讓索貝滿足,在未來(lái),索貝將協(xié)同產(chǎn)業(yè)鏈各方,共建和諧的產(chǎn)業(yè)生態(tài),助推智慧媒體時(shí)代加速到來(lái)。
關(guān)鍵詞： AI面向媒體應(yīng)用
