索貝毛靖宇:融合智能應(yīng)用為廣電領(lǐng)域痛點提供解決方案
2019年6月12日,第25屆上海電視節(jié)白玉蘭國際廣播影視技術(shù)研討會IBTC2019,在上海正式召開,“融合媒體新起點,智慧廣電新技術(shù)”是此次活動的主題,由國家廣播電視總局、中央廣播電視總臺、上海市人民政府等單位共同主辦,上海市廣播電視局、上海廣播電視臺承辦,上海市電影電視技術(shù)學(xué)會協(xié)辦,由眾視網(wǎng)DVBCN專業(yè)報道。
成都索貝數(shù)碼科技股份有限公司售前總監(jiān)毛靖宇帶來了題為“賽事智能應(yīng)用”的精彩演講,毛總針對當前比賽新聞的痛點進行了分析,并且通過智能的融合應(yīng)用如何解決這些問題。
根據(jù)清華大學(xué)此前發(fā)布的《中國人工智能發(fā)展報告2018》顯示,目前中國的人工智能企業(yè)數(shù)量達到1011家,美國達到2028家,印度則有800家。
毛總表示AI不是很神秘,如人工智能所解決的方案包括分類問題、預(yù)測問題、決策問題、對話問題等。AI的技術(shù)里有四種,其中,AI技術(shù)有機器視覺、語音識別、NLP、分析決策;AI框架里有Numpy、Pandas、Scikit-Learn、Tensorflow、Caffe、Keras、Torch等;AI算法有分類、回歸、降維、聚類、深度學(xué)習(xí);基礎(chǔ)算法有高等數(shù)學(xué)、矩陣分布、數(shù)值分析和概率統(tǒng)計。
另外,還需要用到大數(shù)據(jù),里面包括數(shù)據(jù)采集、數(shù)據(jù)清洗、數(shù)據(jù)存儲、數(shù)據(jù)分析以及數(shù)據(jù)訪問。
但AI也并不是很簡單的一個技術(shù),AI最終是要解決特定場景的問題,比如有語音識別,自然語音處理,強化學(xué)習(xí),有無監(jiān)督學(xué)習(xí),知識圖譜,計算機視覺等等。
索貝數(shù)碼科技目前擁有的通用智能和業(yè)務(wù)智能,能很好的解決用戶在人工智能實際應(yīng)用上的一些痛點。
例如高級復(fù)合能力在業(yè)務(wù)上的應(yīng)用,有新聞拆條,智能編目,主題推薦,智能去臺標,HD升4K,敏感人物提示,廣告識別,自動唱詞,視頻字幕疊圖,新聞配音等等。
基本原子能力里包括專用智能和通用智能,通用智能是人臉識別,文字識別,語音識別,人臉檢測,翻譯,語音合成;專用智能是圖像修復(fù),NLP,視頻指紋,轉(zhuǎn)場識別,場景檢測和ReID。
人工智能到現(xiàn)在已經(jīng)經(jīng)歷了三次浪潮,而第三次人工智能浪潮革命在2006年已經(jīng)開啟了,2012年ImageNet挑戰(zhàn)深度神經(jīng)網(wǎng)絡(luò)大幅降低錯誤率,2014年索貝公司成立獨立AI團隊深入研究深度學(xué)習(xí)及傳統(tǒng)算法,用以解決廣電領(lǐng)域問題,2017年索貝正式推出集合了人臉、語音、字幕識別以及融合推理AI技術(shù)的【MCH】【智能拆條】【智能CC字幕】的產(chǎn)品,2018年,索貝與上海交通大學(xué)創(chuàng)建計算機視覺聯(lián)合實驗室,與四川大學(xué)創(chuàng)建NLP及大數(shù)據(jù)分析聯(lián)合實驗室,將在計算機視覺、自然語言處理及大數(shù)據(jù)分析方面展開聯(lián)合研究,技術(shù)成果將用于廣電領(lǐng)域采、編、播、存、管各環(huán)節(jié)。
現(xiàn)在,索貝在賽事智能制作方面,已經(jīng)能很好的解決比賽新聞制作的痛點。
傳統(tǒng)的節(jié)目制作中,在觀看比賽、構(gòu)思故事、尋找精彩片段、片段上線編輯,全程都是人工處理;如今通過AI協(xié)助制作,前面部分完全可以通過人工智能來解決,最后一步通過人工,大大縮短了時間,提高了效率。另外,嵌入非編是賽事輔助編輯中一個很好用的插件。
其次,是一場籃球比賽中的分析,那么智能算法、知識圖譜和數(shù)據(jù)的組成完善了球賽中需要的基本元素。
在賽事智能制作方面,如集錦片段、整場縮編,已經(jīng)可以從人力編輯完全轉(zhuǎn)變?yōu)锳I全自動編輯了。
相關(guān)推薦
用于視音頻節(jié)目編輯處理的非編軟件在國內(nèi)生存已經(jīng)有十幾年了。發(fā)展到今天,涇渭分明地形成了兩大流派:一類是主流的國內(nèi)大公司自主知識產(chǎn)權(quán)的產(chǎn)品,這類產(chǎn)品充分照顧國內(nèi)廣電用戶的操作習(xí)慣,針對國內(nèi)電視節(jié)目的制作流程和國人使用習(xí)慣設(shè)計軟件,成為主導(dǎo)我國絕大多數(shù)電視臺用戶的主流非編產(chǎn)品。另外一類是始終在國內(nèi)居于非主流的國外非編軟件,被漢化并配以外掛形式的中文字幕形成產(chǎn)品。這類軟件核心技術(shù)在國外,操作方式與風(fēng)格都是按國外習(xí)慣設(shè)計的,不可能根據(jù)國內(nèi)用戶需求進行軟件的升級與完善。但這類軟件的優(yōu)點就是價格遠比前類軟件低廉,因而在國內(nèi)廣大的非廣電節(jié)目編輯用戶中擁有不小的市場。作為國內(nèi)非線性編輯產(chǎn)品的主導(dǎo)廠家,成都索貝
歲末年初,索貝公司捷報頻傳。繼首批Editmax7全功能高標清一體化非編系統(tǒng)進駐福建廣電集團后,公司又牽手廈門廣電集團新聞網(wǎng)改造項目。作為全國新聞媒體改革的試點,廈門廣電集團于2004年6月掛牌成立,現(xiàn)有綜合、紀實、生活、影視、廈門衛(wèi)視等五套電視節(jié)目,開辦了一系列社會效益和經(jīng)濟效益較好的新聞欄目,深受廣大觀眾的喜愛。此次新聞網(wǎng)改造項目對廈門廣電集團進一步增強節(jié)目制作實力,豐富熒屏內(nèi)容,打造東南沿海強勢傳媒集團具有重要意義。通過與廈門電視臺多次的技術(shù)交流,結(jié)合公司在新聞制播領(lǐng)域的多年實施經(jīng)驗,索貝技術(shù)人員以時效性、交流性、安全性盒共享性為重點,為用戶設(shè)計了一套高可靠、高性能的全數(shù)字化智能非編網(wǎng)絡(luò)
繼贏得“BIRTV2007產(chǎn)品、技術(shù)及應(yīng)用項目評選”應(yīng)用獎殊榮后,9月4日,由重慶廣播電視集團(總臺)和索貝數(shù)碼科技股份有限公司聯(lián)合設(shè)計實施的“重慶廣播電視集團(總臺)內(nèi)容管理基礎(chǔ)平臺”,順利通過了重慶文化廣播電視局組織召開的科技成果鑒定。 鑒定委員會由來自中央電視臺、重慶市文化廣播電視局、廣電總局廣播電視規(guī)劃院、上海文廣集團、廣東電視臺、黑龍江電視臺等單位的多位專家組成,中央電視臺總工程師丁文華任鑒定委員會主任。專家們認真聽取了重慶廣電集團和索貝公司所作的技術(shù)研發(fā)報告、使用報告、檢測報告等,并進行了現(xiàn)場考察,經(jīng)過認真討論后認為:“重慶廣播電視集團(總臺)內(nèi)容管理基礎(chǔ)平臺”從整體的系統(tǒng)構(gòu)架到