推薦閱讀：北京論道嘉賓演講大集合！

(資料圖片)

2023年6月15~16日，由流媒體網(wǎng)主辦，北京新媒體（集團(tuán)）有限公司、北京聯(lián)通、北京電信、北京移動共同協(xié)辦的「北京論道暨第25屆中國智能視聽與科技創(chuàng)新高峰論壇」在北京隆重舉行。

本屆論道以“電視的未來與未來的電視”為主題，邀請到了智慧大屏產(chǎn)業(yè)的行業(yè)專家、企業(yè)翹楚蒞臨齊聚，多維角度透視當(dāng)下大屏市場，共謀電視新未來。

在15日召開的“IPTV價值高峰論壇”上，上海網(wǎng)仕科技有限公司總經(jīng)理曹潔做了主題為《AI助力視頻內(nèi)容生產(chǎn)》的演講。

以下為演講全文：

今年是“AI年”，我們作為視頻生產(chǎn)工具的提供商，今天分享的主題是：AI助力視頻內(nèi)容生產(chǎn)降本增效。

網(wǎng)仕科技成立10年了，我們最開始提供手機(jī)電視直播解決方案，從2015年提供視頻能力平臺整體解決方案，2017年起提供視頻云運(yùn)營平臺，2019年打造了融媒體+融合AI的視頻云生產(chǎn)平臺，2022年，我們推出了基于AI感知編碼解決方案。

我們的主營業(yè)務(wù)包括4個方向：

1. 硬件設(shè)備：在線編碼器、4G背包、便攜式導(dǎo)播臺、數(shù)字解碼器、IPTV多畫面監(jiān)看、HDR工廠等設(shè)備，

2. 視頻云：云直播、云會議等視頻云業(yè)務(wù)

3. 應(yīng)用軟件：流媒體服務(wù)器、協(xié)議轉(zhuǎn)換網(wǎng)關(guān)、直播APP、UGC直播互動系統(tǒng)、虛擬直播室、數(shù)字人等應(yīng)用軟件

4. 平臺解決方案：云轉(zhuǎn)碼、云導(dǎo)播、云收錄、云快編、云拆條、云輪播、云接收等平臺解決方案。

我們主要聚焦于四個方向：

1. 智能化AI：將AI能力融入視頻生產(chǎn)平臺；

2. 互動+會議：將廣電級別的技術(shù)和服務(wù)，注入互聯(lián)網(wǎng)式的設(shè)計(jì)和市場思維；

3. 云化+全協(xié)議棧：基于微服務(wù)架構(gòu)的視頻云解決方案，模糊設(shè)備、技術(shù)和服務(wù)的界限；

4. 移動化+4K+5G背包：基于5G技術(shù)設(shè)計(jì)超高清便攜式直播產(chǎn)品。

我們將專業(yè)級AI引擎應(yīng)用于視頻內(nèi)容生產(chǎn)，提供一站式視頻內(nèi)容生產(chǎn)可視化解決方案，目前已經(jīng)大規(guī)模商用于東方明珠、百視通、海康威視、四川廣信天下傳媒、CNTV、天翼視訊、北京國際云轉(zhuǎn)播公司等。

AI賦能視頻拆條/編輯/編碼

云拆條是基于BS的拆條工具，對直播節(jié)目實(shí)施快速打點(diǎn)、剪輯、拼接等操作，生成點(diǎn)播文件，可實(shí)時快速預(yù)覽，支持時間軸、EPG等快速定位；并對視頻文件實(shí)施非編操作，包括剪切、合并，添加字幕、Logo、圖片及畫面特效，依托于強(qiáng)大的云端后臺處理能力實(shí)現(xiàn)視頻快速碎片化處理，提高內(nèi)容生產(chǎn)效率進(jìn)而實(shí)現(xiàn)內(nèi)容快速發(fā)布。

云拆條支持實(shí)時預(yù)覽拆條內(nèi)容，支持時間軸、EPG等快速定位，支持多段合并，添加logo等，支持幀精確編輯，支持廣告識別+EPG自動拆條。

AI拆條支持智能廣告識別+EPG實(shí)現(xiàn)精準(zhǔn)拆條：上傳頻道的廣告素材，訓(xùn)練模型；在創(chuàng)建任務(wù)中選擇要拆條的頻道設(shè)置拆條的起始結(jié)束時間，創(chuàng)建成功后進(jìn)入拆條任務(wù)列表等待運(yùn)行，拆條運(yùn)行成功后會生成一個去除廣告的成品視頻。

AI智能拆條支持智能廣告識別+EPG實(shí)現(xiàn)精準(zhǔn)拆條：利用網(wǎng)仕科技累積的廣告視頻片段，經(jīng)過訓(xùn)練學(xué)習(xí)得到的序列區(qū)分性深度廣告分類模型，能夠自動識別視頻中的廣告節(jié)目，并通過多特征融合拆分模型，結(jié)合EPG信息實(shí)現(xiàn)對廣告節(jié)目的精準(zhǔn)自動拆分，大大提高節(jié)目制作效率。

AI標(biāo)簽是對視音頻內(nèi)容進(jìn)行多維分析的工具，實(shí)現(xiàn)拆條體系通過標(biāo)簽精準(zhǔn)定位打點(diǎn)，方便融媒體資產(chǎn)的統(tǒng)一檢索和共享交換。AI標(biāo)簽系統(tǒng)基于人臉識別、OCR文字識別技術(shù)、ASR語音識別、NLP自然語言處理等技術(shù)，智能提取視頻中的結(jié)構(gòu)化信息，再通過知識圖譜進(jìn)行一階推理和一階聯(lián)系提取出視頻標(biāo)簽。AI標(biāo)簽可為用戶視音頻內(nèi)容分析、視音頻檢索、智能推薦等業(yè)務(wù)場景提供支持。

云編輯模塊采有B/S構(gòu)架具有快速制作、高效合成、幀精確、全格式兼容、易上手、一體化部署、本地編輯云端合成等特點(diǎn)，可完成視頻快速制作、圖文疊加、加遮擋、配音等應(yīng)用，為新媒體、教育、醫(yī)療、等用戶提供快速的視頻制作生產(chǎn)服務(wù)。

云編輯功能區(qū)包括：1、多軌道操作：根據(jù)媒體類型，分為音頻、視頻和圖像軌道，使視頻編輯操作一目了然。2、便捷導(dǎo)入素材：模塊頁面提供實(shí)時導(dǎo)入功能，在編輯過程中可隨時從本地導(dǎo)入所需的新素材。3、字幕和貼圖：自定義添加字幕和貼圖，可根據(jù)需要調(diào)整字幕和貼圖的大小、位置、字體、顏色等，在時間軸上拖動即可改變字幕和貼圖的時間點(diǎn)和時長。4、高級視頻編輯：云智編輯模塊除了具備視頻疊加等簡單功能，還提供了視頻旋轉(zhuǎn)、視頻翻轉(zhuǎn)、畫面大小調(diào)整和不透明度調(diào)整等功能。5、快速發(fā)布：視頻編輯完成后可在云編輯頁面快速進(jìn)行發(fā)布，可定義節(jié)目名稱、類型、標(biāo)簽、發(fā)行地區(qū)等。

AI審核基于敏感信息知識圖譜，敏感人物分類及樣本庫，成熟的審核標(biāo)準(zhǔn)，圖像要素AI識別、全屏文字OCR提取、語音識別等先進(jìn)技術(shù)，對政治敏感、涉暴、涉黃、廣告等風(fēng)險內(nèi)容進(jìn)行審核，支持文字、圖像、音頻、視頻等各種內(nèi)容形式，滿足用戶多種業(yè)務(wù)場景的需求。

AI感知編碼引擎集感知編碼、AI輔助編碼、智能碼控于一體，兼容點(diǎn)播、直播、RTC等應(yīng)用，節(jié)省帶寬，為企業(yè)降本增效。

AI感知編碼可以對內(nèi)容進(jìn)行感知，對圖像畫質(zhì)進(jìn)行加強(qiáng)；在畫質(zhì)加強(qiáng)的根底上，進(jìn)行碼率調(diào)配的優(yōu)化；聯(lián)合外圍編碼器的優(yōu)化，壓縮帶寬，提升用戶體驗(yàn)。AI提供了對內(nèi)容進(jìn)行剖析和了解的能力，并在此基礎(chǔ)上實(shí)現(xiàn)疾速、最優(yōu)的參數(shù)編碼的預(yù)測。

基于ROI的編碼：所謂ROI就是人眼感興趣的區(qū)域，人眼有注意力機(jī)制，人眼在看一幅圖像或者看視頻的時候有更敏感的區(qū)域。整個視頻輸出之后，人眼最感興趣的區(qū)域，首先是人體，而后是人臉，還有一個是字幕。檢測到感興趣區(qū)域之后，就能夠?qū)@些ROI的區(qū)域進(jìn)行預(yù)處理，做一些邊緣增強(qiáng)銳化。

AI+超分增強(qiáng)修復(fù)引擎，則融合了HDR增強(qiáng)、智能超分辨率、光流插幀、畫質(zhì)增強(qiáng)修復(fù)，提升視頻觀看品質(zhì)。具體能力方面，比如SDR-HDR：提高動態(tài)范圍、提升色深、色域轉(zhuǎn)換；自適應(yīng)判斷噪聲偽影、根據(jù)噪聲強(qiáng)度智能調(diào)節(jié)、智能上色提升質(zhì)感、邊緣輪廓清晰；畫面清晰流暢、精準(zhǔn)性動態(tài)補(bǔ)償、動態(tài)場景更穩(wěn)定；智能遮標(biāo)、去馬賽克、水印、二維碼等。

應(yīng)用場景方面，覆蓋廣電及新媒體部門、視頻內(nèi)容提供商、通信運(yùn)營商、短視頻APP等。比如我們?yōu)榘僖曂ㄌ峁╊l道拆條和視頻素材剪輯服務(wù)，月均生產(chǎn)上萬條節(jié)目內(nèi)容；比如為橙視傳媒提供智慧內(nèi)容生產(chǎn)平臺，為政企部門提供視頻內(nèi)容剪輯服務(wù)；再比如為天翼視訊搭建原子能力平臺，提供視頻素材剪輯能力等。

責(zé)任編輯：房家輝

關(guān)鍵詞：