推薦產(chǎn)品
RECOMMENDED PRODUCTS貴廣網(wǎng)絡(luò)應(yīng)用廣電大數(shù)據(jù)
同洲攜手貴廣網(wǎng)絡(luò)實踐應(yīng)用廣電大數(shù)據(jù)
廣電行業(yè)的內(nèi)容生產(chǎn)與傳播消費過程中產(chǎn)生的海量數(shù)據(jù)蘊含著豐富的價值,探索實踐廣播電視行業(yè)應(yīng)用大數(shù)據(jù)技術(shù),有助于提升廣電內(nèi)容生產(chǎn)的能力、創(chuàng)新廣電業(yè)務(wù)的產(chǎn)品、提升廣電運營服務(wù)水平,從而助力廣電媒體融合發(fā)展,推動廣播電視行業(yè)產(chǎn)業(yè)升級。
可見,在廣電行業(yè)內(nèi)并不缺乏大數(shù)據(jù),關(guān)鍵在于如何應(yīng)用這些大數(shù)據(jù)!同洲攜手貴廣網(wǎng)絡(luò)在實踐應(yīng)用廣電大數(shù)據(jù)的路途上為這個問題做了最好的注解。
截止2019年11月,貴廣網(wǎng)絡(luò)大數(shù)據(jù)系統(tǒng)已經(jīng)采集到數(shù)據(jù)的機頂盒數(shù)超過310萬臺,每一天產(chǎn)生原始數(shù)據(jù)超過15億條,通過數(shù)據(jù)清洗,日均產(chǎn)生約4000萬條完整播放記錄。
2019年,貴廣網(wǎng)絡(luò)在實現(xiàn)所有雙向機頂盒的數(shù)據(jù)采集后,開始建設(shè)數(shù)據(jù)分析平臺,通過對采集數(shù)據(jù)分析,實現(xiàn)了直播收視率、點播及時移回看排行分析,用戶流失預(yù)警、網(wǎng)絡(luò)流量監(jiān)控預(yù)警,專區(qū)頁面訂購率,終端用戶行為事件分析等功能,另外基于大數(shù)據(jù)系統(tǒng)分析結(jié)果對接SMP網(wǎng)管,實現(xiàn)了用戶點播錯誤碼統(tǒng)計預(yù)警,用戶話單提取等功能,幫助運維人員快速定位故障。同時,貴廣網(wǎng)絡(luò)大數(shù)據(jù)平臺將數(shù)據(jù)提供給推薦系統(tǒng)、廣告系統(tǒng)等第三方業(yè)務(wù)系統(tǒng),實現(xiàn)智能推薦、精準(zhǔn)廣告、個性化門戶等新業(yè)務(wù),提升用戶體驗。
接下來,我們將帶您看看同洲是如何三步走,攜手貴廣網(wǎng)絡(luò)實踐應(yīng)用廣電大數(shù)據(jù)的!
一、技術(shù)驅(qū)動,建設(shè)大數(shù)據(jù)平臺總體架構(gòu)
大數(shù)據(jù)關(guān)鍵技術(shù)涵蓋從數(shù)據(jù)存儲、處理、應(yīng)用等多方面的技術(shù)。根據(jù)大數(shù)據(jù)的處理過程,可將其分為數(shù)據(jù)采集、數(shù)據(jù)預(yù)處理、數(shù)據(jù)存儲、數(shù)據(jù)分析與挖掘、數(shù)據(jù)應(yīng)用等環(huán)節(jié)。因此,在平臺架構(gòu)上,貴廣網(wǎng)絡(luò)大數(shù)據(jù)平臺主要架構(gòu)為數(shù)據(jù)采集層、應(yīng)用層和展示層。
數(shù)據(jù)采集層主要通過各種方式(包括系統(tǒng)接口、監(jiān)測設(shè)備、監(jiān)測模塊、機頂盒等)獲取子系統(tǒng)需要的數(shù)據(jù),并且通過接口適配,提供通用的數(shù)據(jù)訪問接口,實現(xiàn)對數(shù)據(jù)的存取等操作,屏蔽數(shù)據(jù)異構(gòu)帶來的對平臺的影響。同時,實現(xiàn)數(shù)據(jù)的對象化,面向上層軟件模塊提供面向?qū)ο蟮臄?shù)據(jù)訪問。
系統(tǒng)應(yīng)用層主要通過各個軟件模塊的建設(shè),對數(shù)據(jù)采集層獲取的數(shù)據(jù)進行綜合計算、統(tǒng)計、分析,針對不同的管理對象,有不同的管理策略,并且系統(tǒng)提供對數(shù)據(jù)增、刪、改、查的基本管理功能。
系統(tǒng)展示層提供列表、圖表、曲線圖等多種呈現(xiàn)方式,方便用戶直觀了解并管理業(yè)務(wù)以及監(jiān)測當(dāng)前性能。同時,系統(tǒng)支持對機頂盒、性能數(shù)據(jù)等信息綜合統(tǒng)計分析,幫助用戶快速并直觀的了解平臺業(yè)務(wù)的運營情況。
二、應(yīng)用功能為本,從而精準(zhǔn)感知用戶需求
同洲在建設(shè)貴廣網(wǎng)絡(luò)大數(shù)據(jù)平臺時,以應(yīng)用功能為本,充分挖掘媒體內(nèi)容數(shù)據(jù)、分析用戶數(shù)據(jù),從而精準(zhǔn)感知用戶需求,并將其轉(zhuǎn)化為可廣泛應(yīng)用在廣播電視內(nèi)容的采集與生產(chǎn)、節(jié)目的推薦與經(jīng)營、用戶的跟蹤與服務(wù)、輿情的監(jiān)控與管理、節(jié)目的傳輸與分發(fā)以及節(jié)目監(jiān)控監(jiān)管等領(lǐng)域的數(shù)據(jù)輸出。
其中主要功能包括:
數(shù)據(jù)采集功能——
1)離線數(shù)據(jù)采集功能。通過離線FTP定時采集高清互動平臺、IP視頻平臺和OTT平臺數(shù)據(jù),收集現(xiàn)網(wǎng)的用戶點播及直播數(shù)據(jù),進行清洗后,存入離線數(shù)據(jù)庫中。
2)在線數(shù)據(jù)采集功能。通過終端機頂盒采集探針模塊實時在線上報nginx負載地址,經(jīng)過在線采集模塊分析清洗后,存入在線數(shù)據(jù)庫中。
數(shù)據(jù)分析及報表功能——
1)用戶趨勢分析功能。通過離線數(shù)據(jù)收集全網(wǎng)所有互動用戶的每日活躍度情況,可根據(jù)區(qū)域信息,分析近期的新增用戶,在線用戶數(shù)據(jù),并呈現(xiàn)在報表中,供運營分析使用
2)用戶流失預(yù)警功能。基于大數(shù)據(jù)的信息收集的情況下,利用用戶播放行為數(shù)據(jù),付費行為數(shù)據(jù),使用機器學(xué)習(xí)方法,推斷一段時間后可能會流失的用戶數(shù)據(jù),給系統(tǒng)運營,挽留用戶提供數(shù)據(jù)支持,提高工作效率。
3)直播頻道收視數(shù)據(jù)分析及報表功能。通過離線數(shù)據(jù)收集全網(wǎng)所有互動用戶直播數(shù)據(jù)信息,對直播頻道的收視率等數(shù)據(jù)進行計算,輸出報表呈現(xiàn)。
4)點播、時移及回看數(shù)據(jù)分析及用戶播放清單報表功能。通過離線數(shù)據(jù)收集全網(wǎng)所有互動用戶點播數(shù)據(jù)信息,對媒資點播排行,欄目點播排行,用戶時移播放及用戶回看播放進行計算分析,并可根據(jù)區(qū)域信息,輸出用戶播放清單等詳細報表
5)組播切換清單功能。針對IP平臺用戶,同時收集用戶在觀看直播過程中的組播切換情況,輸出報表,用于分析終端用戶區(qū)域的網(wǎng)絡(luò)狀況信息。
6)在線數(shù)據(jù)分析及報表功能。根據(jù)終端探針上報的用戶行為,對用戶行為事件進行分類采集,并分析清洗,輸出用戶行為報表功能。
7)專區(qū)用戶訂購率及點播轉(zhuǎn)化率報表。根據(jù)特定的專區(qū)用戶點播行為及訂購信息數(shù)據(jù),分析計算,輸出用戶點播轉(zhuǎn)化率及專區(qū)用戶的訂購率報表功能。
8)流量數(shù)據(jù)報表功能。根據(jù)對接貴廣網(wǎng)絡(luò)的網(wǎng)管平臺,采集流量數(shù)據(jù)信息,輸出流量數(shù)據(jù)報表功能
9)數(shù)據(jù)采集數(shù)據(jù)輸出功能。依據(jù)大數(shù)據(jù)系統(tǒng)的輸出規(guī)范,可根據(jù)第三方需求,通過在線接口,離線FTP等多種方式輸出數(shù)據(jù),供第三方系統(tǒng)使用。
三、守正創(chuàng)新,分步賦能貴廣網(wǎng)絡(luò)
同洲在貴廣網(wǎng)絡(luò)大數(shù)據(jù)平臺的建設(shè)策略上,一方面要明確需求目標(biāo),做好整體規(guī)劃。另一方面立足業(yè)務(wù)現(xiàn)實,分步推進大數(shù)據(jù)平臺的建設(shè)與完善。在結(jié)合貴廣網(wǎng)絡(luò)當(dāng)前需求分析的基礎(chǔ)上,分步推動大數(shù)據(jù)業(yè)務(wù)應(yīng)用服務(wù)建設(shè),增加平臺上的業(yè)務(wù)。
在后續(xù)的規(guī)劃建設(shè)中,同洲將持續(xù)開發(fā)更多應(yīng)用功能,不斷推動貴廣網(wǎng)絡(luò)的智慧發(fā)展,全面提升貴廣網(wǎng)絡(luò)的商業(yè)價值,為貴廣網(wǎng)絡(luò)產(chǎn)業(yè)升級提供支撐。其中包括:
數(shù)據(jù)采集可視化編輯功能——
對當(dāng)前的數(shù)據(jù)采集系統(tǒng)及報表輸出功能進行功能優(yōu)化改造,將大數(shù)據(jù)做成可視化編輯,數(shù)據(jù)結(jié)果可自定義排列,自定義選擇所有字段,自定義報表樣式,自定導(dǎo)出結(jié)果,自定義查詢條件。
用戶畫像功能——
基于數(shù)據(jù)采集的用戶行為分析,將用戶的每個具體信息抽象成標(biāo)簽,利用這些標(biāo)簽將用戶形象具體化,建立用戶畫像功能,針對特定的用戶群體進行差異化服務(wù)。
收視報告分析——
可支持廣告運營大數(shù)據(jù)分析,廣告精準(zhǔn)投放。開機畫面廣告、頻道Banner 條廣告、音量調(diào)節(jié)畫面廣告是廣電網(wǎng)絡(luò)運營商最主要的廣告形式。用戶行為分析數(shù)據(jù)報告能給廣電運營商提供充足的數(shù)據(jù)支撐,根據(jù)收看率高低、用戶收看時間等條件,把開機畫面廣告、頻道Banner 條廣告和音量調(diào)節(jié)畫面廣告按照區(qū)域、時段和收視熱度分組打包,精細化運營廣告資源。
智能推薦,提升用戶ARPU 值。視頻的獲取渠道越來越多,基本上可以讓用戶在任何時間,任何地點,任何有屏的設(shè)備上獲得。視頻的播發(fā)越來越智能化,讓用戶以最簡單的方式得到自己想看的內(nèi)容。視頻智能推薦成為所有的視頻業(yè)務(wù)運營商的標(biāo)配。如何讓數(shù)字電視
用戶得到最佳的視頻觀賞感受,除了推送其他渠道無法做到的更加高清的視頻節(jié)目源之外,我們還需要感知用戶的收視習(xí)慣,積極向用戶推薦其最有可能收看的節(jié)目以及讓用戶在家中若干娛樂屏之間漫游。最終把用戶留在廣電網(wǎng)內(nèi),提升廣電網(wǎng)視頻資源利用率和提升用戶ARPU 值。
聚類分析、軌跡分析留住客戶 。大數(shù)據(jù)分析能夠通過聚類分析,了解每個客戶日常喜愛收看的節(jié)目類型和頻道類型,以及對最新大片的可能購買度,讓客戶經(jīng)理能挑出最有可能購買產(chǎn)品的前20%的用戶,采取上門拜訪或電話推廣的方式,迅速有效的達成交易。
運維上的應(yīng)用——
有效處理故障 。用戶終端通過雙向網(wǎng)絡(luò)將其狀態(tài)數(shù)據(jù)、管理控制信息等數(shù)據(jù)上傳,終端管理系統(tǒng)通過雙向協(xié)議,在通過對終端設(shè)備進行開機管理、認證鑒權(quán)、參數(shù)讀寫、日志上報、升級管理、故障診斷等管理操作的基礎(chǔ)上,實現(xiàn)用戶終端的可視化管理、終端運行狀態(tài)可呈現(xiàn)、終端可控、故障可遠程診斷。終端管理系統(tǒng)能夠以定制化報表,以各種粒度提供當(dāng)前系統(tǒng)網(wǎng)絡(luò)、業(yè)務(wù)的運營狀態(tài)的信息,提供給系統(tǒng)管理人員了解網(wǎng)絡(luò)當(dāng)前的運營情況,為高層進行系統(tǒng)決策提供依據(jù),提升廣電運營商的服務(wù)質(zhì)量和管理效率。
運維趨勢預(yù)測。 現(xiàn)在大部分廣電網(wǎng)絡(luò)運營商在用戶故障處理方面都是事后維護,即在用戶收看電視出現(xiàn)了問題,撥打電話申告故障后,運營商才派人處理,運維工作非常被動。 1)大數(shù)據(jù)技術(shù)可以實時采集和分析用戶的狀態(tài),在用戶端網(wǎng)絡(luò)或用戶終端出現(xiàn)告警時,及時響應(yīng),在用戶故障申告之前解決問題,改善用戶體驗。 2)在管理系統(tǒng)的運營中,會積累足夠多的數(shù)據(jù),形成整個網(wǎng)絡(luò)的運行狀態(tài)曲線,由管理系統(tǒng)根據(jù)一定的算法計算出網(wǎng)絡(luò)的運行趨勢數(shù)據(jù)。當(dāng)系統(tǒng)監(jiān)測到當(dāng)前的網(wǎng)絡(luò)運行狀態(tài)偏離了趨勢曲線時,系統(tǒng)發(fā)出預(yù)警信息,方便運維人員及時對網(wǎng)絡(luò)進行檢測和調(diào)整,把問題解決在尚未大面積發(fā)生的狀態(tài)。 3)在對VIP 客戶的維護中,記錄VIP 客戶的終端使用習(xí)慣,如每周開關(guān)機頻次、切換頻道次數(shù)、切換應(yīng)用次數(shù)等數(shù)據(jù),并分析每個客戶的收視喜好。當(dāng)實際發(fā)生的情況與歷史記錄相對差異度超過一定的閥值時,系統(tǒng)發(fā)出告警。
Key words: