網(wǎng)絡(luò)可視化即網(wǎng)絡(luò)流量監(jiān)測,以網(wǎng)絡(luò)流量的采集與深度檢測為基本手段,綜合各種網(wǎng)絡(luò)處理與信息處理技術(shù),對網(wǎng)絡(luò)的物理鏈路、邏輯拓撲、運行質(zhì)量、協(xié)議標(biāo)準(zhǔn)、流量內(nèi)容、用戶信息、承載業(yè)務(wù)等進行監(jiān)測、識別、統(tǒng)計、展現(xiàn)、管控,進而大數(shù)據(jù)分析與挖掘,實現(xiàn)網(wǎng)絡(luò)管理、信息安全與商業(yè)智能的一類應(yīng)用系統(tǒng)。
(1)網(wǎng)絡(luò)可視化基本概念
網(wǎng)絡(luò)可視化即網(wǎng)絡(luò)流量監(jiān)測,以網(wǎng)絡(luò)流量的采集與深度檢測為基本手段,綜合各種網(wǎng)絡(luò)處理與信息處理技術(shù),對網(wǎng)絡(luò)的物理鏈路、邏輯拓撲、運行質(zhì)量、協(xié)議標(biāo)準(zhǔn)、流量內(nèi)容、用戶信息、承載業(yè)務(wù)等進行監(jiān)測、識別、統(tǒng)計、展現(xiàn)、管控,進而大數(shù)據(jù)分析與挖掘,實現(xiàn)網(wǎng)絡(luò)管理、信息安全與商業(yè)智能的一類應(yīng)用系統(tǒng)。
網(wǎng)絡(luò)可視化由前端與后端組成,前端通常負責(zé)流量及數(shù)據(jù)的識別采集,后端負責(zé)數(shù)據(jù)的各類分析及應(yīng)用,最終滿足運營商、政府、企事業(yè)單位等客戶對于網(wǎng)絡(luò)優(yōu)化、運營維護、大數(shù)據(jù)運營以及信息安全等方面的需求。
互聯(lián)網(wǎng)目前正從流量及數(shù)據(jù)的被動可視化逐步向可視、可管、可控、可預(yù)測的智能化方向發(fā)展。
網(wǎng)絡(luò)可視化行業(yè)的發(fā)展階段,業(yè)內(nèi)通常劃分為三個階段,分別為“網(wǎng)絡(luò)使用分析”、“可視化業(yè)務(wù)控制和管理”以及“智能化業(yè)務(wù)管理”。
第一階段:主要集中在網(wǎng)絡(luò)使用分析:該階段主要出于網(wǎng)絡(luò)管理和維護的目的,利用流量采集和DPI技術(shù),對于網(wǎng)絡(luò)的使用情況,進行統(tǒng)計和分析,發(fā)現(xiàn)和定位網(wǎng)絡(luò)故障點、性能瓶頸等。主要應(yīng)用領(lǐng)域在企業(yè)市場和運營商市場。
第二階段:重點發(fā)展基于網(wǎng)絡(luò)可視化技術(shù)的業(yè)務(wù)控制和管理:P2P應(yīng)用在互聯(lián)網(wǎng)上的興起,蠕蟲、木馬、DDOS攻擊等網(wǎng)絡(luò)威脅的增加,以及DFI、協(xié)議還原、流控等網(wǎng)絡(luò)可視化新技術(shù)的出現(xiàn),使這一階段發(fā)展出很多對網(wǎng)絡(luò)業(yè)務(wù)進行控制和管理的應(yīng)用場景。例如,當(dāng)時的P2P應(yīng)用被稱為“帶寬殺手”,給全世界的運營商造成了較大的網(wǎng)絡(luò)壓力,導(dǎo)致很多常用業(yè)務(wù)(email、web瀏覽等)的用戶體驗變差?;诰W(wǎng)絡(luò)可視化的P2P流量管理和優(yōu)化系統(tǒng)應(yīng)運而生,幫助運營商解決這一問題。在這一階段發(fā)展起來的典型應(yīng)用還有骨干網(wǎng)流量清洗(針對蠕蟲、網(wǎng)絡(luò)攻擊等)、非法業(yè)務(wù)檢測、網(wǎng)絡(luò)審計、網(wǎng)絡(luò)行為管理等。
第三階段:重點向業(yè)務(wù)智能方向發(fā)展:網(wǎng)絡(luò)智能化系統(tǒng)開始利用整個信息通信技術(shù)領(lǐng)域內(nèi)出現(xiàn)的新技術(shù),例如大數(shù)據(jù)技術(shù)、SDN等,智能地識別網(wǎng)絡(luò)流量情況和信息內(nèi)容,動態(tài)地對網(wǎng)絡(luò)業(yè)務(wù)進行定制和調(diào)整,支持不同的計費模式和個性化的業(yè)務(wù)流程。并進一步對網(wǎng)絡(luò)流量數(shù)據(jù)進行深度挖掘,提取有價值的商業(yè)信息,例如分析用戶特征、用戶行為及其背后的真實意圖和需求、網(wǎng)絡(luò)輿論熱點和傳播等,并與廣告、電商、位置服務(wù)、內(nèi)容服務(wù)等各種商業(yè)形態(tài)實現(xiàn)更為精準(zhǔn)的對接,從而創(chuàng)造更高的商業(yè)價值。
(2)網(wǎng)絡(luò)可視化市場規(guī)模分析
①我國2020年網(wǎng)絡(luò)可視化市場行業(yè)規(guī)模預(yù)計增長至接近300億元:在“寬帶中國”戰(zhàn)略以及移動互聯(lián)網(wǎng)快速發(fā)展帶動下,我國網(wǎng)絡(luò)基礎(chǔ)設(shè)施建設(shè)規(guī)模不斷擴大,網(wǎng)站內(nèi)容和網(wǎng)絡(luò)應(yīng)用日新月異,我國已成為名副其實的互聯(lián)網(wǎng)大國。根據(jù)2021年2月中國互聯(lián)網(wǎng)絡(luò)信息中心(CNNIC)發(fā)布第47次《中國互聯(lián)網(wǎng)絡(luò)發(fā)展?fàn)顩r統(tǒng)計報告》,截至2020年末,我國網(wǎng)民規(guī)模達到9.89億,互聯(lián)網(wǎng)普及率達70.4%。
在國內(nèi)互聯(lián)網(wǎng)基礎(chǔ)設(shè)施以及互聯(lián)網(wǎng)產(chǎn)業(yè)快速發(fā)展的背景下,我國網(wǎng)絡(luò)可視化市場規(guī)模增長迅速,根據(jù)中金企信統(tǒng)計數(shù)據(jù),我國網(wǎng)絡(luò)可視化市場規(guī)模從2015年的77.84億元持續(xù)增長至2019年的240億元,四年復(fù)合增速達到21%。2020年國內(nèi)網(wǎng)絡(luò)可視化行業(yè)市場規(guī)模將增長至289.7億元左右。
②國內(nèi)網(wǎng)絡(luò)可視化市場主要集中在政府、電信運營商以及企業(yè)三大主體,其中運營商市場占據(jù)35%左右的市場份額網(wǎng)絡(luò)可視化的內(nèi)在需求主要來源于以下三方面:1)信息安全與威脅加強,面向內(nèi)容的監(jiān)管勢在必行;2)互聯(lián)網(wǎng)流量急劇增長,運營商“智能管道”及“流量經(jīng)營”成為必然;3)挖掘網(wǎng)絡(luò)流量的潛在價值,最大限度發(fā)揮大數(shù)據(jù)經(jīng)營優(yōu)勢。
基于網(wǎng)絡(luò)可視化的上述三方面內(nèi)在需求,目前國內(nèi)網(wǎng)絡(luò)可視化產(chǎn)業(yè)的市場及用戶主要集中在政府、運營商以及企事業(yè)單位等三大主體。
A、對于政府而言,信息安全威脅與影響加強,內(nèi)容與流量監(jiān)管成為常態(tài):自2013年“棱鏡門”事件發(fā)生后,網(wǎng)絡(luò)安全戰(zhàn)略上升為國家戰(zhàn)略,我國政府出臺了系列政策保護我國信息安全。2014年2月,中央網(wǎng)絡(luò)安全和信息化領(lǐng)導(dǎo)小組成立,習(xí)近平總書記親自擔(dān)任小組組長,并在中央網(wǎng)絡(luò)安全和信息化領(lǐng)導(dǎo)小組第一次會議中強調(diào)“沒有網(wǎng)絡(luò)安全就沒有國家安全,沒有信息化就沒有現(xiàn)代化?!?
對于網(wǎng)絡(luò)可視化的根本需求在于對網(wǎng)絡(luò)內(nèi)容的安全管理。近年來在《網(wǎng)絡(luò)安全法》和《國家網(wǎng)絡(luò)空間安全戰(zhàn)略》等相關(guān)法律政策的催化下,以公安和互聯(lián)網(wǎng)應(yīng)急中心等為代表的政府機關(guān)部門對于網(wǎng)絡(luò)內(nèi)容監(jiān)測管理的信息化投入持續(xù)提升。
B、對于運營商而言,互聯(lián)網(wǎng)流量急劇增長,“智能管道”及“流量經(jīng)營”成為必然:近年來,隨著互聯(lián)網(wǎng)業(yè)務(wù)飛速發(fā)展,新興的數(shù)據(jù)業(yè)務(wù)在消費者的信息通信行為中所占比例越來越大,運營商網(wǎng)絡(luò)側(cè)的大部分資源已被各類數(shù)據(jù)流量所占用。
根據(jù)民生證券《計算機行業(yè)2020年年中投資策略:把握兩大核心邏輯,擁抱核心資產(chǎn)緊抓優(yōu)質(zhì)細分》相關(guān)數(shù)據(jù),民生證券研究院利用2014-2019年工信部公布數(shù)據(jù)進行指數(shù)預(yù)測得到2020、2021年我國移動互聯(lián)網(wǎng)接入流量分別為1,697億GB、2,180億GB,預(yù)測2020、2021年增速分別為39.46%、28.42%。運營商將面臨一方面網(wǎng)絡(luò)帶寬不斷增加、網(wǎng)絡(luò)建設(shè)投資不斷增長,另一方面?zhèn)鹘y(tǒng)業(yè)務(wù)受到互聯(lián)網(wǎng)公司OTT業(yè)務(wù)沖擊,市場回報增長緩慢甚至開始降低的不利局面,運營商“被管道化”趨勢更加明顯。
在此背景下,以運營商和通信設(shè)備制造商為主的通信產(chǎn)業(yè)界提出了“智能管道”和“流量經(jīng)營”的概念。運營商“智能管道”和“流量經(jīng)營”的發(fā)展方向,為網(wǎng)絡(luò)可視化行業(yè)帶來了非常廣闊的市場前景,網(wǎng)絡(luò)可視化技術(shù)成為運營商相關(guān)系統(tǒng)中不可或缺的基礎(chǔ)之一,發(fā)揮越來越重要的作用。
在3G/4G時代,運營商主要面向個人用戶,依據(jù)流量和通話服務(wù)不同制定不同等級的資費方案,將互聯(lián)網(wǎng)服務(wù)平等、無差別地提供給用戶。5G時代到來后,運營商用戶主體將逐漸由個人用戶轉(zhuǎn)變?yōu)獒t(yī)療、制造、交通等垂直行業(yè)用戶,根據(jù)不同用戶對網(wǎng)絡(luò)的具體需求提供各類定制化解決方案和差異化的網(wǎng)絡(luò)服務(wù)。
C、對于企業(yè)用戶而言,防止非法信息惡意傳播,避免商業(yè)信息、科研成果泄漏,實時監(jiān)控和管理網(wǎng)絡(luò)資源使用情況,提高整體工作效率等成為現(xiàn)實需求在企業(yè)和行業(yè)信息化系統(tǒng)中,網(wǎng)絡(luò)可視化越來越成為不可或缺的一部分。企業(yè)出于防止非法信息惡意傳播,避免國家機密、商業(yè)信息、科研成果泄漏,實時監(jiān)控和管理網(wǎng)絡(luò)資源使用情況,提高整體工作效率等目的,需要基于網(wǎng)絡(luò)可視化技術(shù)的上網(wǎng)行為管理、內(nèi)網(wǎng)審計等信息系統(tǒng)。某些特定行業(yè),例如金融行業(yè)等,還需要基于網(wǎng)絡(luò)可視化的網(wǎng)絡(luò)性能測量與監(jiān)控系統(tǒng)、智能負載均衡系統(tǒng)和應(yīng)用交付系統(tǒng)等。
D、網(wǎng)絡(luò)可視化需求中運營商占據(jù)約35%左右的市場份額:在全球范圍內(nèi),網(wǎng)絡(luò)可視化需求中企業(yè)占據(jù)58%的市場份額,運營商占據(jù)33%的市場份額,政府占據(jù)8%的市場份額。我國網(wǎng)絡(luò)可視化需求中,政府市場目前是該行業(yè)最大的細分市場,占比超過50%,其次為運營商市場,占比通常約35%左右,其余為企事業(yè)單位市場。
(3)網(wǎng)絡(luò)可視化市場未來發(fā)展趨勢
根據(jù)“十四五規(guī)劃”和二零三五年遠景目標(biāo),科技創(chuàng)新將是“十四五規(guī)劃”時期的首要任務(wù)。目前,源自科技創(chuàng)新的“新基建”正在成為拉動我國經(jīng)濟快速增長的內(nèi)生動力。創(chuàng)新作為“新基建”的重要依托,也是網(wǎng)絡(luò)可視化的重要基礎(chǔ),隨著云計算、物聯(lián)網(wǎng)、人工智能、大數(shù)據(jù)等創(chuàng)新應(yīng)用的發(fā)展,網(wǎng)絡(luò)可視化產(chǎn)業(yè)的邊際亦將不斷拓寬。在科技創(chuàng)新的帶動下,未來三到五年,網(wǎng)絡(luò)可視化產(chǎn)業(yè)必將迎來發(fā)展的黃金時期。
①“新基建”帶來流量數(shù)據(jù)進一步增長,推動網(wǎng)絡(luò)可視化行業(yè)持續(xù)發(fā)展網(wǎng)絡(luò)可視化行業(yè)的長期發(fā)展基礎(chǔ)在于流量、數(shù)據(jù)的持續(xù)增長以及分析應(yīng)用需求的不斷增加,其發(fā)展邏輯鏈條整體如下:
近年來,我國互聯(lián)網(wǎng)基礎(chǔ)設(shè)施持續(xù)建設(shè),互聯(lián)網(wǎng)產(chǎn)業(yè)發(fā)展迅速,帶動網(wǎng)絡(luò)可視化市場持續(xù)進一步發(fā)展。
2019年5月,工業(yè)和信息化部等相關(guān)部門印發(fā)《關(guān)于開展深入推進寬帶互聯(lián)網(wǎng)提速降費支撐高質(zhì)量發(fā)展2019專項行動的通知》,明確將開展“雙G雙提”,推動固定寬帶和移動寬帶雙雙邁入千兆(G比特)時代,100M及以上寬帶用戶比例提升至80%,4G用戶滲透率力爭提升至80%。
根據(jù)2021年2月中國互聯(lián)網(wǎng)絡(luò)信息中心(CNNIC)發(fā)布第47次《中國互聯(lián)網(wǎng)絡(luò)發(fā)展?fàn)顩r統(tǒng)計報告》,截至2020年末,我國網(wǎng)民規(guī)模達到9.89億,互聯(lián)網(wǎng)普及率達70.4%。
2020年以來,中央密集部署加快以人工智能、大數(shù)據(jù)、5G網(wǎng)絡(luò)、物聯(lián)網(wǎng)為代表的“新基建”進度,“新基建”獲得前所未有的重視。根據(jù)工信部以及中國信息通信研究院相關(guān)數(shù)據(jù)顯示,在5G領(lǐng)域,截至2020年末,我國5G終端連接數(shù)已超2億,位居世界第一。
5G將開啟萬物互聯(lián)新時代,革命性的提升了設(shè)備接入和信息傳輸?shù)哪芰Γ苿恿诉吘壛髁刻貏e是行業(yè)流量的爆發(fā)式增長,對海量數(shù)據(jù)的存儲、處理、計算和分析需求,將進一步提升企業(yè)對于各類新型基礎(chǔ)設(shè)施的投資需求。
“新基建”的持續(xù)穩(wěn)步推進將進一步帶動網(wǎng)絡(luò)可視化市場持續(xù)健康發(fā)展,根據(jù)市場調(diào)研資料:我國網(wǎng)絡(luò)可視化市場的增長速度預(yù)計在10%以上,預(yù)計到2026年行業(yè)市場規(guī)模將達到723.9億元。
②網(wǎng)絡(luò)可視化行業(yè)技術(shù)革新不斷推進:網(wǎng)絡(luò)可視化作為新一代信息基礎(chǔ)設(shè)施的重要組成部分,在未來行業(yè)發(fā)展進程中,技術(shù)革新將不斷推進,主要反映在以下幾方面:
A、網(wǎng)絡(luò)的大規(guī)模升級:5G移動互聯(lián)網(wǎng)已于2019年6月起正式實現(xiàn)商用,流量進入爆發(fā)式增長階段,隨著5G承載帶寬需求的大幅度提升,網(wǎng)絡(luò)扁平化、大型數(shù)據(jù)中心機房的互聯(lián),將給骨干網(wǎng)提出巨大挑戰(zhàn),100G骨干網(wǎng)難以滿足5G商用成熟后的網(wǎng)絡(luò)帶寬需求。未來200GE、400GE以及更高速率的網(wǎng)絡(luò)接口標(biāo)準(zhǔn)也在發(fā)展之中。
2020年2月,歐洲電信標(biāo)準(zhǔn)化協(xié)會(ETSI)成立了“第五代固網(wǎng)”(The5thGenerationFixedNetwork,簡稱F5G)工作組,致力于研究F5G標(biāo)準(zhǔn)與應(yīng)用,推動固定寬帶代際演進。根據(jù)ETSI定義,F(xiàn)5G是以10GPON接入、Wi-Fi6和200G/400G傳輸?shù)燃夹g(shù)為代表的第五代固定網(wǎng)絡(luò),包含GRE(高可靠體驗)、eFBB(增強固定帶寬)、FFC(全光連接)三大應(yīng)用場景,開創(chuàng)從光纖到戶邁向光纖到房間、桌面、園區(qū)、工廠乃至機器的“光聯(lián)萬物”新紀(jì)元。
為了與之相適應(yīng),網(wǎng)絡(luò)可視化產(chǎn)品的相關(guān)技術(shù)也要隨之進行升級,并帶來產(chǎn)品更新?lián)Q代需求。
B、信息安全的深化:隨著網(wǎng)絡(luò)可視化在信息安全領(lǐng)域的應(yīng)用越來越多,網(wǎng)絡(luò)可視化系統(tǒng)中深度采用信息安全技術(shù)也成為一個重要趨勢,例如基于網(wǎng)絡(luò)可視化應(yīng)用進行木馬及病毒的檢測與清洗、數(shù)據(jù)防泄漏、用戶隱私保護、網(wǎng)絡(luò)空間安全防護等技術(shù)將不斷得到發(fā)展。
C、與SDN/NFV技術(shù)的結(jié)合:隨著SDN(軟件定義網(wǎng)絡(luò))與NFV(網(wǎng)絡(luò)功能虛擬化)技術(shù)的發(fā)展和影響,一方面網(wǎng)絡(luò)可視化技術(shù)需要在新的SDN/NFV環(huán)境下,進行部署和實施應(yīng)用;另一方面,網(wǎng)絡(luò)可視化應(yīng)用也需要融入SDN/NFV來實現(xiàn)技術(shù)升級,即向軟件定義可視化發(fā)展。
D、與大數(shù)據(jù)技術(shù)的結(jié)合:網(wǎng)絡(luò)上每時每刻都在產(chǎn)生、傳送和消費著巨大的數(shù)據(jù)量,隨著大數(shù)據(jù)技術(shù)的發(fā)展,人們已經(jīng)清晰認識到巨量數(shù)據(jù)中所蘊含的無窮價值及潛在應(yīng)用。如何對巨量數(shù)據(jù)進行采集、處理和分析,如何盡可能挖掘出更多的價值,網(wǎng)絡(luò)可視化系統(tǒng)將與大數(shù)據(jù)技術(shù)進一步融合,發(fā)展出更多的深度應(yīng)用產(chǎn)品。