2016年對于SDN來說無疑是利好的一年，在金融、電信、互聯(lián)網等行業(yè)SDN產品和解決方案開始規(guī)模化部署，許多傳統(tǒng)行業(yè)對于SDN的需求也初現(xiàn)端倪。《2016～2017年中國SDN市場發(fā)展狀況白皮書》顯示，2016年中國SDN軟件市場(主要指SDN控制器及相關的軟件解決方案與服務)規(guī)模達到了7.2億元，比2015年增長30.9%，預計到2021年，市場規(guī)模將達到46.7億元。同時，白皮書也指出了企業(yè)傳統(tǒng)網絡架構面臨的四大難題。

·難以滿足業(yè)務靈活部署的需求

·難以滿足業(yè)務資源整合的需求

·難以滿足場景化的需求

·難以滿足新的運維需求

在討論運維難題的時候，分析師認為傳統(tǒng)運維方式無法對整個網絡的流量、設備以及業(yè)務實現(xiàn)集中管控、統(tǒng)一編排。造成這個問題的原因除了網絡架構的變遷，不容忽視的一點是，現(xiàn)在網絡中的數(shù)據(jù)量實在是太大了。軟件技術的發(fā)展支撐了更多智能設備的接入。今天我們不斷地從各種源頭搜集和存儲網絡交易、社交媒體動態(tài)、移動設備以及各類不知道名字的自動化傳感器產生的數(shù)據(jù)。

在這種情況下，爆炸式增長的數(shù)據(jù)的存儲和計算需求促使存儲硬件、網絡基礎設施以及處理海量數(shù)據(jù)的計算方法不斷改進。傳統(tǒng)運維從只對網絡基礎設施和流量進行簡單管理到突然增加對業(yè)務和復雜流量進行管理必然力不從心。

Data is useless until you use it to make decisions

2017年初，思科斥資37億美元收購了AppDynamics，這是繼14億美元收購物Jasper的又一大動作。媒體視之為思科戰(zhàn)略轉型的標志，在筆者看來，思科是在布局其大數(shù)據(jù)生態(tài)。

大數(shù)據(jù)面臨的挑戰(zhàn)不僅僅是數(shù)據(jù)的大小，更是如何用新的方法從各類數(shù)據(jù)平臺處理數(shù)據(jù)。跟傳統(tǒng)的商業(yè)智能(BI)相比，大數(shù)據(jù)分析能為企業(yè)網絡管理帶來質的改變，其價值也更大。

追根溯源的能力

現(xiàn)代企業(yè)網絡中每秒有百萬級的數(shù)據(jù)包在傳輸，當需要進行troubleshooting的時候，有太多的地方要去檢查，按照傳統(tǒng)的方法，即便是5分鐘的數(shù)據(jù)也需要幾個小時甚至幾天來分析處理。倘若多數(shù)情況下的問題不是網絡的問題，應用程序的代碼本身也應該和網包、網流一起被拿來分析。網絡管理需要弄清楚不同數(shù)據(jù)類型之間的區(qū)別。一些現(xiàn)有的解決方案在客戶可承受的價格范圍只能存儲三天的流量數(shù)據(jù)，對于時間更久遠的網絡故障，溯源只能水中撈月。

防微杜漸的能力

變化是現(xiàn)在IT系統(tǒng)的主題，已經改變的信息并沒有什么意義，相反，預測有意義的變化十分具有挑戰(zhàn)。有時受限于網絡流量的大小和帶寬，一些大數(shù)據(jù)分析行為可能會引起正常業(yè)務的中斷。以電商網站的大促活動為例，預演的效果并不能涵蓋全部可能真實的場景。一個優(yōu)秀的架構師通常能預見到現(xiàn)在的架構有什么潛在問題。而如今，能發(fā)現(xiàn)這些潛在問題的手段，多依賴大數(shù)據(jù)分析。

洞悉未來的能力

大多數(shù)傳統(tǒng)的網絡系統(tǒng)缺乏靈活的設計，在面對現(xiàn)在復雜的網絡環(huán)境時無法應對。傳統(tǒng)網絡中簡陋的網絡監(jiān)控設備無力應對復雜的虛擬化網絡，更遑論從中提取出可執(zhí)行的規(guī)則;而基于探測和代理技術的監(jiān)控系統(tǒng)也無法完全覆蓋underlay和overlay的網絡。將所有的數(shù)據(jù)匯聚在一起利用大數(shù)據(jù)技術進行分析是企業(yè)網絡團隊必須首先解決的難題，因為其他的大數(shù)據(jù)分析應用已經為業(yè)務部門創(chuàng)造了新的商機。

企業(yè)IT團隊已經實現(xiàn)了更快速的故障排查，通過對大數(shù)據(jù)分析技術的利用，改進網絡基礎設施的安全性、穩(wěn)定性和可用性。未來的網絡該怎么設計?也許大數(shù)據(jù)分析能帶給人們一些啟示。

網絡運維的問題其實是大數(shù)據(jù)的問題

SDN的本質是控制與轉發(fā)分離，從這個角度來看，控制的核心思想是網絡中有了“大腦”，通過這個智能系統(tǒng)對網絡設備下發(fā)指令，那么這些指令又來自哪里呢?通常我們認為，這些指令來自控制器基于已有的協(xié)議、規(guī)則對網絡流量和網絡行為的“審判”。而這個“審判”的過程，我們稱之為大數(shù)據(jù)分析。數(shù)據(jù)分析并非新生事物，在這里，我們加了個“大”字。

任何大數(shù)據(jù)分析的應用最重要的基礎環(huán)節(jié)便是采集和存儲。關于采集，業(yè)界已經有過較多的討論，本文不再贅述。筆者想從以下幾個方面簡單概述一下大數(shù)據(jù)分析面臨的問題。

靈活擴展的存儲能力

在上一篇《直面數(shù)據(jù)中心網絡六大需求，六步打造面向未來的網絡》文章中筆者提過，思科網絡報告白皮書顯示2015～2020年全球網絡流量年復合增長率達到22%(注：2015年全球網絡流量為72EB，2016年這一數(shù)字為88EB，1EB=1,000PB)截至2020年全球網絡流量將會凈增長200EB。對如此規(guī)模的流量進行采集和分析的需求必然要求較強的存儲能力。

考慮到22%的增量，存儲系統(tǒng)必須在不喪失性能的前提下具有高度的靈活和可擴展性，以便不停機彈性擴容。文件系統(tǒng)還必須支持諸如同時處理不同類型和來源數(shù)據(jù)的能力、把海量大數(shù)據(jù)轉換成元數(shù)據(jù)的功能等等。在筆者看來，網絡的問題首先是大數(shù)據(jù)存儲的問題。在規(guī)劃和設計存儲系統(tǒng)的時候，應該考慮所有當下的情況以及未來的使用場景。

延時的問題

2015年前后的一段時間，IT圈很流行實時流數(shù)據(jù)處理技術;后來筆者了解到大量的公有云服務商在自己的基礎設施中使用加速卡/智能卡。比如，微軟通過使用FPGA技術的智能網卡提高了Azure的性能，微軟的FPGA智能網卡還有加密和加速存儲協(xié)議的功能。大數(shù)據(jù)分析在一些場景如社交媒體、交易數(shù)據(jù)等需要實時處理以便作出決策，這要求不能出現(xiàn)響應延時或者數(shù)據(jù)丟失。對需要根據(jù)實時數(shù)據(jù)作出響應決策的應用來說，這個要求會更高。

跨平臺接入

隨著大數(shù)據(jù)應用在各種平臺和系統(tǒng)(尤其是物聯(lián)網)上，對數(shù)據(jù)的交叉使用成為一種常規(guī)需求。公有云服務商在幫助大型客戶進行數(shù)據(jù)遷移的時候遇到過較多此類案例，存儲系統(tǒng)必須能夠同時處理來自不同系統(tǒng)、不同格式的異構數(shù)據(jù)。數(shù)據(jù)時代的大數(shù)據(jù)生態(tài)必然要求軟、硬件盡可能的兼容、統(tǒng)一。IDC近年來一直致力于通過采用標準服務器來優(yōu)化網絡和擺脫廠商綁定;世界上最先進的數(shù)據(jù)中心如谷歌、微軟、領英、Facebook等都在向著這個方向發(fā)展。

安全的問題

安全是云計算的基石，之所以這么說源自數(shù)據(jù)對于我們的重要性。比如，最近大家熱議的某公有云廠商租戶隔離的問題;多數(shù)人認為VPC是目前成熟的、可行的租戶安全解決方案，這也是多數(shù)云廠商產品化的方向。事實上層出不窮的安全事件都是針對數(shù)據(jù)的竊取或破壞。由于數(shù)據(jù)交叉使用，現(xiàn)有的IT系統(tǒng)安全機制需要作出較大調整，而存儲也需要在不犧牲性能和可擴展性的前提下，滿足對這些數(shù)據(jù)處理的安全要求。

成本的問題

大數(shù)據(jù)意味著高成本，對數(shù)據(jù)分析來說，計算資源顯然沒有存儲資源的開銷大。有人認為采用開放標準硬件能節(jié)省大量的成本(約30%～80%不等)。曾經轟轟烈烈的去IOE和政府倡導的國產化，在節(jié)約成本方面無疑有很多值得稱道的地方。隨著OpenStack的遍地開花，開源存儲技術也獲得了長足的發(fā)展。企業(yè)選擇不使用市面上現(xiàn)有的商用存儲方案，對數(shù)據(jù)去重、壓縮備份，用自己定制化的存儲硬件等措施，可以顯著降低成本。

總結一下，大數(shù)據(jù)的價值已經得到普遍的認可，看一下自動化之于網絡運維的效果我們相信，未來是令人振奮的，但更深層次的價值有待業(yè)界進一步發(fā)掘;通過研究不難發(fā)現(xiàn)，網絡運維的問題其實是大數(shù)據(jù)的問題，而大數(shù)據(jù)分析本身尚處在初級階段，有較多亟需解決的難題。那么，在這條路上我們該怎么走?[作者：魏星@云杉；來源：]