華青融天：跳脫軌跡，無問西東

本文作者：又田

2019-05-20 16:10

導語：在人生長河中，某個不經(jīng)意的動作可能會改變原有軌跡，或許這才是真正的開始。

2007-2008賽季法國杯半決賽中，里昂1-0小勝乙級隊色當，躋身法國杯決賽。

為里昂射入致勝一球的是該隊核心，巴西中場小儒尼尼奧。小儒主罰一個超過37米外的直接任意球，巴西罰球大師射出的皮球在空中畫出一道意想不到的軌跡，先向右偏轉(zhuǎn)導致門將失去平衡，然而皮球最終卻彎向球門左上角，成功拿分。

這一擊任意球被視作經(jīng)典，也開啟了小儒尼尼奧新的足球生涯。

在人生長河中，某個不經(jīng)意的動作可能會改變原有軌跡，或許這才是真正的開始。

（一）

2007年上半年，吳雨還是國內(nèi)IT管理軟件公司的高管。

偶然一次機會，吳雨認識了當時正與導師研究透明計算課題的清華大學博士王勇，幾人試圖一起實現(xiàn)透明計算的產(chǎn)業(yè)化，吳雨也辭了職專心準備創(chuàng)業(yè)。

可惜天不遂人愿，本來順利的事情沒拿下投資，黃了。

雙雙辭職的吳雨和王勇有點尷尬，回不去，不如放手一搏自己創(chuàng)業(yè)。2007年下半年，兩人成立了一家公司，取名華青融天。

當時二人還是“三無青年”：沒人，沒方向，沒客戶。想了又想?yún)怯隂Q定從自己最熟悉的產(chǎn)品入手。北航計算機系本科畢業(yè)后，吳雨被保送北京大學攻讀碩士，隨后進入外企，從售前做起，一直做到市場總監(jiān)、銷售總監(jiān)，直至中國區(qū)總經(jīng)理，有著豐富外企經(jīng)驗。

最初二人主要尋找國外前沿高科技產(chǎn)品做代理商，并將其中一款網(wǎng)絡(luò)流量分析NPM產(chǎn)品賣到招商銀行。除此之外也做過運營商，服務(wù)過海事，南航，南車等企業(yè)。

在客戶使用產(chǎn)品過程中，逐漸提出各種定制化需求。是不是可以自己做產(chǎn)品？吳雨開始思考。

2010年出現(xiàn)一個機會，招商銀行提出了在NPM的基礎(chǔ)定制開發(fā)APM的需求。但當時華青融天將技術(shù)主力放在安全運營的二次開發(fā)之上，由于缺乏人手，他們將這件事情外包給了另一家公司。

這家公司成為了后來華青融天最大的競爭對手。

是否有遺憾呢？當然，無論吳雨還是王勇都有自研產(chǎn)品的理想。特別對于研發(fā)出身的王勇，他對純賣別人的產(chǎn)品沒有多少興趣。

2012年，王勇提出要做產(chǎn)品，作為當時公司唯一一個技術(shù)人員，他單槍匹馬埋頭寫出了最初的產(chǎn)品雛形，而且得到招行客戶的認可。

同年年底的產(chǎn)品發(fā)布會上，站著零星三四個研發(fā)人員?！拔覀円鲎约旱漠a(chǎn)品，要走自主研發(fā)的路?！?/p>

吳雨這句話開啟了華青融天另一個時代。

華青融天：跳脫軌跡，無問西東

【吳雨】

（二）

時間一路疾馳，2019年5月華青融天的產(chǎn)品發(fā)布會圍了一圈研發(fā)人員。這場發(fā)布會來的有些突然，發(fā)布會前一天，編輯收到邀請，“我們臨時策劃了一場產(chǎn)品版本迭代的內(nèi)部發(fā)布會，要不要來感受下？”

當然要。

技術(shù)副總裁包彤向雷鋒網(wǎng)編輯介紹了華青融天目前的三大產(chǎn)品架構(gòu)：

華青融天：跳脫軌跡，無問西東

首先整體技術(shù)方向是AI驅(qū)動IT智慧運營，這里面有兩層含義，其一是從傳統(tǒng)IT運維轉(zhuǎn)向IT運營，更加精細化；其二，企業(yè)的運維工作配以大數(shù)據(jù)與人工智能技術(shù)，可以實現(xiàn)從人工運維向自動化運維，以及智能運營演進。

從整個產(chǎn)品架構(gòu)來看，底層平臺由“1+3”構(gòu)成，“1”是一個大數(shù)據(jù)融合平臺，其中包含數(shù)據(jù)的采集、數(shù)據(jù)的存儲、數(shù)據(jù)的處理過程。過去，數(shù)據(jù)采集主要包括網(wǎng)絡(luò)流量數(shù)據(jù)、日志數(shù)據(jù)，以及第三方數(shù)據(jù)。將這些數(shù)據(jù)采集進來后做結(jié)構(gòu)化處理，變成有用信息。這些信息有實時數(shù)據(jù)處理，有近線數(shù)據(jù)處理，也有歷史數(shù)據(jù)處理。

“3”是三大引擎：搜索引擎主要做統(tǒng)計分析和查詢；規(guī)則引擎主要處理安全運維過程中出現(xiàn)的告警事件；最后引入AI引擎希望能替代或者部分替代基于規(guī)則的引擎。

在此之上，針對不同應用領(lǐng)域，華青融天推出三款產(chǎn)品，分別是主打的是面向智能運維的產(chǎn)品EZSonar、下一代安全運營平臺EZAccur，以及包括EZLogic在內(nèi)的幾款機器大數(shù)據(jù)應用。

在這次出其不意的發(fā)布會上，EZSonar、EZAccur、EZLogic都推出了新版本，分別有什么升級變化？

Ezsonar 4.0做了架構(gòu)調(diào)整，引入了實時數(shù)據(jù)處理機制。4.1版本從過去基于Elastic Search做分布式存儲架構(gòu)，到利用實時數(shù)據(jù)、歷史數(shù)據(jù)等更智能的運維工具去做統(tǒng)計分析和告警，創(chuàng)新性地實現(xiàn)日志和流量數(shù)據(jù)相融合。

通過實時數(shù)據(jù)服務(wù)和自運維能力，減輕用戶使用和配置的復雜度。并希望未來把Ezsonar打造成一個運維數(shù)據(jù)平臺、應用監(jiān)控工具和“智慧大腦”。

EZAccur新版本可針對重大安全事件做持續(xù)性監(jiān)控，并通過對這些事件的回溯調(diào)查和分析做功能補充。另外，新增的批式引擎可以通過復雜的實時性和持續(xù)性關(guān)系來發(fā)現(xiàn)更深層次的安全問題，其核心價值是提升關(guān)聯(lián)規(guī)則引擎的適應性。

EZLogic原本是EZAccur的一部分，后來小伙伴們認為這個產(chǎn)品完全可以作為一個日志解析的智能工具獨立使用，也可以搭配自己的產(chǎn)品使用，于是其從模塊化走向了產(chǎn)品化。順便，借著發(fā)布會的機會，在這群“愛碼士”面前刷了個臉。

（三）

將EZLogic做出來的是研發(fā)副總監(jiān)張佳。

2016年時張佳童鞋奔跑在創(chuàng)業(yè)路上，不小心撞了南墻。同年，華青融天預要突破，定位了大數(shù)據(jù)+人工智能。

“我覺得隨著行業(yè)技術(shù)的發(fā)展，數(shù)據(jù)量以及系統(tǒng)復雜度會更大、更高，未來一定需要更多的人工智能來輔助工作，所以對這個方向很感興趣。另外，新的東西沒有歷史包袱，可以在一個產(chǎn)品上打上個人烙印?！?/p>

2016年，張佳加入華青融天開始打磨屬于自己的烙印。

一個企業(yè)按照傳統(tǒng)業(yè)務(wù)發(fā)展，無論物理概念上怎么努力，最多只能獲得百分數(shù)上的增長，這種增長方式就是穩(wěn)定的線性增長。企業(yè)如果想獲得跨越式發(fā)展，就必須以第二曲線式的增長方式取得十倍速的增長。

華青融天的第二曲線就是讓AI與運維工作結(jié)合，變得更加自動化，更加智能化。

最初想到AI與日志分析結(jié)合的是CTO王勇，據(jù)說這位極其熱愛寫代碼的博士去年看了200篇與AI相關(guān)的paper。和張佳討論過后，他們認為目前企業(yè)數(shù)據(jù)分析需求在不斷增多，而日志是一種非結(jié)構(gòu)化的數(shù)據(jù)，在分析數(shù)據(jù)之前必須先做結(jié)構(gòu)化，目前主要的方式都是通過人工的方式寫正則。

這里面有幾個問題，第一這項工作很枯燥、無聊，這樣的工作注定要被機器替代掉；第二，正則的特點是要先發(fā)現(xiàn)日志才能寫正則，但是諸多系統(tǒng)發(fā)現(xiàn)日志本身就是一件很難的事情，另外隨著分析需求的提升，對信息的精細化程度要求越高，原來的方式基本不能滿足需求，因此需要有一種新型的與機器學習相結(jié)合的日志范式化工具，這就是做EZlogic的初衷。

作為一款智能化的新產(chǎn)品，EZlogic可以將日志信息自動分類，并通采用機器學習的方式為海量日志自動命名，極大減輕了運維人員手工檢索日志的冗余工作。

EZlogic在獲取數(shù)據(jù)、分析數(shù)據(jù)、策略驗證等方面做到自動化、智能化，利用大數(shù)據(jù)等技術(shù)為用戶賦能，并將用機器解決人工復雜的工作作為其終極目標。

當然，這項技術(shù)與日志結(jié)合也會存在問題，比如讓人頭大的誤報問題，這也是現(xiàn)在機器學習的普遍問題：可解釋性不高，準確率不夠。

張佳對這個問題進行過多次實踐，用他的話說，最終算是想明白了一些。

“大數(shù)據(jù)和機器學習比較長于的是發(fā)現(xiàn)關(guān)系，但是我們往往想要的是因果，所以機器學習的結(jié)果往往和我們想要的有出入，而且不能用這個關(guān)系來解釋結(jié)果，所以不能指望大數(shù)據(jù)和機器學習完成全部工作?！?/p>

那應該如何做？

張佳告訴雷鋒網(wǎng)，目前他們認為可以通過大數(shù)據(jù)和機器學習發(fā)現(xiàn)一些關(guān)系，然后再通過人工分析判斷，同時他們會使用監(jiān)督學習的方法訓練分類器，可在學習一段時間之后來幫助對關(guān)系結(jié)果做進一步的判斷。未來需要引入知識圖譜，把人的經(jīng)驗和機器學習做進一步結(jié)合。

華青融天：跳脫軌跡，無問西東

【張佳】

安全運維是一個很大的體系。不少企業(yè)采購了幾十種安全設(shè)備和系統(tǒng)如防火墻、IPS、IDS、DLP、堡壘機等，組建了30多人的安全團隊。但這些設(shè)備和系統(tǒng)往往只能抵御某個方面的安全威脅，各系統(tǒng)之前沒有形成協(xié)同效應，都是一個個的安全孤島。

大數(shù)據(jù)和機器學習在安全方面可以有很多應用場景，比如統(tǒng)一的安全評價，也就是現(xiàn)在常說的安全態(tài)勢。各系統(tǒng)的安全事件以及警告全部依靠人力處理并不現(xiàn)實，必須得通過機器學習提高告警的準確率，做一些初步分析調(diào)查。

當然，這條路還任重道遠。