10 年前,Netscape 創(chuàng)始人、硅谷著名投資人馬克·安德森表示“軟件正在吞噬世界”,這只說(shuō)了故事的一半,10 年過(guò)去,人們從不信任到得“云”者得天下,云服務(wù)成為正在吞噬世界的“大魚”。

工業(yè)和信息化部在《推動(dòng)企業(yè)上云實(shí)施指南(2018-2020年)》中提出,到 2020 年,全國(guó)新增上云企業(yè) 100 萬(wàn)家,形成一批有影響力、 帶動(dòng)力的云平臺(tái)和企業(yè)上云體驗(yàn)中心。據(jù)中國(guó)通信院與 Gartner 預(yù)測(cè),至 2023 年全球云計(jì)算行業(yè)規(guī)模將達(dá)到 3500 億美元,中國(guó)云計(jì)算行業(yè)規(guī)模將達(dá)到 3800 億元。隨著更多的企業(yè)將核心技術(shù)互聯(lián)網(wǎng)化,企業(yè)對(duì)云計(jì)算相關(guān)的技術(shù)與服務(wù)需求將日益凸顯。如今,云計(jì)算“大魚”游動(dòng)加快。

今年疫情促進(jìn)更多企業(yè)云轉(zhuǎn)型,在這過(guò)程中,企業(yè)如何探索有效釋放云價(jià)值方案,或如何更好地幫助企業(yè)使用云能力,成立 7 年、被稱為“全球新經(jīng)濟(jì)智能移動(dòng)廣告第一股”的匯量科技(Mobvista)交出自己的答卷。

近日,匯量科技宣布將彈性云計(jì)算團(tuán)隊(duì)及工程運(yùn)維團(tuán)隊(duì)合并為云計(jì)算及基礎(chǔ)架構(gòu)業(yè)務(wù)中心(下文簡(jiǎn)稱:云事業(yè)部),成為與公司廣告技術(shù)事業(yè)部并列的第二大事業(yè)部,正式布局云計(jì)算。云事業(yè)部由技術(shù)副總裁及首席工程架構(gòu)師蔡超總負(fù)責(zé),并直接向聯(lián)合創(chuàng)始人及總裁曹曉歡匯報(bào)。

突破技術(shù)迭代瓶頸,匯量科技轉(zhuǎn)型之路

時(shí)間撥回 2013 年,匯量科技成立,以移動(dòng)廣告和數(shù)據(jù)分析業(yè)務(wù)為主。隨后以 AI+大數(shù)據(jù)為核心,構(gòu)建技術(shù)中臺(tái)架構(gòu),用數(shù)據(jù)智能驅(qū)動(dòng)用戶增長(zhǎng)。匯量科技入局云計(jì)算,早在 2019 年已有端倪。

2019 年 7 月,匯量科技加入 AWS 全球合作伙伴網(wǎng)絡(luò)(APN),將技術(shù)中臺(tái)上架 AWS 線上商店;并加入 AWS SaaS Factory計(jì)劃,以 SaaS 模式輸出技術(shù)中臺(tái)能力。同年 9 月,匯量科技與阿里云聯(lián)合發(fā)布彈性集群管理平臺(tái) SpotMax。除了與云廠商合作外,匯量科技自身是云計(jì)算技術(shù)普及最大的受益者。

蔡超表示,匯量科技在創(chuàng)建之初便采用 All-in-cloud 技術(shù)結(jié)構(gòu),所有的系統(tǒng)均基于云計(jì)算構(gòu)建。并依賴于云計(jì)算按需獲取的優(yōu)勢(shì),使得計(jì)算資源不再成為公司業(yè)務(wù)快速成長(zhǎng)的限制,公司業(yè)務(wù)得以在全球快速增長(zhǎng)。

然而隨著廣告業(yè)務(wù)對(duì)數(shù)據(jù)需求量大、程序化廣告爆發(fā)、海外業(yè)務(wù)部署等,對(duì)云計(jì)算資源的需求增多,帶來(lái)一定的成本壓力,如何更高效地使用云技術(shù),成為包含匯量科技在內(nèi)的大部分公有云用戶頭疼的難題。匯量科技追本溯源,發(fā)現(xiàn)是由于現(xiàn)有應(yīng)用系統(tǒng)和基礎(chǔ)設(shè)施的不匹配而導(dǎo)致問(wèn)題的。

危機(jī)總與機(jī)遇并存,回顧軟件發(fā)展的歷程,IT 基礎(chǔ)設(shè)施的變遷將推動(dòng)軟件架構(gòu)的演進(jìn),使軟件架構(gòu)必須充分發(fā)揮基礎(chǔ)設(shè)施的特點(diǎn)。如在大型機(jī)時(shí)代,與之匹配的是簡(jiǎn)單的單體架構(gòu);PC和局域網(wǎng)時(shí)代下,客戶服務(wù)器架構(gòu)成為主流……

如今來(lái)到云時(shí)代,基礎(chǔ)設(shè)施同樣推動(dòng)軟件架構(gòu)的演變。可很多企業(yè)的云轉(zhuǎn)型是由 IDC 遷移而成,或根據(jù)在原有的 IT 基礎(chǔ)架構(gòu)設(shè)施上的思想進(jìn)行開(kāi)發(fā)。匯量科技另辟蹊徑,從優(yōu)化底層技術(shù)架構(gòu)開(kāi)始,除了利用云的技術(shù)特性外,還利用云的定價(jià)模式特性,構(gòu)建彈性資源管理系統(tǒng) SpotMax。如此一來(lái),在兼顧可用性的情況下,可充分去利用云端的廉價(jià)的計(jì)算資源,通過(guò)系列的技術(shù)改造,使得程序化廣告的單位請(qǐng)求處理成本降低 65%。

“因此,匯量科技成立云事業(yè)部,希望能夠?qū)ν廨敵鰠R量科技在云上的實(shí)踐經(jīng)驗(yàn),幫助更多面臨同樣云挑戰(zhàn)的企業(yè)。”蔡超說(shuō)道。

降低數(shù)據(jù)處理成本,云原生來(lái)救駕

上文談到,匯量科技的主營(yíng)業(yè)務(wù)是移動(dòng)廣告和數(shù)據(jù)分析,據(jù) 2020 年上半年財(cái)報(bào)顯示,匯量科技程序化業(yè)務(wù)收入為 191.9 百萬(wàn)美元,與2019年同期相比上漲51.4%,占公司上半年總收入71.9%。在這背后,超大規(guī)模的程序化廣告平臺(tái)對(duì)實(shí)時(shí)處理性的要求非常苛刻,50-100ms間就必須完成。據(jù)曹曉歡在 AWS CIO 論壇演講指出,在 1000 億次的日均廣告請(qǐng)求和 10 億級(jí)的設(shè)備覆蓋下,平臺(tái)仍需對(duì)單次廣告請(qǐng)求做出毫秒級(jí)的精準(zhǔn)預(yù)估和出價(jià)回應(yīng),同樣需要昂貴的計(jì)算集群支撐。

如何降低數(shù)據(jù)處理成本,云原生來(lái)救駕。近年來(lái),“云原生”成為 IT 圈里炙手可熱的概念,利于各組織在公有云、私有云和混合云等新型動(dòng)態(tài)環(huán)境,構(gòu)建和運(yùn)行可彈性擴(kuò)展應(yīng)用的云原生,可有效地簡(jiǎn)化用戶運(yùn)維,提升資源彈性,快速被企業(yè)和開(kāi)發(fā)者接受。據(jù)數(shù)據(jù)顯示,到 2021 年,將有 92% 的公司成為云原生公司,越來(lái)越多的企業(yè)和開(kāi)發(fā)者開(kāi)始把業(yè)務(wù)與技術(shù)向云原生演進(jìn)。

匯量科技也不例外,在此背景下,經(jīng)歷真實(shí)大規(guī)模實(shí)踐場(chǎng)景錘煉的云原生產(chǎn)品 SpotMax 應(yīng)運(yùn)而生。SpotMax 是⼀個(gè)利⽤彈性計(jì)算資源進(jìn)行云端系統(tǒng)成本優(yōu)化的體系,旨在幫助⽤戶使用云平臺(tái)提供的彈性資源在保證系統(tǒng)可⽤性,甚⾄獲得更⾼可用性的前提下,實(shí)現(xiàn)成本的最⼤化節(jié)省。由以下三個(gè)部分組成:

MaxArch:構(gòu)建高可用性,⾼彈性架構(gòu),可以允許系統(tǒng)在不影響業(yè)務(wù)的前提下更充分的使⽤具有成本優(yōu)勢(shì)的⾼彈性計(jì)算資源。

MaxChaos:利用混沌工程可以有效的評(píng)估系統(tǒng)的容錯(cuò)能力,其評(píng)估結(jié)果將成為MaxGroup⾃動(dòng)規(guī)劃合理彈性集群的依據(jù)。實(shí)現(xiàn)MaxArch的持續(xù)改進(jìn)及評(píng)估。

MaxGroup:根據(jù)服務(wù)工作模式和運(yùn)⾏特征,優(yōu)化主機(jī)群集。智能彈性集群管理可以有效減少?gòu)椥杂?jì)算資源波動(dòng)帶來(lái)的集群服務(wù)能⼒變化。并在⾯向成本優(yōu)化構(gòu)建的混合機(jī)型集群最⼤發(fā)揮集群不同機(jī)型的服務(wù)能⼒。

而SpotMax之所以能實(shí)現(xiàn)如此大比例的成本縮減,其秘訣在于通過(guò)數(shù)據(jù)分析預(yù)測(cè)來(lái)合理的調(diào)配Spot實(shí)例這種價(jià)格低廉的云資源,同時(shí)兼顧了“穩(wěn)定”和“低價(jià)”兩個(gè)用云當(dāng)中的核心訴求。

要同時(shí)實(shí)現(xiàn)“低價(jià)”和“穩(wěn)定”并不容易。Spot實(shí)例其實(shí)是云商的閑置資源,價(jià)格便宜但供應(yīng)不穩(wěn)定,容易中斷,而一旦中斷對(duì)于企業(yè)造成的損失是巨大的。SpotMax會(huì)統(tǒng)計(jì)過(guò)去中斷的歷史數(shù)據(jù)和實(shí)時(shí)分析目前的市場(chǎng)供需情況,來(lái)預(yù)測(cè)不穩(wěn)定的Spot實(shí)例,做到對(duì)各個(gè)可用區(qū)中的各種類型的實(shí)例機(jī)型進(jìn)行市場(chǎng)評(píng)分和中斷管理。根據(jù)用戶集群的特點(diǎn),SpotMax可以自動(dòng)化地在云商全球各地的數(shù)據(jù)中心調(diào)度那些最便宜和最不可能被中斷的實(shí)例機(jī)型為業(yè)務(wù)所用,把“低價(jià)”和“穩(wěn)定”這兩個(gè)原本矛盾的點(diǎn)統(tǒng)一起來(lái)。

蔡超表示,SpotMax 在線上實(shí)時(shí)系統(tǒng)有較強(qiáng)的先發(fā)優(yōu)勢(shì),該技術(shù)既服務(wù)自身大規(guī)模的廣告業(yè)務(wù),也服務(wù)于外部企業(yè),以降低本身的研發(fā)成本和對(duì)外系統(tǒng)提供服務(wù)的成本。

不斷破圈,技術(shù)打造工具生態(tài)

從廣告變現(xiàn)、數(shù)據(jù)分析,到技術(shù)中臺(tái)的發(fā)展,再到如今的云事業(yè)部,我們觀察到,匯量科技不僅給開(kāi)發(fā)者提供流量,還在布局打造“工具生態(tài)”。為開(kāi)發(fā)者提供從獲客、變現(xiàn)、數(shù)據(jù)洞察,云服務(wù)等開(kāi)發(fā)者能用到的“工具”,助力其業(yè)務(wù)增長(zhǎng)。

在中國(guó)互聯(lián)網(wǎng)協(xié)會(huì)的發(fā)布《中國(guó)互聯(lián)網(wǎng)企業(yè)綜合實(shí)力研究報(bào)告(2020)》及“2020年中國(guó)互聯(lián)網(wǎng)綜合實(shí)力前百家企業(yè)”榜單里,匯量科技憑借全球化業(yè)務(wù)布局及技術(shù)創(chuàng)新上榜。曹曉歡透露,匯量科技下一階段的目標(biāo)是“由技術(shù)的創(chuàng)新者成為技術(shù)的輸出者”,將多年來(lái)沉淀的技術(shù)能力形成面向企業(yè)需求的技術(shù)產(chǎn)品與解決方案,而 SpotMax 將是匯量科技 “技術(shù)外溢”的重要品牌。

做企業(yè)背后的 IT 公司,匯量科技是“有備而來(lái)”,最近三年,其研發(fā)投入始終處于增長(zhǎng)狀態(tài):2019 年匯量科技研發(fā)費(fèi)用達(dá) 2.5 億元人民幣,同比增長(zhǎng) 20.5%;研發(fā)技術(shù)團(tuán)隊(duì)員工 391 人,占總雇員人數(shù)的 50.3%。