《人類簡史》談到，人類與眾不同之處就是可以在心里構(gòu)筑一個(gè)世界，然后在現(xiàn)實(shí)世界里面創(chuàng)造出來。今天華為正在為人類進(jìn)入智能時(shí)代，構(gòu)筑一個(gè)全新的云基石。
當(dāng)大家都在提智能的時(shí)候，華為云想到的卻是當(dāng)前數(shù)據(jù)架構(gòu)是否能支撐起萬物互聯(lián)的智能世界?比如支撐整個(gè)數(shù)據(jù)流動(dòng)的底座，云計(jì)算是否需要進(jìn)化?比如今天的云存儲(chǔ)是否能夠滿足智能時(shí)代海量數(shù)據(jù)的交互?
華為云給出的答案是：制約云計(jì)算為智能時(shí)代更好地服務(wù)的瓶頸就在“最后一公里”。在云端，“最后一公里”即指數(shù)據(jù)通過服務(wù)端軟件、網(wǎng)絡(luò)、存儲(chǔ)服務(wù)器，最終抵達(dá)介質(zhì)的這一過程。
“最后一公里”的挑戰(zhàn)，也是指隨著人工智能(AI)、VR/AR、5G、自動(dòng)駕駛等技術(shù)和應(yīng)用的發(fā)展，云存儲(chǔ)面臨著海量數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)實(shí)時(shí)性、以及智能應(yīng)用等挑戰(zhàn)。
圍繞著“最后一公里”的挑戰(zhàn)，華為云日前在成都發(fā)布了云存儲(chǔ)All-Flash戰(zhàn)略，力在推動(dòng)云存儲(chǔ)從毫秒走向微秒時(shí)代，同時(shí)還推出了該戰(zhàn)略的首個(gè)落地產(chǎn)品——全新一代極速IO云硬盤。
那么圍繞云計(jì)算“最后一公里”瓶頸，華為云存儲(chǔ)如何實(shí)現(xiàn)微秒實(shí)時(shí)處理?又如何通過AI來實(shí)現(xiàn)數(shù)據(jù)利用越來越快。至頂網(wǎng)采訪了華為云CTO張宇昕。
張宇昕表示，隨著人工智能(AI)、VR/AR、5G、自動(dòng)駕駛等技術(shù)的發(fā)展，應(yīng)用對云存儲(chǔ)的實(shí)時(shí)處理能力提出了更高標(biāo)準(zhǔn)。對于支撐智能世界的數(shù)據(jù)平臺(tái)而言，需要進(jìn)入百微秒量級，才能滿足實(shí)時(shí)性要求。
進(jìn)入微秒時(shí)代，華為云有哪些黑科技？
在數(shù)據(jù)中心里面，影響數(shù)據(jù)時(shí)延的原因主要來自兩個(gè)層面，一個(gè)是經(jīng)過整個(gè)網(wǎng)絡(luò)傳輸時(shí)延，一個(gè)是存儲(chǔ)本身介質(zhì)的時(shí)延。目前這兩個(gè)層面的時(shí)延都是毫秒級，這樣情況下的5G應(yīng)用、自動(dòng)駕駛、AI等應(yīng)用很難做到實(shí)時(shí)處理，如果要進(jìn)入微秒時(shí)代，必須把這兩段時(shí)延的瓶頸都打破。
張宇昕分享了華為云解決數(shù)據(jù)實(shí)時(shí)處理難題的黑科技。
張宇昕表示，首先，為了實(shí)現(xiàn)這“最后一公里”的百微秒級突破，平均時(shí)延達(dá)4毫秒的機(jī)械硬盤(7200轉(zhuǎn))成為了第一個(gè)被優(yōu)化的對象。相比機(jī)械硬盤，F(xiàn)lash介質(zhì)具有更強(qiáng)的性能和20μs的極低時(shí)延。同時(shí)華為云圍繞介質(zhì)上的能力，全新設(shè)計(jì)了先進(jìn)的存儲(chǔ)引擎，既充分釋放介質(zhì)的能力，降低時(shí)延和提升性能，又提高了存儲(chǔ)介質(zhì)的可靠性和增強(qiáng)了使用壽命。
“第二，我們通過軟硬件架構(gòu)和數(shù)據(jù)中心架構(gòu)的優(yōu)化，實(shí)現(xiàn)了極簡網(wǎng)絡(luò)，也實(shí)現(xiàn)了多核免鎖并發(fā)，使得軟件的時(shí)延和網(wǎng)絡(luò)的時(shí)延也降到了極低，所以整個(gè)數(shù)據(jù)處理IO從進(jìn)來到出去，我們能實(shí)現(xiàn)50μs -100μs的穩(wěn)定時(shí)延。” 張宇昕談到。
第三，華為公司有一個(gè)很強(qiáng)的優(yōu)勢就是芯片，目前全系列自研芯片從“算、傳、存、智”四個(gè)維度來增強(qiáng)數(shù)據(jù)處理全流程。芯片與架構(gòu)的緊密配合，充分發(fā)揮了鯤鵬CPU在多核、低功耗等方面的優(yōu)勢;通過高性能智能網(wǎng)卡芯片、SSD存儲(chǔ)控制芯片實(shí)現(xiàn)了數(shù)據(jù)的直接訪問;結(jié)合昇騰AI芯片，讓全棧軟硬件聯(lián)動(dòng)創(chuàng)新，并首次實(shí)現(xiàn)云存儲(chǔ)在芯片級的深度定制優(yōu)化;實(shí)現(xiàn)通過網(wǎng)絡(luò)芯片和SSD 存儲(chǔ)卡控制芯片，把整個(gè)IO路徑重構(gòu)，做到極低時(shí)延。
當(dāng)然說了這么多，個(gè)人第一感覺還是算法的重要性，不管是控制器、軟件也好，芯片也好，里面很多核心技術(shù)其實(shí)都涉及算法，算法需要長期的積累，才能不斷地逼近能力極限。華為云的優(yōu)勢就是把這些能力綜合起來，做到了數(shù)據(jù)的實(shí)時(shí)處理。
存儲(chǔ)越用越快？我們從當(dāng)下的數(shù)據(jù)“越用越慢”談起
在發(fā)布會(huì)上，張宇昕談到華為云創(chuàng)新的技術(shù)讓存儲(chǔ)越用越快，引起了筆者的好奇心。大家知道不管是手機(jī)，還是電腦，用的時(shí)間越久，速度越慢。那么華為云是如何實(shí)現(xiàn)數(shù)據(jù)存儲(chǔ)越來越快的呢?
首先我們來看一下當(dāng)前的數(shù)據(jù)存儲(chǔ)越用越慢的情況。隨著數(shù)據(jù)的增加，存儲(chǔ)介質(zhì)碎片增多，包括企業(yè)的數(shù)據(jù)中心到云數(shù)據(jù)中心。隨著時(shí)間地推移，用戶訪問數(shù)據(jù)越來越慢。造成這種原因很大程度上就是由于數(shù)據(jù)在數(shù)據(jù)中心的布局以及數(shù)據(jù)存儲(chǔ)所提供IO能力跟企業(yè)業(yè)務(wù)要求不匹配。當(dāng)數(shù)據(jù)量大，租戶越來越多，相互之間也可能資源有爭搶的，那這種情況就會(huì)加劇。
目前，華為云存儲(chǔ)將人工智能技術(shù)融入分布式存儲(chǔ)的全生命周期，智能識(shí)別用戶業(yè)務(wù)模型，實(shí)現(xiàn)存儲(chǔ)平臺(tái)的自主調(diào)優(yōu)和自我進(jìn)化，讓應(yīng)用越用越快。華為云AI預(yù)測能力，可預(yù)判30天性能趨勢，提前14天發(fā)現(xiàn)故障盤并自動(dòng)隔離。AI控制的引入，可智能預(yù)測用戶性能趨勢，并根據(jù)用戶提前配置的自動(dòng)擴(kuò)容等策略完成調(diào)整，免人工干預(yù)保障業(yè)務(wù)平穩(wěn)。經(jīng)過全局的數(shù)據(jù)進(jìn)行優(yōu)化，最大化地讓全局的資源得到充分利用。
所以從客戶的感受來講，隨著這種學(xué)習(xí)的深入，訓(xùn)練數(shù)目的增加，訓(xùn)練精度的提升，AI會(huì)越來越了解客戶，讓系統(tǒng)自動(dòng)感知，而不是通過人工干預(yù)，可以做到快速系統(tǒng)調(diào)整來響應(yīng)客戶的需求。
華為云明確了以“全閃存、全系列、+智能、全棧創(chuàng)新”為導(dǎo)向的All-Flash戰(zhàn)略布局，讓AI加持的云存儲(chǔ)逼近介質(zhì)的極限，帶領(lǐng)全系列存儲(chǔ)逐步完成全閃存進(jìn)化，帶領(lǐng)云存儲(chǔ)由機(jī)械時(shí)代邁入電子時(shí)代。而本次基于All-Flash戰(zhàn)略推出的極速IO云硬盤，其時(shí)延低至50~100μs，并具有4GB/s帶寬和高達(dá)100萬IOPS性能，可滿足結(jié)構(gòu)化數(shù)據(jù)庫、半結(jié)構(gòu)化數(shù)據(jù)庫和ELK分布式日志應(yīng)用以及流處理等場景對性能的極致要求，也是主流云廠商中首家進(jìn)入百微秒以內(nèi)的云硬盤。
