如今,混合云在許多新興創(chuàng)新應(yīng)用中發(fā)揮著核心作用,尤其是在人工智能(AI)和其他能夠創(chuàng)造新商業(yè)價值和提高運(yùn)營效率的新興技術(shù)方面表現(xiàn)最為顯著。據(jù)調(diào)查結(jié)果顯示,2024年至2029年,中國人工智能行業(yè)的市場規(guī)模將進(jìn)一步擴(kuò)大,2029年市場規(guī)模將突破萬億大關(guān)。 但是,AI需要大量且高質(zhì)量的數(shù)據(jù)以充分發(fā)揮自身潛力。如果沒有高質(zhì)量的數(shù)據(jù),AI的輸出就會變得低效或不準(zhǔn)確。
肯睿Cloudera與Foundry的研究發(fā)現(xiàn),36%的IT領(lǐng)導(dǎo)者將這一點列為首要挑戰(zhàn)。此外,一項IDC調(diào)查顯示,中國只有22%的企業(yè)可較好地定義應(yīng)用人工智能的數(shù)據(jù)要求,建立初步的數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)和數(shù)據(jù)質(zhì)量提升機(jī)制。
為了達(dá)到這一數(shù)據(jù)質(zhì)量水平,大多數(shù)業(yè)務(wù)和IT領(lǐng)導(dǎo)者都選擇了混合數(shù)據(jù)管理方法,在云、本地或兩者結(jié)合的環(huán)境中移動數(shù)據(jù),將數(shù)據(jù)最有效地用于分析或投喂給AI模型。然而,僅采用混合云基礎(chǔ)設(shè)施并不能解決這個問題。要想獲得有意義的結(jié)果,并創(chuàng)建一個可擴(kuò)展的靈活數(shù)據(jù)架構(gòu),需要采用“真正的”混合云數(shù)據(jù)管理方法。
那么,什么是“真正的”混合云呢?接下來我們將深入探討這個問題。
重塑云端數(shù)據(jù)管理
將混合云戰(zhàn)略提升到“真正的”混合云水平需要考慮許多方面。其中,其中幾個重要因素需要重點關(guān)注!罢嬲摹被旌显频闹饕攸c之一是具備能夠在數(shù)據(jù)中心、云和邊緣作為單一平臺運(yùn)行的能力。雖然支持多云是正確的方向,但對于已經(jīng)投資建設(shè)數(shù)據(jù)中心的企業(yè)或需要在本地保留某些數(shù)據(jù)和分析的企業(yè)來說,光憑這一點并不能獲得完整的解決方案。在“真正的”混合云中,數(shù)據(jù)和工作負(fù)載可以在各個環(huán)境之間自由、多向移動。這種形式的混合云比標(biāo)準(zhǔn)的混合云更深入,覆蓋了獲取、倉儲、機(jī)器學(xué)習(xí)等整個數(shù)據(jù)生命周期,即便數(shù)據(jù)生命周期從頭到尾被分割到完全不同的環(huán)境中也不例外。
數(shù)據(jù)的形式多種多樣;旌显品桨钢阅軌驇韮r值,其核心是能夠理解和處理結(jié)構(gòu)化、半結(jié)構(gòu)化或非結(jié)構(gòu)化數(shù)據(jù)。“真正的”混合云包含能夠維護(hù)和利用各種格式數(shù)據(jù)的數(shù)據(jù)存儲庫。而要想實現(xiàn)“真正的”混合云,一個必不可少的要素就是開放式數(shù)據(jù)湖倉一體架構(gòu),這種數(shù)據(jù)存儲方式能夠管理大量非結(jié)構(gòu)化或半結(jié)構(gòu)化數(shù)據(jù),并在適當(dāng)?shù)沫h(huán)境中將這些數(shù)據(jù)用于分析工具或AI模型。采用湖倉一體架構(gòu)可以極大地降低傳統(tǒng)環(huán)境中隨著時間的推移而積累的復(fù)雜性,從而為員工帶來更加簡單的體驗和工作流程。
采用正確的混合云可以提高數(shù)據(jù)可見性和可訪問性,進(jìn)而創(chuàng)造業(yè)務(wù)價值。例如,肯睿Cloudera幫助Legal & General Investment Management (LGIM)公司靈活應(yīng)對市場變化、發(fā)掘新機(jī)遇和加強(qiáng) ESG方面的工作。經(jīng)過雙方的共同努力,肯睿Cloudera 幫助該公司奠定了堅實的基礎(chǔ),使其在未來能夠利用數(shù)據(jù)創(chuàng)造更大的價值。
建立統(tǒng)一的數(shù)據(jù)治理方法
只有當(dāng)負(fù)責(zé)人能夠看到數(shù)據(jù)、理解數(shù)據(jù)并迅速了解數(shù)據(jù)的部署位置和部署方式時,才能正確利用所有數(shù)據(jù)。正確的方法之一是采取一種無論數(shù)據(jù)位于何處、處于何種狀態(tài)或如何被部署到分析中,都能提供單一通用控制平面的解決方案。這也意味著“真正的”混合云能夠幫助企業(yè)避免使用大量僅適用于特定環(huán)境的工具。通過一個統(tǒng)一的全數(shù)據(jù)視圖,該混合云方案提供了更清晰的性能、資源分配和端到端的數(shù)據(jù)和分析費(fèi)用全貌。“真正的”混合云固有的跨職能性也為數(shù)據(jù)治理提供了關(guān)鍵助力。由于數(shù)據(jù)會在混合環(huán)境中不斷移動,這種方法有助于提高可見性,在數(shù)據(jù)從生成位置移動到需要它的位置時,能更容易對其應(yīng)用規(guī)則并保持合規(guī)性。
采用“真正的”混合云方案不止是為了解決眼前的挑戰(zhàn),甚至不止是為了改善數(shù)據(jù)治理。數(shù)據(jù)架構(gòu)一直在發(fā)生變化,并且隨著時間的推移,創(chuàng)新的步伐只會越來越快。由此,我們可以看出“真正的”混合云的重要性,尤其是當(dāng)企業(yè)開始轉(zhuǎn)型,青睞于高度靈活且可擴(kuò)展的自適應(yīng)數(shù)據(jù)架構(gòu)時。
【本文作者劉隸放,系肯睿中國Cloudera大中華區(qū)技術(shù)總監(jiān)】