如果您在2020年涉及大數據，那么將很難避免使用云，因為云已成為存儲和處理大量數據的實(shí)際標準平臺。隨著(zhù)云巨頭爭奪霸主地位，云將在今年迅速變化。成功地在云中導航這些動(dòng)態(tài)可能意味著(zhù)慶祝大數據勝利與清理數字混亂之間的區別。
現代云堆棧依靠Kubernetes進(jìn)行容器編排。預計今年將在Kubernetes上啟用大數據和AI工作負載方面取得進(jìn)展，或者是Alluxio的創(chuàng )始人兼首席技術(shù)官Haoyuan “ HY” Li 稱(chēng)其為“ Kubernetifying ”分析堆棧。
“容器和Kubernetes在無(wú)狀態(tài)應用程序(如Web服務(wù)器和獨立數據庫)上表現特別出色，但在高級分析和人工智能方面，我們并沒(méi)有看到大量的容器使用情況，” Li說(shuō)。“在2020年，我們將看到在Kubernetes領(lǐng)域，向AI和分析工作負載的轉變將變得更加主流。“ ubernetizing”分析堆棧將意味著(zhù)通過(guò)將數據從遠程數據孤島移到K8s集群中來(lái)解決數據共享和彈性問(wèn)題，以實(shí)現更嚴格的數據局部性。”
兩位信息構建者副總裁埃里克·拉布(Eric Raab)和卡比爾·喬杜里(Kabir Choudry)表示，目前，我們已經(jīng)達到了數量龐大的云原生分析應用程序，并且由于這一原因，云將在2020年辭職。
Raab和Choudry說(shuō)：“使用BI和分析工具的組織如今屬于三類(lèi)之一：當前在云中運行的組織，遷移到云中的組織以及討論遷移到云中的組織。” “盡管他們過(guò)去可能因擔心其平臺的體系結構是否旨在與云生態(tài)系統集成和開(kāi)發(fā)而受阻，但現在有專(zhuān)門(mén)針對基于云的操作而構建的成熟解決方案。到2020年，組織將遷移到云以利用云原生解決方案的可用性，可擴展性和靈活性的大門(mén)將打開(kāi)。
Teradata云營(yíng)銷(xiāo)總監Brian Wood預測，企業(yè)將在所有新分析工作負載的部署中成為云計算第一人。
他說(shuō)：“預計IT部門(mén)將默認使用公共云，以支持任何業(yè)務(wù)計劃，而不僅僅是現有基礎架構的容量擴展。” 與公共云供應商簽訂的“使用或失去使用”批量購買(mǎi)協(xié)議將促使企業(yè)IT部門(mén)盲目地偏愛(ài)云部署位置而不是解決方案適合性，這令他們的領(lǐng)導人最終感到遺憾。滿(mǎn)足短期預算目標的狂熱將勝過(guò)考慮周全的計劃和戰略投資的智慧。”
公眾的云已經(jīng)得到了大多數媒體的關(guān)注。但在2020年，我們會(huì )看到重新崛起的私有云，預計喬恩·托爾，首席營(yíng)銷(xiāo)官Cloudian。
“具有大規模存儲需求的組織，例如醫療保健，科學(xué)研究，媒體和娛樂(lè )領(lǐng)域的組織，在管理容量密集型工作負載(可能達到數十PB)方面面臨著(zhù)獨特的挑戰，” Toor說(shuō)。“私有云通過(guò)提供公共云的規模和靈活性?xún)?yōu)勢以及本地存儲的性能，訪(fǎng)問(wèn)，安全性和控制優(yōu)勢來(lái)應對這些挑戰。”
云的簡(jiǎn)單性和靈活性是一大優(yōu)勢。但是，基于實(shí)用程序的云計算定價(jià)并不適合所有工作負載。Splice Machine首席執行官Monte Zweben表示，當前這一輪的數字化轉型計劃或DX 2.0是云計算中的“圓釘子” 。
他說(shuō)：“' 云幻滅'之所以盛行，是因為電表一直在運行。” 急于遷移到云端的公司完成了他們的第一階段項目，并意識到他們擁有與之前運行的應用程序相同的應用程序，而沒(méi)有利用新的數據源來(lái)使它們充滿(mǎn)AI。實(shí)際上，他們的運營(yíng)支出實(shí)際上已經(jīng)增加了，因為人工操作員的節省完全被始終處于運行狀態(tài)的應用程序的云計算資源的成本所淹沒(méi)。哎喲。這些資源在內部部署之前已被資本化，但現在已達到損益表。”
Quest Software的Foglight研發(fā)團隊的軟件工程高級經(jīng)理秦英華說(shuō)，混合計算的興起意味著(zhù)傳統的數據中心將消失。
秦說(shuō)：“在未來(lái)幾年中，隨著(zhù)云服務(wù)，物聯(lián)網(wǎng)和其他創(chuàng )新限制了傳統本地數據中心可以提供的優(yōu)勢，我們可以期待傳統數據中心消失。” “將需要根據業(yè)務(wù)需求而不是物理位置來(lái)定位計算工作負載，結果，公司將開(kāi)始遷移到混合云以提供更靈活的基礎架構。”
隨著(zhù)公司尋求結合本地資源和基于云的資源的方式，混合環(huán)境正在不斷發(fā)展。Ensono公共云總經(jīng)理肖恩·羅伯茨(Sean Roberts)說(shuō)，弄清楚如何管理云和本地資源的混合并不是一件容易的事，但是新興的管理平臺將有所幫助。
羅伯茨說(shuō)：“主要的云廠(chǎng)商開(kāi)始意識到他們不能擁有所有的工作負載，大多數公司將采用多云策略。” “因此，戰爭中的新戰線(xiàn)已經(jīng)打開(kāi)：控制管理平面。想想Microsoft宣布其Azure Arc –旨在將Azure服務(wù)和管理引入任何基礎架構的一組技術(shù)，使Microsoft云客戶(hù)端可以跨AWS和Google Cloud管理資源。”
公共云將在很大一部分人口中看起來(lái)相似，這將使云平臺更難與眾不同。對此，Datrium首席技術(shù)官兼聯(lián)合創(chuàng )始人Sazzala Reddy說(shuō)，云將在本地部署。
“ 不可知論者將抓住這一天，”雷迪說(shuō)。云供應商意識到，許多企業(yè)客戶(hù)還沒(méi)有準備好完全遷移到云。每個(gè)人都說(shuō)他們想要云，但是對于公司來(lái)說(shuō)，要做出這種轉變仍然是一個(gè)挑戰。作為響應，云供應商將發(fā)布本地產(chǎn)品，這些產(chǎn)品可為大型企業(yè)提供遷移到云的緩慢體驗(例如AWS Outposts)。但是，這都是暫時(shí)的，因為前哨基地的目標是為它們的特定云提供輕松的橋梁。”
AWS Redshift，Snowflake和Google BigQuery等云數據倉庫正在快速增長(cháng)。但是這種勢頭會(huì )在2020年繼續嗎?Dremio聯(lián)合創(chuàng )始人兼首席執行官Tomer Shiran 對此表示懷疑。
“鑒于傳統的本地數據倉庫的巨大成本和復雜性，新一代云原生企業(yè)數據倉庫的出現不足為奇，” Shiran說(shuō)。“但是精明的企業(yè)已經(jīng)發(fā)現，云數據倉庫只是對傳統體系結構的更好實(shí)現，因此，他們避免繞道而行，而是直接遷移到圍繞云數據湖構建的下一代體系結構。”
Shiran說(shuō)，在這種新的體系結構中，不會(huì )移動(dòng)或復制數據，沒(méi)有數據倉庫，也沒(méi)有關(guān)聯(lián)的ETL，多維數據集或其他解決方法。“我們預測，到2020年，全球2000%的75%的產(chǎn)品將投入生產(chǎn)或在云數據湖中試產(chǎn)，它們將使用多個(gè)最佳引擎針對數據科學(xué)，數據管道，BI和交互式/臨時(shí)的不同用例。分析”，他繼續說(shuō)道。
但是Sigma Computing的聯(lián)合創(chuàng )始人兼首席執行官Rob Woollen 并沒(méi)有看到云數據倉庫的增長(cháng)速度。實(shí)際上，他認為云數據倉庫(CDW)繼續受到關(guān)注。
伍倫說(shuō)：“ CDW起飛的原因有很多。” “可擴展性，靈活性，較低的成本和連接性，現在許多人認為云中的數據倉庫比本地系統更安全。他們的理由是，由于云數據倉庫提供商的整個(gè)業(yè)務(wù)模型都依賴(lài)于數據安全性和加密，因此他們可能比您更擅長(cháng)。這些公司在安全技術(shù)上進(jìn)行了大量投資，并致力于整個(gè)部門(mén)來(lái)保護您的數據。CDW甚至可以減輕合規負擔。通過(guò)將所有數據存儲在一個(gè)地方，組織不必處理搜索各種離散的業(yè)務(wù)系統和數據存儲以定位相關(guān)數據的復雜性。”
我們提到過(guò)Kubernetes嗎?Kubernetes或K8S是一項關(guān)鍵技術(shù)，可實(shí)現云堆棧的大部分靈活性。Unravel Data首席執行官Kunal Agarwal認為Kubernetes趨勢不會(huì )很快消失。
Agarwal說(shuō)：“ Kubernetes最近超過(guò)了Docker，成為最受關(guān)注的容器技術(shù)。” “將來(lái)，每種數據技術(shù)都將在Kubernetes上運行。我們可能不會(huì )在2020年實(shí)現這一目標，但隨著(zhù)越來(lái)越多的主要供應商在其旗艦平臺上建立基礎，Kubernetes將繼續被采用。還有一些需要解決的問(wèn)題，例如持久性存儲問(wèn)題，但目前正在通過(guò)BlueK8等舉措來(lái)解決。整個(gè)大數據社區都在Kubernetes的后面，并且可以確保其持續的統治地位。”
Neo4j的首席執行官兼聯(lián)合創(chuàng )始人埃米爾·埃弗雷姆(Emil Eifrem)表示，云和開(kāi)源的交集為開(kāi)發(fā)人員提供了沃土。
Eifrem表示：“定位最完善的技術(shù)公司將是那些擁有B2D(企業(yè)對開(kāi)發(fā)人員)，開(kāi)發(fā)人員/從業(yè)人員主導的方法的公司，并提供SaaS產(chǎn)品，以隨時(shí)隨地為從業(yè)人員提供支持。” “這些往往是開(kāi)源軟件(OSS)公司，它們隨著(zhù)時(shí)間的推移在開(kāi)發(fā)人員社區中建立了信任，了解開(kāi)發(fā)人員的不斷變化的需求，并且精通經(jīng)典的企業(yè)軟件銷(xiāo)售動(dòng)議……。提供SaaS產(chǎn)品的OSS公司是處于非常有利的位置，可以從希望不付任何費用的個(gè)人(包括本地和云端的六位數企業(yè)經(jīng)典交易)中占領(lǐng)整個(gè)市場(chǎng)。”
戴爾技術(shù)公司首席運營(yíng)官杰夫·克拉克(Jeff Clarke)說(shuō)，新興的企業(yè)計算平臺是公共云和本地資源的結合。
“公共云和私有云可以并將會(huì )共存的想法在2020年將成為現實(shí)，”克拉克說(shuō)。“由混合云架構支持的多云IT戰略將在確保組織具有更好的數據管理和可見(jiàn)性，同時(shí)確保其數據保持可訪(fǎng)問(wèn)性和安全性方面發(fā)揮關(guān)鍵作用……但是私有云將不僅僅存在于企業(yè)核心內。數據中心。隨著(zhù)5G和邊緣部署的不斷推出，私有混合云將存在于邊緣，以確保實(shí)時(shí)監控和管理所處數據的所有位置。這意味著(zhù)組織將期望更多的云和服務(wù)提供商確保他們能夠在所有環(huán)境中支持其混合云需求。”
Panasas的軟件架構師Curtis Anderson表示，公共云對于開(kāi)發(fā)AI可能非常有用，但是生產(chǎn)AI的要求支持本地資源。
“隨著(zhù)AI項目從探索性部署到全面生產(chǎn)的畢業(yè)，組織將發(fā)現他們需要離開(kāi)公共云以使用成本更低的本地解決方案，而這反過(guò)來(lái)又將為HPC基礎架構的建設提供資金并產(chǎn)生大量的繁榮，” Anderson預測。“但是，公共云將對下一代內部部署基礎架構產(chǎn)生重大影響……該行業(yè)已經(jīng)習慣了公共云所提供的管理的極大靈活性和簡(jiǎn)單性，因此組織將希望在其內部保留這些特征。低成本的本地解決方案。”
Appen的首席技術(shù)官Wilson Pang認為，當您將新興的數據法規混為一談時(shí)，規模就會(huì )傾向于本地部署。
“隨著(zhù)越來(lái)越多的組織為他們的AI計劃試驗更多數據，對AI的安全性和道德使用將變得越來(lái)越重要，” Pang說(shuō)。“在這個(gè)領(lǐng)域，首要的擔憂(yōu)是數據泄漏，尤其是個(gè)人身份信息(PII)，新產(chǎn)品的想法和專(zhuān)有信息的泄漏。這些擔憂(yōu)將導致出現更多用于支持AI創(chuàng )建的本地解決方案，包括數據注釋和安全利用多元化人群的解決方案。”
NetApp首席戰略官Atish Gude 說(shuō)，為邊緣崩潰做好準備。“為為5G的廣泛出現做準備，低成本傳感器和成熟的AI應用將被用于構建計算密集型邊緣環(huán)境，為高帶寬，低延遲AI驅動(dòng)的物聯(lián)網(wǎng)環(huán)境奠定基礎，并具有巨大的創(chuàng )新潛力–和破壞。”他說(shuō)。