我們開源啦!一鍵部署免費使用!Kubernetes上直接運行大數據平臺!

作者:樂購科技 來源: 2024-04-26 11:26:25 閱讀 我要評論 直達商品

導語:市場上首個 K8s 上的大數據平臺,開源了!

智領云自主研發的首個完全基于Kubernetes的容器化大數據平臺

Kubernetes Data Platform (簡稱KDP)

開源啦!

開發者只要準備好命令行工具,一鍵部署

Hadoop,Hive,Spark,Kafka, Flink, MinIO ...

就可以創建以前要花幾十萬甚至幾百萬才可以買到的大數據平臺

無需再花大量的時間和經費去做重復的研發

高度集成,單機即可體驗大數據平臺

在高級安裝模式下

用戶可在現有的K8s集群上集成運行大數據組件

不用額外單獨建設大數據集群

項目地址:

https://github.com/linktimecloud/kubernetes-data-platform

辛辛苦苦研究出來的成果,為什么要開源?

這波格局開大,老板有話說

問題1:我們為什么要開源?

我們的產品一直是基于大數據開源生態體系建設的。之前就一直有開源回饋社區的計劃,但是因為之前Kubernetes對于大數據組件的支持還不夠成熟,我們也一直在迭代與Kubernetes的適配。現在我們的企業版已經在很多頭部客戶落地并且在生產環境下高效運行,覺得這個版本已經可以達到大部分生產級項目的需求,集成度以及可用性是能夠幫到有類似需求的用戶的,希望這次開源能夠降低在Kubernetes上集成大數據組件的門檻,讓更多Kuberenetes和big data社區的同行們可以使用。

問題2:開源版本的KDP,能干啥?

KDP可以很方便的在Kubenetes上安裝和管理常用的大數據組件,Hadoop,Hive,Spark,Kafka, Flink, MinIO 等等,不需要自己一個一個去適配,可以直接開始使用。然后KDP也提供集成的運維管理界面,用戶可以從界面管理所有組件的安裝配置,運行狀況,資源使用情況,修改配置。而且KDP會將一個大數據組件的所有負載(容器,pod)作為一個整體管理,用戶不需要在Kubernetes的控制平面上去管理單獨的負載。

問題3:最大的亮點是?

只要你已經在使用Kubernetes,那么在現有集群上十幾分鐘就可以啟動一個完整的大數據集群,馬上開始使用,極大的降低了大數據平臺的使用門檻。因為我們這個流程是高度集成的,整個安裝過程在一個單機環境下也都能啟動(例如使用單機kind虛擬集群都可以),所以在測試和實驗環境下都可以高效使用。當然,啟動之后Day 2的很多好處,例如資源的高效利用和集成的運維管理,也是KDP提供的重要功能。

KDP,即在Kubernetes上使用原生的分布式功能搭建及管理大數據平臺。

將多套大數據組件集成在Kubernetes之上,同時提供一個整體的管理及運維工具體系,形成一個完全基于Kubernetes的大數據平臺。企業級KDP更是支持在同一個Kubernetes集群中同時運行多個大數據平臺以及多租戶管理的能力,充分發揮Kubernetes云原生體系的優勢。

KDP,通過對開源大數據組件的擴展和集成,實現了傳統大數據平臺到K8s大數據平臺的平穩遷移。

作為市場上首個可完全在Kubernetes上部署的容器化云原生大數據平臺,智領云自主研發的KDP,深度整合云原生架構優勢,將大數據組件、數據應用及資源調度混排,納入Kubernetes管理體系,從而帶你真正玩轉云原生!

總體框架

簡單來講,KDP可以允許客戶在Kubernetes上運行它所有的大數據組件,并把它們作為一個整體管理起來。

在Kubernetes上運行大數據平臺有三個好處:

第一,更高效的大數據組件集成:KDP提供標準化自動化的大數據組件部署和配置,極大地縮短了大數據項目開發和上線時間;

第二,更高效的大數據集群運管:KDP通過大數據組件與K8s的集成,在K8s之上搭建了一個大數據組件管理抽象層,標準化大數據組件生命周期管理,并提供UI界面進一步提升了部署、升級等操作的效率;

第三,更高的集群資源利用率:利用K8s的資源管理和配額機制,與其它系統共享K8s資源池,精細化資源管理,對比傳統大數據平臺約30%左右的資源利用率,KDP可大幅提升至60%以上。

社區

我們期待您的貢獻和建議!最簡單的貢獻方式是參與Github議題/討論的討論。 如果您有任何問題,請與我們聯系,我們將確保盡快為您解答。

微信群:添加小助手微信拉您進入交流群

釘釘群:搜索公開群組號 82250000662

貢獻

參考開發者指南,了解如何開發及貢獻 KDP。

https://linktimecloud.github.io/kubernetes-data-platform/docs/zh/developer-guide/developer-guide.html


  推薦閱讀

  AI「攪動」云計算,阿里云推動算力底層變革

  “從‘敢為行業先’的可持續低價到AI生態的全面構建,阿里云正面向未來的企業及開發者,全力鋪設推動社會進步的算力基石”。  在阿里云近期發布的>>>詳細閱讀


本文標題:我們開源啦!一鍵部署免費使用!Kubernetes上直接運行大數據平臺!

地址:http://m.sdlzkt.com/a/05/314839.html

樂購科技部分新聞及文章轉載自互聯網,供讀者交流和學習,若有涉及作者版權等問題請及時與我們聯系,以便更正、刪除或按規定辦理。感謝所有提供資訊的網站,歡迎各類媒體與樂購科技進行文章共享合作。

網友點評
我的評論: 人參與評論
驗證碼: 匿名回答
網友評論(點擊查看更多條評論)
友情提示: 登錄后發表評論,可以直接從評論中的用戶名進入您的個人空間,讓更多網友認識您。
自媒體專欄

評論

熱度

主站蜘蛛池模板: 黑人粗长大战亚洲女2021国产精品成人免费视频 | 国产精品成人扳**a毛片| 国产v精品成人免费视频400条| 国产成人精品一区二区秒拍| 成人午夜精品无码区久久| 成人免费视频一区| 成人性生免费视频| 四虎影视成人精品| 欧美成人免费全部观看天天性色 | 亚洲国产成人综合| 最新69国产成人精品免费视频动漫| 欧美成人aa久久狼窝动画| 国产成人亚洲欧美电影| 美国特级成人毛片| 国产成人亚洲综合无码| 精品国产成人亚洲午夜福利| 国产成人黄网址在线视频| 黑人粗长大战亚洲女2021国产精品成人免费视频 | 久久久久久亚洲av成人无码国产| 草莓视频成人appios| 国产成人av大片大片在线播放| 99国产精品久久久久久久成人热 | 欧美成人天天综合在线视色| 国产成人AV免费观看| 国产成人综合在线视频| 欧美成人三级一区二区在线观看| 亚洲最大成人网色| 国产成人a毛片在线| 国产成人亚洲综合一区| 国产成人精品午夜福利 | www成人免费视频| 亚洲AV无码成人网站在线观看| 四虎成人免费大片在线| 四虎影视成人永久在线播放| 成人免费观看视频高清视频| 日韩欧美成人乱码一在线| 久久久久国产成人精品| 综合558欧美成人永久网站| 粗大黑人巨精大战欧美成人| 色欲欲WWW成人网站| 日韩成人免费视频|