神武八荒一颗小说,欢乐颂小说在线阅读,我吃西红柿

我們開源啦！一鍵部署免費使用！Kubernetes上直接運行大數據平臺！

2024-04-26 10:43:04 來源：今日熱點網

導語：市場上首個 K8s 上的大數據平臺，開源了！

智領云自主研發(fā)的首個完全基于Kubernetes的容器化大數據平臺

Kubernetes Data Platform (簡稱KDP)

開源啦！

開發(fā)者只要準備好命令行工具，一鍵部署

Hadoop，Hive，Spark，Kafka, Flink, MinIO ...

就可以創(chuàng)建以前要花幾十萬甚至幾百萬才可以買到的大數據平臺

無需再花大量的時間和經費去做重復的研發(fā)

高度集成，單機即可體驗大數據平臺

在高級安裝模式下

用戶可在現有的K8s集群上集成運行大數據組件

不用額外單獨建設大數據集群

項目地址：

https://github.com/linktimecloud/kubernetes-data-platform

辛辛苦苦研究出來的成果，為什么要開源？

這波格局開大，老板有話說

問題1：我們?yōu)槭裁匆_源？

我們的產品一直是基于大數據開源生態(tài)體系建設的。之前就一直有開源回饋社區(qū)的計劃，但是因為之前Kubernetes對于大數據組件的支持還不夠成熟，我們也一直在迭代與Kubernetes的適配。現在我們的企業(yè)版已經在很多頭部客戶落地并且在生產環(huán)境下高效運行，覺得這個版本已經可以達到大部分生產級項目的需求，集成度以及可用性是能夠幫到有類似需求的用戶的，希望這次開源能夠降低在Kubernetes上集成大數據組件的門檻，讓更多Kuberenetes和big data社區(qū)的同行們可以使用。

問題2：開源版本的KDP，能干啥？

KDP可以很方便的在Kubenetes上安裝和管理常用的大數據組件，Hadoop，Hive，Spark，Kafka, Flink, MinIO 等等，不需要自己一個一個去適配，可以直接開始使用。然后KDP也提供集成的運維管理界面，用戶可以從界面管理所有組件的安裝配置，運行狀況，資源使用情況，修改配置。而且KDP會將一個大數據組件的所有負載（容器，pod）作為一個整體管理，用戶不需要在Kubernetes的控制平面上去管理單獨的負載。

問題3：最大的亮點是？

只要你已經在使用Kubernetes，那么在現有集群上十幾分鐘就可以啟動一個完整的大數據集群，馬上開始使用，極大的降低了大數據平臺的使用門檻。因為我們這個流程是高度集成的，整個安裝過程在一個單機環(huán)境下也都能啟動（例如使用單機kind虛擬集群都可以），所以在測試和實驗環(huán)境下都可以高效使用。當然，啟動之后Day 2的很多好處，例如資源的高效利用和集成的運維管理，也是KDP提供的重要功能。

KDP，即在Kubernetes上使用原生的分布式功能搭建及管理大數據平臺。

將多套大數據組件集成在Kubernetes之上，同時提供一個整體的管理及運維工具體系，形成一個完全基于Kubernetes的大數據平臺。企業(yè)級KDP更是支持在同一個Kubernetes集群中同時運行多個大數據平臺以及多租戶管理的能力，充分發(fā)揮Kubernetes云原生體系的優(yōu)勢。