Ik ga een open source Kubernetes-gebaseerd data- en ML-platform bouwen
Over deze dienst
Veel organisaties worden belast door de kosten van Snowflake, Redshift en Databricks omgevingen. Deze platforms zijn goed, maar ze kosten veel in vergelijking met de voordelen die ze bieden. Om dit probleem op te lossen, help ik organisaties bij het bouwen en onderhouden van hun eigen Data en ML Platform met end-to-end CICD, dat bijna geen kosten met zich meebrengt en volledig cloud-agnostisch is. Of je nu op AWS, GCP of Azure zit, met behulp van Kubernetes kunnen we een volledig functioneel platform onderhouden dat productie data pipelines en modellen kan ondersteunen. Ik gebruik gevestigde technologieën van Apache Software Foundation, Linux & AI Foundation en CNCF om een kosteneffectief, efficiënt en gebruiksvriendelijk platform te bouwen dat zeer aanpasbaar en flexibel is. Jouw ontwikkelaars kunnen er meer functies aan toevoegen volgens hun behoeften en zijn niet afhankelijk van een leverancier voor ondersteuning. Het wordt geen black box die je niet begrijpt. Je kunt eenvoudig Spark of DBT gebruiken om je pipelines te bouwen en te plannen via Airflow en te monitoren via Grafana, terwijl alles draait op je eigen cloud en Kubernetes. Ik doe dit al 5 jaar en heb al implementaties voltooid bij 4 grote MNC's.
Expertise:
Big data
•
etl
•
Transformatie
•
SQL
•
Overige
Technologie:
Apache Hadoop
•
Apache Kafka
•
apache vonk
•
Python
•
Overige
Veelgestelde vragen
Automatische vertaling
Kan ik het op elke cloud en on-premise bouwen?
Ja. Ik heb deze oplossing eerder geïmplementeerd op AWS en Azure, inclusief on-premise bare metal servers.
Help ik bij het opzetten van de eerste Data Pipelines en modellen?
Ja

