Ik rol mlops, llm en gpu-infrastructuur uit en beheer ze op aws en kubernetes

Sommige informatie is automatisch vertaald.

India

Ik spreek Hindi, Engels

19 bestellingen voltooid

Senior AI DevOps Engineer: AWS, Kubernetes, ComfyUI API's, DevSecOps

AI DevSecOps en Cloud Infrastructure Engineer, 4 jaar ervaring met het bouwen van productie systemen. Ik lever wat de meeste AI projecten missen: de onderliggende infrastructuur. Ik werk met AWS en E...
Over deze dienst

Ik zet AI-modellen in productie en houd ze draaiende. Een training script is geen product. Een gemonitorde, versieerbare, autoscaling service wel.

WAT IK BOUW
MLops pipelines: MLflow of Weights and Biases tracking, model registry, automatische retraining en veilige rollout
LLM serving: vLLM, Ollama, TGI en Hugging Face modellen achter een OpenAI compatibele API
GPU-infrastructuur: AWS EC2 g5 en g6, EKS met GPU-knooppunten, RunPod en Vast.ai, spot instances en autoscaling om je kosten te verlagen
Containers: Docker, Kubernetes, Helm, GPU scheduling, health checks en zero downtime rollout
CI/CD voor modellen en code: GitHub Actions, Jenkins, ArgoCD en GitOps
Observability: Prometheus, Grafana, request tracing, latency en kosten per token dashboards
Security: IAM least privilege, private VPC endpoints, secrets management en SSL
WAT JE KRIJGT
Werkende infrastructuur, de Terraform of Helm broncode die jij bezit, runbook documentatie en een overdrachtsgesprek zodat jouw team het kan beheren zonder mij.
Vier jaar ervaring in DevOps en AI-infrastructuur. Vertel me je model, verwacht verkeer en cloud, en ik bepaal de grootte en geef je een realistische maandelijkse kostenraming voordat je bestelt. Ik werk volgens US-tijden.

Tools:

Kubernetes

•

Docker

•

Amazon EKS

Frameworks:

Terraform

•

Ansible

Cloudprovider:

Amazon Web Services

•

Google Cloud Platform

Programmeertaal:

Bash

•

Go

•

Python

Expertise:

Installatie

•

Migratie

•

Debuggen

Andere DevOps-techniek diensten die ik aanbied