Ik implementeer open llms op je GPU-server met vllm, docker en ollama

Sommige informatie is automatisch vertaald.

Marokko

Ik spreek Arabisch, Frans, Engels, Spaans

35 bestellingen voltooid

AI-ingenieur

Ik ben een PhD AI Engineer (AI voor Gezondheidszorg, Mohammed V Universiteit, 2026). Ik bouw productie AI-systemen: LLM fine-tuning (LoRA/QLoRA), RAG chatbots, AI agents, workflow automatiseringen, co...

Niveau 2

Voldoet aan hoge prestatiecriteria en heeft een bewezen staat van dienst in het voldoen aan de verwachtingen van de klant.

Over deze dienst

Run open LLMs op JOUW infrastructuur zonder per-token API-kosten, volledige dataprivacy.

Ik zet productieklare LLM-diensten op jouw GPU VPS of on-premises server:

  • Een-commando implementatie met Ollama, of hoge doorvoer met vLLM
  • Docker-gebaseerde, reproduceerbare setups met herstartbeleid
  • Gekwantiseerde modellen (AWQ/GPTQ) afgestemd op jouw VRAM-budget
  • OpenAI-compatibele API-endpoint met toegangscontrole
  • Optionele RAG-aansluiting zodat het model antwoord geeft op basis van jouw documenten

Ik ben een PhD AI-ingenieur die open-weight LLMs heeft verfijnd en in productie heeft gezet.

Basis: één open LLM geïmplementeerd via Ollama op jouw server.

Standaard: vLLM + Docker + beveiligd API-endpoint, load-tested.

Premium: multi-model setup, kwantisatie-afstemming, monitoring dashboard en volledige documentatie.

Jij levert de server (elke GPU VPS werkt); ik regel de rest.

Expertise:

Software development

Programmeertaal:

Python

Mijn portfolio