Ik zet een private self-hosted llm op jouw server op met ollama, vllm, open webui

J
junaidaslam
J
junaidaslam
Junaid Aslam

Level 1

Sommige informatie is automatisch vertaald.
Gescreend door Fiverr Pro

Junaid Aslam is geselecteerd door het team van Fiverr Pro vanwege diens expertise.

Over deze dienst

Automatische vertaling

Stuur me alsjeblieft een bericht om de vereisten te bespreken voordat je bestelt.


Wil je een AI-assistent die jouw data op jouw eigen server houdt? Ik zet een private LLM op jouw VPS of GPU-server op. Geen prompt of document gaat naar een derde partij.


Wat ik opzet

- Ollama of vLLM die een open model serveert: Llama 3, Mistral, DeepSeek, Qwen, Gemma, of elk Hugging Face-model

- Open WebUI als chat-scherm, met gebruikersaccounts en rollen

- Een OpenAI-compatibele API, zodat jouw apps zo kunnen bellen als OpenAI

- Optionele RAG op jouw PDFs en documenten, met pgvector of Qdrant

- Docker Compose-setup, Nginx, HTTPS, en een geschreven overdrachtshandboek


Waar het draait

Elke Linux-server: jouw VPS, on-premises machine, AWS, Azure, Google Cloud, of een gehuurde GPU op RunPod. GPUs: NVIDIA H100, A100, L40S, RTX 4090. Ik noem eerst de maandelijkse kosten.


Data-locatie

Ik kan hosten in de EU, UK, VS of elk land of regio naar keuze. Dit ondersteunt data residency-regels zoals GDPR, UK GDPR en CCPA.


Wat ik niet doe

Ik finetune of quantize modellen niet. Ik zet bestaande open modellen in.

Maak kennis met Junaid Aslam

Junaid Aslam

ASP Dot NET Core, Web API, React, JS, TS, SQL, NoSQL, AWS, Azure, AI Chatbot RAG

4,8(125)

Level 1

Junaid Aslam maakt deel uit van de Fiverr Pro-catalogus en is zorgvuldig uitgekozen door het Fiverr Pro-team vanwege zijn of haar vaardigheden en expertise.

Gescreend voor

  • Software development

  • Afkomstig uitPakistan
  • Lid sindssep 2015
  • Gem. reactietijd1 uur
  • Laatste levering1 maand
  • Talen

    Urdu, Engels
Pro-vetted Senior .NET engineer with 7+ years building full-stack web apps and APIs for clients across the US, UK, EU, and beyond. I specialise in .NET, .NET Core, ASP.NET MVC5, Web API, Blazor, React, and Next JS, following Clean Architecture and SOLID principles so your codebase stays maintainable as it grows. I also offer AI automation & AI integration services, including custom AI chatbots, RAG, n8n, make.com AI workflows, Claude/GPT API.. My tech stack includes C# .NET 10, 9.0 · Blazor · EF Core · API · React/Next.js · TypeScript · MS SQL · Azure · AWS · WordPress · Firebase · PostgreSQL.

Automatische vertaling

Mijn portfolio

Andere AI-development diensten die ik aanbied