Je vais configurer un llm privé auto-hébergé sur votre serveur avec Ollama, vLLM, Open WebUI

J
junaidaslam
J
junaidaslam
Junaid Aslam

Level 1

Certaines informations ont été traduites automatiquement.
Certifié par Fiverr Pro

Junaid Aslam a été sélectionné par l'équipe Fiverr Pro pour son expertise.

À propos de ce service

Traduction automatique

Veuillez me contacter pour discuter de vos exigences avant de passer commande.


Vous souhaitez un assistant IA qui garde vos données sur votre propre serveur ? Je configure un LLm privé sur votre VPS ou votre serveur GPU. Aucun prompt ni document n’est envoyé à un tiers.


Ce que je mets en place

- Ollama ou vLLM servant un modèle ouvert : Llama 3, Mistral, DeepSeek, Qwen, Gemma ou tout modèle Hugging Face

- Open WebUI comme écran du chat, avec comptes utilisateurs et rôles

- Une API compatible OpenAI, afin que vos applications l’appellent comme OpenAI

- Option RAG sur vos PDFs et documents, avec pgvector ou Qdrant

- Configuration Docker Compose, Nginx, HTTPS et un guide de bascule rédigé


Où cela tourne

Sur n’importe quel serveur Linux : votre VPS, machine sur site, AWS, Azure, Google Cloud, ou un GPU loué sur RunPod. GPUs : NVIDIA H100, A100, L40S, RTX 4090. Je vous indique d’abord le coût mensuel.


Localisation des données

Je peux héberger dans l’UE, au Royaume-Uni, aux États-Unis ou dans n’importe quel pays ou région de votre choix. Cela respecte les règles de résidence des données telles que le RGPD, le UK GDPR et le CCPA.


Ce que je ne fais pas

Je ne réalise pas de fine-tuning ni de quantification des modèles. Je déploie et connecte des modèles ouverts existants.


Avant de passer commande

Discutons du type de documents, du nombre d’utilisateurs et du budget. Puis je vous recommande un modèle et une taille de serveur.

Découvrez Junaid Aslam

Junaid Aslam

ASP Dot NET Core, Web API, React, JS, TS, SQL, NoSQL, AWS, Azure, AI Chatbot RAG

4,8(125)

Level 1

Junaid Aslam fait partie du catalogue Fiverr Pro et a été trié sur le volet par une équipe Fiverr Pro agréée pour ses compétences et son expertise.

Certifié pour

  • Développement de logiciels

  • DePakistan
  • Membre depuissept. 2015
  • Temps de réponse moy.1 heure
  • Dernière commande1 mois
  • Langues

    Ourdou, Anglais
Pro-vetted Senior .NET engineer with 7+ years building full-stack web apps and APIs for clients across the US, UK, EU, and beyond. I specialise in .NET, .NET Core, ASP.NET MVC5, Web API, Blazor, React, and Next JS, following Clean Architecture and SOLID principles so your codebase stays maintainable as it grows. I also offer AI automation & AI integration services, including custom AI chatbots, RAG, n8n, make.com AI workflows, Claude/GPT API.. My tech stack includes C# .NET 10, 9.0 · Blazor · EF Core · API · React/Next.js · TypeScript · MS SQL · Azure · AWS · WordPress · Firebase · PostgreSQL.

Traduction automatique

Mon portfolio