diegosouzapw/OmniRoute
OmniRoute
☆ 84,5k · TypeScript · Ayrı uygulama
Açıklama
Yerel, OpenAI uyumlu AI ağ geçidi. İstekleri 350'den fazla sağlayıcıya dağıtır, kota bitince başkasına geçer.
Kurulum
Bilgisayarına veya sunucuna ayrı bir program olarak kurulur. Prompt’u kodlama ajanına yapıştır.
Şu uygulamayı kurmak istiyorum: https://github.com/diegosouzapw/OmniRoute README'sini oku; bu bilgisayara mı (masaüstü uygulaması ya da komut satırı aracı) yoksa bir sunucuya mı (Docker ile çalışan servis) kurulduğunu söyle. İşletim sistemimde çalışıp çalışmadığını ve gereksinimlerini (ekran kartı, Docker, API anahtarı, disk alanı) kontrol et. Kurulum adımlarını göster; onaylarsam kur ve nasıl kullanılacağını kısaca göster.
Kaynak
the_coding_wizardInstagramBenzer repolar
Alt kategori: Yerel model ve yönlendirmeAçık modelleri (Gemma, Qwen, DeepSeek...) kendi bilgisayarında çalıştırır ve REST API sunar; ollama launch ile Claude Code, Codex, OpenCode ve Hermes gibi ajanları yerel modelle başlatır.
Kendi sunucunda çalışan ChatGPT benzeri AI sohbet arayüzü: Ollama'daki yerel modellere ve OpenAI uyumlu API'lere bağlanır; belgeyle sohbet (RAG), web araması, eklentiler, kullanıcı yönetimi, LDAP ve SSO desteği var.
Yerel LLM çalıştırma motoru: GGUF modellerini CPU'da ve çeşitli GPU'larda çalıştırır, OpenAI uyumlu sunucu açar; Jan'ın altında da bu motor çalışır.