Přeskočit na obsah

Lokální LLM

AIlocalllmai

Nástroje pro lokální spuštění LLM — od instalace jediným příkazem až po plnohodnotné offline chatovací aplikace.

ProjektPopisURL
OllamaSpusťte Llama, Mistral, Gemma a 50+ modelů lokálně. Instalace jediným příkazem.https://github.com/ollama/ollama
LM StudioDesktopová aplikace, která stáhne a spustí libovolný otevřený model bez kódu.https://lmstudio.ai
JanOpen-source alternativa ChatGPT, která běží 100 % offline.https://github.com/menloresearch/jan
GPT4AllVhodné pro začátečníky: stáhněte, vyberte model a začněte chatovat.https://github.com/nomic-ai/gpt4all
AnythingLLMPromění vaši lokální AI ve znalostní databázi nad vašimi vlastními dokumenty.https://github.com/Mintplex-Labs/anything-llm
LocalAINáhrada OpenAI API, která míří na váš vlastní počítač.https://github.com/mudler/LocalAI
MstyDesktopová AI aplikace s důrazem na soukromí, s vícemodelovým chatem a dokumenty.https://msty.app
Open WebUIWebové rozhraní ve stylu ChatGPT pro Ollama, plně offline.https://github.com/open-webui/open-webui
llamafileJediný spustitelný soubor, který spustí kompletní AI model.https://github.com/Mozilla-Ocho/llamafile