Alternativas a Ollama
Ordenadas por cuánto se parecen a Ollama y luego por puntuación.
Alternativas, clasificadas
-
llama.cpp
Motor de inferencia en C/C++ para LLM en CPU y GPU, con formato GGUF y cuantización.
Actualizado hace 1 día9 92,6 = Comparar -
vLLM
Motor de servicio de LLM de alto rendimiento, con paged attention y servidor compatible con la API de OpenAI.
Actualizado hace 2 días22 91,3 = Comparar -
LocalAI
API autoalojada compatible con OpenAI que ejecuta modelos de texto, imagen y audio en hardware local.
Actualizado hace 2 días54 89,1 = Comparar