Alternativas a Ollama

Ordenadas por cuánto se parecen a Ollama y luego por puntuación.

Alternativas, clasificadas

  1. llama.cpp

    Motor de inferencia en C/C++ para LLM en CPU y GPU, con formato GGUF y cuantización.

    • Versión más reciente
    • Ninguna función en común
    Actualizado hace 1 día
    9 92,6 = Comparar
  2. vLLM

    Motor de servicio de LLM de alto rendimiento, con paged attention y servidor compatible con la API de OpenAI.

    • Ninguna función en común
    Actualizado hace 2 días
    22 91,3 = Comparar
  3. LocalAI

    API autoalojada compatible con OpenAI que ejecuta modelos de texto, imagen y audio en hardware local.

    • Ninguna función en común
    Actualizado hace 2 días
    54 89,1 = Comparar