Directorio › Agentes y LLMs

Repo ✓ Probado

Ollama: Ejecuta Modelos LLM en Local con un Solo Comando

La herramienta estándar de la industria para descargar y ejecutar modelos de lenguaje de código abierto (Llama 3, Mistral, Qwen) en local con API compatible con OpenAI.

Qué es y qué problema resuelve

Ollama democratizó la inferencia de inteligencia artificial en computadoras locales y servidores privados. Empaqueta los pesos del modelo, la configuración y el motor de cuantización en un formato unificado (Modelfile), permitiendo descargar y correr modelos de última generación con comandos simples y sin configurar controladores de GPU manualmente.

Características Clave

  • API REST Compatible con OpenAI: Exponiendo endpoints en localhost:11434/v1, cualquier aplicación diseñada para OpenAI funciona con modelos locales sin cambiar código.
  • Catálogo Extenso de Modelos: Soporte optimizado para Llama 3.2, Mistral NeMo, Qwen 2.5, DeepSeek Coder y Phi-3.5.
  • Aceleración de Hardware Nativa: Optimización en GPU Apple Silicon (Metal) y tarjetas NVIDIA CUDA.

Comando de Despliegue Rápido

# En Mac o Linux
curl -fsSL https://ollama.com/install.sh | sh
ollama run llama3.2

Veredicto de Uso

Imprescindible para cualquier profesional o empresa que requiera procesar información confidencial sin enviar datos a servidores externos.


Aviso Legal y Descargo de Responsabilidad

Este contenido es de carácter estrictamente informativo, técnico y educativo. El uso, implementación y despliegue de los flujos de automatización, scripts, código, modelos, APIs y herramientas de software analizados en RutaBot.com son bajo la exclusiva responsabilidad de cada usuario. RutaBot no asume responsabilidad por fallas en servidores, costos imprevistos de consumo de tokens o APIs, interrupciones operativas ni vulnerabilidades derivadas de código o servicios de terceros. Todas las marcas comerciales, nombres de software, empresas y logotipos citados pertenecen a sus respectivos titulares y su mención tiene propósitos puramente de divulgación, análisis y uso legítimo (Fair Use / Derecho de Cita). Antes de desplegar automatizaciones o integraciones en entornos de producción críticos, realice pruebas en entornos aislados y audite las políticas de seguridad de su organización.

Recursos y Artículos Recomendados

Profundiza en la implementación práctica con nuestras guías y herramientas probadas:

¿Algo no funciona o ves un riesgo de seguridad? Reportar esta ficha · Cómo revisamos los repositorios. RutaBot no aloja código de terceros: los enlaces van al proyecto original.