AAbierto
Vender aquí

litellm

despliegue en 1 clic

The fastest, litest AI Gateway. Rust core with Python SDK. Call 100+ LLM APIs in OpenAI (or native) format with cost tracking, guardrails, load balancing, and logging [Bedrock, Azu

En el repositorio: The fastest, litest AI Gateway. Rust core with Python SDK. Call 100+ LLM APIs in OpenAI (or native) format with cost tracking, guardrails, load balancing, and logging [Bedrock, Azure, OpenAI, Anthropic, OpenAI, VertexAI, vLLM, Nvidia NIM]

¿Se puede poner en marcha?

✓
docker-compose en el repositorio

Se levanta con un comando. Es el requisito del botón de desplegar.

✓
Imagen o Dockerfile

Se puede contenedorizar sin reescribir nada.

✓
Pensado para autoalojar

El propio proyecto documenta instalarlo en tu servidor.

✓
Mantenimiento al día

Commits en los últimos doce meses.

Compara con