LiteLLM es una biblioteca de código abierto que simplifica la finalización de LLM y las llamadas de inserción. Proporciona una interfaz conveniente y fácil de usar para llamar a diferentes modelos de LLM.
Para usar LiteLLM, debes importar la biblioteca 'litellm' y configurar las variables de entorno necesarias para las claves de API de LLM (por ejemplo, OPENAI_API_KEY y COHERE_API_KEY). Una vez configuradas las variables de entorno, puedes crear una función de Python y realizar llamadas de finalización de LLM utilizando LiteLLM. LiteLLM te permite comparar diferentes modelos de LLM al proporcionar un patio de recreo de demostración donde puedes escribir código Python y ver los resultados.
Aquí está el Discord de LiteLLM: https://discord.com/invite/wuPM9dRgDw. Para obtener más mensajes de Discord, haga clic aquí(/es/discord/wupm9drgdw).
Enlace de Github de LiteLLM: https://github.com/BerriAI/litellm