1. Início
  2. Assistente de Código AI
  3. LiteLLM

LiteLLM

LiteLLM is an open-source library that simplifies LLM completion and embedding calls. It provides a convenient and easy-to-use interface for calling different LLM models.

LiteLLMIntrodução

O que é LiteLLM?

LiteLLM é uma biblioteca de código aberto que simplifica a conclusão e incorporação de chamadas de LLM. Ele fornece uma interface conveniente e fácil de usar para chamar diferentes modelos de LLM.

Como usar LiteLLM?

Para usar o LiteLLM, você precisa importar a biblioteca 'litellm' e definir as variáveis de ambiente necessárias para as chaves da API do LLM (por exemplo, OPENAI_API_KEY e COHERE_API_KEY). Uma vez que as variáveis de ambiente são definidas, você pode criar uma função Python e fazer chamadas de conclusão LLM usando LiteLLM. LiteLLM permite que você compare diferentes modelos de LLM, fornecendo um campo de jogo de demonstração onde você pode escrever código Python e ver as saídas.

Casos de uso do LiteLLM