AIVAX

Esta página foi traduzida automaticamente do inglês e pode estar desatualizada. Leia o original

Usando um Gateway de IA

Crie um gateway no painel ou por meio da API e, em seguida, chame-o pelo endpoint chat/completions compatível com OpenAI, passando seu ID ou slug como model.

Criar e gerenciar gateways #

Uma solicitação de edição pode conter apenas os campos a serem alterados; os campos omitidos mantêm seus valores atuais.

Chamar o gateway #

JSON
{
    "model": "support:50c3",
    "messages": [
        {
            "role": "user",
            "content": "Como redefino minha senha?"
        }
    ]
}

A solicitação contém apenas a conversa. O gateway adiciona suas instruções, documentos recuperados e ferramentas antes que o modelo seja executado. Para entender como essa pré-configuração altera a solicitação, consulte Inferência com Gateways de IA.

Substituir valores do gateway #

Solicitações enviadas com uma chave privada podem substituir os valores suportados do gateway apenas para essa solicitação. O gateway em si não é alterado.

Campo da solicitaçãoSubstitui
temperature, top_p, seed, presence_penaltyParâmetros de amostragem.
reasoning_effort, verbosityConfigurações de raciocínio e verbosidade, quando o modelo as suporta.
max_completion_tokens, stopComprimento da saída e sequências de parada.
toolsAdiciona ferramentas do lado do cliente às ferramentas do gateway.
builtin_toolsHabilita ferramentas integradas adicionais.
response_schema, response_formatSaída estruturada.
time_zoneFuso horário do gateway.
multimodal_resolverMecanismos de pré-processamento multimodal.
tool_invocation_explanationsExplicações de ferramentas.
routing_optionsRoteamento de provedores.

frequency_penalty é configurado apenas no gateway. Instruções, RAG, fontes MCP, funções de protocolo, habilidades, trabalhadores e moderação não podem ser substituídos por solicitação.

Chaves de API públicas aceitam apenas um pequeno conjunto de campos de solicitação e rejeitam os demais; consulte Limites.

Testar incrementalmente #

Quando um gateway se comporta de maneira inesperada, teste primeiro um prompt simples e, em seguida, adicione RAG, ferramentas, mídia ou saída estruturada um de cada vez. Isso isola o recurso que causa o problema. Consulte Solução de problemas.

Usar um gateway de clientes MCP #

Para expor um modelo integrado ou um Gateway de IA como ferramenta para um cliente MCP externo, consulte Inferência MCP.

Digite para pesquisar na documentação.