Guia de streaming

Uma resposta em streaming pode terminar incompleta

O cliente pode desconectar e argumentos de ferramentas podem chegar em partes. Modele o fluxo para estados parciais.

Métodos de recarga planejados: Alipay e USDT. A cobrança ainda não está habilitada.

Casos importantes

  • Tempo até o primeiro token
  • Cancelamento
  • Texto parcial
  • Argumentos parciais
  • Falha de rede
  • Uso e motivo de término

Confira o recurso

Use streaming apenas quando o modelo indicar suporte e mantenha uma chamada sem streaming para diagnóstico.

Perguntas frequentes

Cada modelo oferece suporte a streaming?

Não. Consulte o catálogo ativo para verificar se o modelo possui a propriedade de streaming habilitada.

Devo salvar a saída parcial?

Depende do produto. Em fluxos auditáveis, marque claramente que a resposta não foi concluída.

Conteúdo relacionado