À quoi s’attendre
| Domaine | Comportement |
|---|---|
| Passerelle YouRouter | Pas besoin d’intégration séparée par point de terminaison pour chaque fournisseur de modèle. |
| Limites fournisseur | Le fournisseur amont peut renvoyer des erreurs de limite de débit ou de concurrence. |
| Routage automatique | Omettre vendor, ou utiliser vendor: auto, permet à YouRouter de router vers des fournisseurs disponibles pour le modèle demandé. |
| Fournisseur fixé | Si vous définissez vendor, votre requête dépend de la disponibilité et des limites de ce fournisseur. |
Modèle de nouvelle tentative recommandé
Pour les appels API modèle, réessayez les échecs transitoires avec un backoff exponentiel.- les réponses
429(limite de débit ou concurrence) - les erreurs
500(passerelle ou fournisseur) - les pannes réseau temporaires
Conseils de concurrence
- Commencez avec une concurrence prudente en production et augmentez progressivement.
- Utilisez
vendor: autosauf si votre intégration impose un fournisseur précis. - Gardez les ID de modèle configurables pour changer de modèle sans modifier le code.
- Journalisez l’horodatage, le modèle, le mode
vendoret l’ID de requête pour le diagnostic. - Pour le streaming, ne considérez une coupure comme réessayable que si votre application peut relancer la requête en toute sécurité.