Témoignage client

Comment Sentry a plafonné ses factures d’IA incontrôlées sans restreindre l’accès

Sentry souhaitait que tout le monde expérimente l’IA, afin que chacun puisse l’utiliser comme bon lui semblait. Après quelques mois, la facture grimpait et personne ne pouvait dire qui dépensait quoi, sur quels modèles, ni si ces modèles étaient adaptés. En juillet 2026, Sentry a transféré son utilisation interne de l’IA sur OpenRouter, a fait le ménage parmi environ 500 clés Anthropic et OpenAI en trois semaines et a désactivé en août l’accès direct aux deux fournisseurs. Ce déploiement a donné à Sentry un contrôle plus strict et un accès plus large aux modèles à la fois. L’entreprise peut désormais attribuer les dépenses à la personne ou à l’espace de travail qui en est à l’origine, et les ingénieurs peuvent essayer tout nouveau modèle sans approbation d’un fournisseur.

À propos de Sentry

Sentry est la plateforme de surveillance des applications que des millions de développeurs utilisent pour détecter et corriger le code défectueux. Ses clients adoptent les outils de programmation par IA plus vite que presque tous les autres, et tout le monde chez Sentry travaille de la même manière. Ils essaient les nouveaux modèles le jour de leur sortie et créent leurs propres agents, et l’accès à l’IA est ouvert à tous.

Aujourd’hui, chaque outil interne de Sentry qui nécessite une clé API de modèle passe par OpenRouter, y compris Warden, l’agent de Sentry dédié à la revue de code et de sécurité. Il en va de même pour le serveur MCP officiel de Sentry auquel ses clients se connectent.

Le défi

Personne ne savait où allait l’argent

Daniel Griesser, qui travaille chez Sentry depuis dix ans et dirige son équipe de télémétrie depuis Vienne, a piloté la transition de l’entreprise vers OpenRouter. Il décrit les débuts de l’entreprise en matière d’outils d’IA comme le Far West. Sentry disposait de comptes entreprise auprès d’Anthropic et d’OpenAI, tout le monde pouvait créer des clés API et aucun processus n’encadrait leur création. C’était délibéré. La direction voulait que les équipes expérimentent, et pendant quelques mois, cette organisation a fonctionné.

Les difficultés ont commencé avec le manque de visibilité. David Cramer, cofondateur de Sentry, a créé un tableau de bord des dépenses à partir des API des fournisseurs, un travail de quelques jours que Sentry a ensuite publié sur GitHub sous le nom abacus. Cela a tenu jusqu’au passage de Sentry à des comptes de type entreprise. Certains rapports arrivaient sous forme de fichiers CSV indiquant les dépenses totales, sans ventilation par personne ou par modèle, ni données sur les accès au cache. Pendant ce temps, les dépenses continuaient de grimper.

Un cas a montré à quel point ces rapports pouvaient masquer la réalité. La consommation d’un ingénieur a atteint 3 000 $ par jour parce qu’une extension personnalisée de son harness de programmation invalidait le cache de prompts à chaque requête, si bien que des jetons qui auraient dû être servis depuis le cache étaient facturés au plein tarif. Cela a duré quelques jours avant que Griesser ne le remarque, et il ne l’a détecté que parce que l’ingénieur utilisait une clé API qu’il avait lui-même créée. Selon lui, si cette même consommation avait été rattachée à un compte entreprise, elle ne serait jamais apparue. Une fois la mise en cache rétablie, la consommation de l’ingénieur est retombée à une fraction de ce montant.

« Nous devions changer quelque chose, car ce n’était pas viable. Nous n’avions aucune idée d’où allait l’argent ni de qui dépensait quoi. »

Daniel GriesserDirecteur principal de l’ingénierie, Sentry

Le deuxième problème était le choix. Avant OpenRouter, les ingénieurs de Sentry avaient accès à une poignée de modèles de deux fournisseurs. Pour accéder à autre chose, il fallait faire approuver un nouveau fournisseur, et pour quelqu’un qui voulait passer un après-midi à tester un modèle à poids ouverts, cette démarche ne valait pas la peine d’être engagée. Les ingénieurs qui voulaient essayer ces modèles utilisaient leurs comptes personnels, ce qui plaçait cette consommation hors du champ de visibilité de Sentry.

« Adopter ou simplement essayer un autre modèle auprès d’un autre fournisseur était, en pratique, une discussion sans issue. »

Daniel GriesserDirecteur principal de l’ingénierie, Sentry

La solution OpenRouter

Une clé et un budget pour chacun

Avant de choisir un fournisseur, Griesser a envisagé de déployer LiteLLM pour gérer les accès des équipes. C’était faisable, mais Sentry aurait dû l’héberger et en assurer la maintenance. Pour gérer l’utilisation quotidienne de l’IA dans toute l’entreprise, Sentry voulait une solution qu’elle n’aurait pas à exploiter elle-même.

Griesser connaissait déjà OpenRouter pour l’avoir utilisé dans son propre travail et, avec le soutien de Cramer, l’examen juridique et les approbations ont été rapides.

« Nous pouvons tout configurer en quelques clics dans l’interface, et quelqu’un d’autre se charge de maintenir le service en fonctionnement. »

Daniel GriesserDirecteur principal de l’ingénierie, Sentry

Zero Data Retention était une exigence, donc Sentry l’a activé par défaut et a par ailleurs limité le routage à ses propres clés fournisseur via l’utilisation de clés personnelles (BYOK). Les harness de programmation et la plupart des espaces de travail utilisent ainsi les clés Anthropic et OpenAI existantes de Sentry, OpenRouter se chargeant de l’attribution et des limites.

Le déploiement a commencé début juillet 2026. Tout le monde y a eu accès dès le premier jour, y compris les équipes hors ingénierie, et chacun pouvait créer autant de clés qu’il le souhaitait. Par défaut, chaque clé est liée à l’utilisateur qui la crée. Chaque espace de travail dispose d’un plafond global correspondant à un budget approuvé par le directeur financier de Sentry, et aucun espace de travail n’a atteint son plafond.

Paramètres de l’espace de travail affichant les budgets, avec un plafond sur toute la durée de vie et un plafond mensuel, chacun accompagné d’une barre indiquant les dépenses de la période en cours

La migration d’un outil était la partie rapide. Comme OpenRouter expose des points de terminaison compatibles avec Anthropic et OpenAI, Griesser explique qu’il suffisait de modifier trois variables tout en conservant le SDK déjà utilisé par l’outil. Le nettoyage a pris plus de temps. Seules environ 50 des quelque 500 clés Anthropic et OpenAI étaient utilisées quotidiennement, et Sentry a dû toutes les retrouver. Griesser s’est chargé lui-même d’une grande partie des relances, en donnant à chaque propriétaire un préavis d’une semaine pour créer une clé OpenRouter avant la désactivation de l’ancienne. L’ensemble de la migration a pris environ trois semaines et, en août, Sentry a coupé l’accès direct des ingénieurs aux deux plateformes, si bien qu’ils ne peuvent plus y créer de clés.

Les résultats

Essayer un nouveau modèle ne nécessite désormais qu’un changement de configuration

Au cours de ses trois premiers mois sur OpenRouter, le compte de Sentry a utilisé 147 modèles. Ce décompte considère chaque version comme un modèle distinct, si bien que plusieurs gammes Claude et GPT apparaissent plus d’une fois. Lorsqu’un nouveau modèle sort, comme une version de Grok ou de Gemini 3.7, un ingénieur y dirige une clé et lance l’évaluation.

Tendances de l’activité montrant l’évolution des dépenses par modèle et par utilisateur, avec des panneaux latéraux classant les modèles et les utilisateurs en hausse ou en baisse

« Il fallait auparavant un certain temps pour faire approuver un nouveau modèle. Et maintenant, ce n’est plus un problème. »

Daniel GriesserDirecteur principal de l’ingénierie, Sentry

Dans une publication de juillet sur X, Cramer a écrit que Sentry avait testé Grok 4.5 sur les suites d’évaluation de Warden et Junior, et que ses performances étaient bonnes au regard de son prix et de sa latence. Sur le compte, Grok 4.5 est devenu l’un des principaux modèles en termes de dépenses.

Les modèles de pointe représentent toujours l’essentiel de l’utilisation de Sentry. Les modèles à poids ouverts ont représenté environ 12 % des jetons, principalement via Kimi K2.6 exécutant des suites d’évaluation pour les outils internes de Sentry, dont Warden.

« Les gens ont bel et bien expérimenté avec les modèles à poids ouverts, et les utilisent pour certains cas d’usage parce qu’ils sont plus économiques pour la tâche qu’ils attendent de leur modèle. »

Daniel GriesserDirecteur principal de l’ingénierie, Sentry

GPT-5.6 Luna est le modèle par défaut des outils à fort volume comme le serveur MCP officiel de Sentry, et a traité 30,8 % des jetons du compte pour 5,2 % de ses dépenses en modèles.

Les équipes utilisent leurs propres outils

En volume de jetons, le deuxième outil de programmation le plus utilisé sur le compte de Sentry est Pi, un agent de terminal open source minimaliste d’Earendil, qui talonne Claude Code. Viennent ensuite OpenCode, Codex, Cursor et une longue traîne d’agents créés par les ingénieurs de Sentry eux-mêmes, tous exécutés sur le même compte.

Vue des tendances de l’activité affichant les dépenses au fil du temps par clé API et par application, avec des panneaux latéraux classant les clés et les applications en hausse ou en baisse

« L’expérience est vraiment agréable si vous utilisez votre propre harness d’agent ou si vous créez vous-même un agent. Vous avez une seule clé et vous pouvez configurer le modèle que vous souhaitez utiliser. »

Daniel GriesserDirecteur principal de l’ingénierie, Sentry

113 personnes disposent désormais d’un compte, et elles ne se limitent pas aux équipes d’ingénierie. Rahul Chhabria, vice-président du marketing de Sentry, a créé un service en production pour gérer le programme de Sentry destiné aux startups, et ce service fonctionne désormais sur OpenRouter. L’équipe d’assistance a créé ses propres évaluations sur le même compte. Au total, plus de 45 applications y font transiter du trafic.

Chaque requête a un propriétaire

Le passage à OpenRouter n’a pas modifié le montant des dépenses de Sentry, explique Griesser. Les clés étant liées à des utilisateurs ou à des espaces de travail, chaque requête est associée à un propriétaire et à un modèle, et généralement à l’outil qui l’a envoyée. Chaque ingénieur peut cliquer sur son nom d’utilisateur et voir ses dépenses.

Vue d’exploration de l’activité affichant l’utilisation totale regroupée par espace de travail et application, sous forme de barre empilée avec un tableau classé des paires espace de travail et application

Les anomalies apparaissent dans le tableau de bord

Griesser parcourt le tableau de bord environ toutes les deux semaines. Fin septembre, il a découvert une utilisation de 8 000 $ sur une seule clé dans l’espace de travail Tools de Sentry. La clé n’avait pas le bon propriétaire. Un ingénieur l’avait créée pour un outil appartenant à quelqu’un d’autre. Griesser l’a renommée et l’a transformée en clé d’espace de travail. Les clés peuvent être transférées entre espaces de travail, ou d’une personne à un espace de travail, sans régénérer le jeton, si bien qu’aucun redéploiement n’a été nécessaire.

Sentry fixe désormais un budget hebdomadaire de 1 500 $ par personne dans son espace de travail par défaut, et chaque espace de travail dispose de son propre plafond. Ces limites constituent son garde-fou contre les dépenses anormales. Lorsqu’une clé atteint sa limite, elle cesse de fonctionner. Soit la personne demande pourquoi, soit une notification est déclenchée, et la question est remontée.

Formulaire de création d’un garde-fou avec une section budget définissant une limite de crédits en USD par bénéficiaire et la fréquence de réinitialisation de cette limite

« Avant, un seul ingénieur ou utilisateur pouvait très facilement faire exploser notre facture globale d’IA, car il n’y avait aucun contrôle, aucun garde-fou et aucun filet de sécurité. »

Daniel GriesserDirecteur principal de l’ingénierie, Sentry

La direction a cessé de redouter les surprises

Pour la direction technique de Sentry, les limites ont plafonné les factures imprévues. Lorsqu’on lui a demandé ce qu’il dirait à un autre responsable technique envisageant la même démarche, Griesser a été bref.

« Adoptez-le et ne regardez pas en arrière. Cela résout tout simplement des problèmes auxquels vous n’avez pas vraiment envie de consacrer du temps. »

Daniel GriesserDirecteur principal de l’ingénierie, Sentry

Autres témoignages clients

Développez votre produit sur OpenRouter

Une API pour tous les modèles, avec des basculements automatiques vers des fournisseurs de secours.