Ciele
Exploitation de vos assistants

Insights

Consultez les métriques actuelles relatives aux Conversations, aux réponses, aux remontées, aux retours et aux Notifications.

Insights calcule les métriques de l’organisation à partir des événements d’exécution stockés. Utilisez la plage de dates disponible et les filtres Assistant pour modifier l’ensemble de données.

Les graphiques dans Insights, Eval, Assistant Overview et Usage utilisent une palette de gris qui s’adapte aux thèmes clairs et sombres. Les résultats positifs et négatifs restent en vert et en rouge. Les évolutions reflètent la direction de chaque indicateur : la baisse des coûts, de la latence et du nombre d’échecs est considérée comme positive. Les labels, les légendes et les valeurs exactes identifient chaque mesure. La chronologie de la latence utilise une ligne pointillée pour le p95.

Les graphiques et les cartes de statistiques placent leur visualisation dans un encadré aux coins arrondis. Le titre et la description se trouvent en dessous, avec les changements de période et les actions disponibles sur la droite. Costs, Observability, Platform Admin et les exécutions d’Eval individuelles utilisent la même mise en page de carte.

Les animations suivent les recettes de Transitions.dev. Les chiffres mis à jour apparaissent avec un léger décalage des chiffres, et les légendes s’échangent avec un léger flou. Les cartes en cours de chargement se fondent progressivement dans leur contenu, et les tableaux de données se déploient en douceur. L’indicateur d’onglet actif glisse d’une sélection à l’autre. Les paramètres de réduction des animations suppriment le mouvement des chiffres et l’effet de flou de ces transitions.

Aperçu actuel

L’aperçu peut inclure les indicateurs suivants :

  • Conversations et Visiteurs uniques
  • Réponses de l’IA
  • Taux de résolution par l’IA
  • évaluations des réponses et données de satisfaction client
  • remontées (escalades)
  • réponses par Conversation
  • questions per Conversation : le nombre de messages envoyés par le Visiteur
  • durée moyenne d'une Conversation : le temps écoulé entre le début d'une Conversation et son dernier message
  • langues et taux d’engagement
  • mesures relatives aux retours et à la notation
  • Notifications envoyées

Les cartes exactes dépendent des données disponibles pour la période sélectionnée.

Le graphique Conversation depth indique la durée moyenne des Conversations et le nombre de questions par Conversation pour chaque jour, chaque semaine ou chaque mois. Ciele place chaque Conversation dans la période au cours de laquelle elle a débuté. Une Conversation qui se poursuit après la fin de la période conserve sa durée totale.

Le graphique Usage sépare les décomptes, les pourcentages, les ratios et les secondes afin que des unités différentes ne partagent pas le même axe. Sélectionnez une métrique pour l’afficher ou la masquer. Les onglets Assistants et Channels affichent les répartitions des Conversations.

Utilisez la fenêtre Explore conversations over time pour zoomer sur les graphiques dans la plage de dates sélectionnée. Faites glisser la fenêtre ou ses poignées, ou utilisez les touches fléchées après avoir sélectionné une poignée. Les cartes de synthèse, le tableau de données et les exportations couvrent toujours l’ensemble de la plage de dates.

Coûts et observabilité

Deux tableaux de bord indiquent le coût de l’IA de votre organisation et ses performances. Costs présente les dépenses et l’utilisation. Observability présente la fiabilité, la vitesse et la qualité des réponses.

Les deux tableaux de bord utilisent les mêmes filtres. Sélectionnez une plage de dates, puis sélectionnez All, Assistants, Teammates ou Internal.

  • Assistants affiche le trafic des widgets et de l’aperçu, ainsi que les flux HTTP entrants.
  • Teammates affiche les chats des AI Teammates, les tours de parole dans les canaux et les Routines.
  • Internal affiche l’activité de la plateforme : l’indexation, les tâches planifiées et les appels provenant des clés API et de MCP.

Lorsque All ou Assistants est sélectionné, vous pouvez également sélectionner un Assistant.

Chaque tableau de bord commence par des cartes de statistiques. Une carte affiche une valeur pour la période, une courbe de ses valeurs quotidiennes et l’évolution par rapport à la période précédente. La période précédente a la même durée et se termine la veille du début de la plage. Déplacez le pointeur le long de la courbe pour lire la valeur de chaque jour.

Coûts

  • dépenses estimées, coût par tour, appels au modèle et tokens
  • dépenses totales estimées par jour
  • un streamgraph des dépenses quotidiennes estimées par surface. L’épaisseur de la bande représente un montant, et non un pourcentage
  • un calendrier de l’utilisation des tokens par jour
  • une jauge monochrome représentant la part des tokens d’entrée par rapport au total des tokens, avec les nombres exacts de tokens d’entrée et de sortie
  • dépenses par modèle et par étape du pipeline
  • un treemap des dépenses par fournisseur et par modèle. Sélectionnez un fournisseur pour inspecter ses modèles

Le filtre Surface s’applique aux graphiques quotidiens et à la répartition par modèle. Les totaux de surface situés sous le streamgraph comparent toujours toutes les surfaces.

Les dépenses sont une estimation en euros. Ciele le calcule à partir du nombre de tokens et des prix catalogue. Il ne s’agit pas d’une facture.

Observabilité

  • turns terminés, taux de réussite, turns échoués et appels d’outils par turn
  • latence par tour : médiane, 95e percentile, histogramme et tendance quotidienne
  • Answer accuracy : la part des réponses de l’Assistant validées par le vérificateur
  • Autonomy : la part des conversations de visiteurs qui n’ont pas été transférées à un service d’assistance
  • Jauges monochromes pour la fiabilité, la précision et l’autonomie, avec les nombres exacts indiqués à côté des graphiques
  • une comparaison de la fiabilité, de la précision et de l’autonomie par rapport à la période précédente, en points de pourcentage
  • les classes d’erreurs les plus fréquentes
  • les cinq Flows les plus utilisés, classés les uns par rapport aux autres par jour ou par semaine

Answer accuracy et Autonomy s’appliquent uniquement aux Assistants. Pour Teammates et Internal, ces mesures ne s’affichent pas.

Remarques

Les jours sont des jours UTC. Un appel de modèle enregistré avant l’attribution d’une surface n’a pas de surface. Il est comptabilisé dans All en tant que Unattributed, et dans aucune autre surface.

Utilisez Export CSV pour télécharger une ligne pour chaque jour de la plage. Pour un fichier de rapport offrant davantage d’options, utilisez Exports.

Rapports de la plateforme

Dans les déploiements gérés, les Owners et Admins autorisés de l’Organisation de la plateforme désignée voient Admin comme le dernier onglet Insights. Cet onglet affiche l’utilisation et les coûts estimés pour l’ensemble des Organisations, y compris l’Organisation de la plateforme. Sélectionnez une plage de dates pour consulter les appels de modèles, les tokens, les pages explorées et les coûts estimés pour chaque Organisation. Les coûts financés par la plateforme n’incluent pas les clés API des clients ni les abonnements personnels. Les autres organisations et membres n’ont pas accès à cet onglet.

Actualité des données

Insights conserve l’aperçu calculé et les tableaux de bord pendant un maximum de cinq minutes pour chaque Organisation et chaque ensemble de filtres. Chaque membre de l’organisation lit les mêmes données stockées.

Toute modification apportée par un Member dans la console (à un Assistant, à une Conversation ou à une Improvement) efface immédiatement l’aperçu stocké. Le trafic des widgets (nouvelles Conversations, évaluations des réponses, scores de satisfaction, remontées) atteint les chiffres indiqués dans un délai de cinq minutes.

Pour forcer un nouveau calcul avant la fin des cinq minutes, envoyez DELETE /api/insights depuis une session de navigateur connectée. La réponse est 204 et la prochaine lecture recalculera l’aperçu. Tout Member de l’Organization peut envoyer cette requête.

Comptage des notifications

Une Notification n’est pas une réponse de l’IA. Une session « Notification-only » n’augmente pas les KPI Conversation ni Answer.

La mesure Notifications Sent et ses séries de graphiques enregistrent la livraison proactive séparément.

Examiner un changement

  1. Sélectionnez la plage de dates souhaitée et l’Assistant.
  2. Identifiez l'indicateur qui a changé.
  3. Ouvrez l'Inbox avec le même périmètre.
  4. Lisez des Conversations représentatives.
  5. Créez des Improvements pour les problèmes de réponses exploitables.

Utilisez Exports pour obtenir des enregistrements structurés des Conversations.

Recevoir des rapports planifiés

Utilisez Exports pour planifier des fichiers Insights hebdomadaires ou mensuels. Sélectionnez les Member destinataires et conservez les mêmes filtres de rapport et formats de fichier.

Consultez Exports pour en savoir plus sur les fenêtres de dates glissantes, les notifications et les contrôles de planification.

Sur cette page