Passer au contenu principal
Procore

Admin : surveiller l’utilisation et les crédits de l’IA

Contexte

L’onglet Rapports de la superficie Tour de contrôle de Datagrid aide les administrateurs de compte à surveiller l’utilisation des agents et la consommation de crédits. Que vous soyez un client Datagrid ou un client Procore AI (Digital Coworker), ces rapports offrent une visibilité au niveau du compte sur les tendances de consommation de crédit des utilisateurs, les coûts de crédit de stockage des données, l’utilisation des agents et les indicateurs d’engagement des utilisateurs.

Ce tutoriel vous aide à accéder aux données d’utilisation de votre compte et à les utiliser, ce qui peut vous aider à définir des garde-fous facultatifs dans l’onglet Budgétisation ou à prendre des décisions au niveau du compte concernant l’expansion de l’IA et les objectifs d’utilisation.

Éléments à prendre en compte

  • Autorisations utilisateur requises :

    • Les autorisations « Admin » dans Datagrid sont nécessaires pour accéder aux fonctionnalités de la tour de contrôle.

      • Le rôle « administrateur Procore » de Procore correspond au rôle « Admin » dans Datagrid, tandis que le rôle « Admin du projet » de Procore correspond au rôle « Membre » dans Datagrid. Par conséquent, « Admin du projet » ne peut pas accéder automatiquement aux fonctionnalités de la tour de contrôle dans Datagrid, telles que ces garde-fous de budgétisation. 

  • Clients de Procore AI : 

    • Tous les niveaux des packages Digital Coworker (Starter, Pro et Enterprise) ont accès à Control Tower, y compris la budgétisation et les rapports.

    • Prérequis : Étant donné que les fonctionnalités de la tour de contrôle ne sont actuellement accessibles que via le produit autonome Datagrid et non dans Procore, l'administrateur Procore doit effectuer la séquence d’informations d’identification détaillée dans Activer Procore AI avant de pouvoir accéder aux fonctionnalités de la tour de contrôle dans Datagrid.

Procédure

  1. Connectez-vous à app.datagrid.ai
    Remarque : Les clients Procore disposant d’un abonnement actif à Procore AI doivent se connecter à Datagrid via l’authentification unique Procore.

  2. Assurez-vous d’être dans le bon espace d’équipe. Si votre entreprise dispose de plusieurs espaces d’équipe, sélectionnez celui de votre choix dans le menu déroulant en haut du panneau de navigation de gauche.

  3. En bas à gauche de la landing page, cliquez sur Tour de contrôle.

  4. Cliquez sur l’onglet Rapports .

  5. Localisez le filtre déroulant de la plage de dates dans le coin supérieur droit et ajustez les paramètres d’affichage selon vos besoins : 7 derniers jours, 30 derniers jours, 60 derniers jours ou 90 derniers jours.

  6. Analysez les données en fonction de vos objectifs. Explorez ci-dessous pour plus d’informations sur nos types de rapports.

Consommation de crédit par catégorie



Le graphique à barres Consommation de crédit par catégorie visualise la consommation de crédit par opération au niveau macroéconomique : intelligence et génération, ingestion et configuration de données, activité et infrastructure, et stockage de données. 

Catégorie de crédit

Opérations surveillées

Intelligence et génération

Exécution du chat en temps réel, raisonnement de l’agent en plusieurs étapes et génération de charge utile textuelle.

Ingestion et configuration des données

Traitement initial des fichiers, analyse de documents et rendu vectoriel des fichiers historiques du projet.

Activité et infrastructures

Webhooks d’arrière-plan, maintenance de la connexion et trafic d’orchestration actif.

Indexation multimodale

Les frais forfaitaires permanents du grand livre journalier sont calculés à 3 crédits par Go/jour.

Indicateurs globaux



La section Indicateurs globaux contient des cartes qui surveillent le nombre de chats, d’espaces d’équipe, d’agents et d’utilisateurs. Ces chiffres vous donnent une vue d’ensemble du paysage et de l’adoption de votre écosystème d’IA. 

Dans le coin de certaines cartes se trouve un nombre rouge ou vert indiquant les changements nets pour la plage de dates choisie. Par exemple : Lorsque le filtre de plage de dates est défini sur « 7 jours » en haut à droite de la fenêtre Rapports, vous pouvez voir que le nombre total d’agents IA pour le compte est de 106, avec un +10 vert. Cela signifie que 10 nouveaux agents ont été créés au cours des 7 derniers jours, ce qui porte le nombre total à 106. Si vous définissez la plage sur « 30 jours », vous verrez peut-être un nombre vert plus élevé, mais le total restera 106. 

  • Nombre total de chats : Affiche le volume cumulé d’invites conversationnelles en temps réel exécutées par vos équipes. 

    • Chaque fois qu’un utilisateur tape un message dans l’éditeur d’invite et appuie sur ENTRÉE ou clique sur la flèche d’envoi, ce compteur augmente d’une unité. Pour les utilisateurs de Procore AI : les interactions dans Datagrid et le panneau latéral de Procore AI sont prises en compte dans ce point de données. 

  • Espaces d’équipe : Affiche le nombre total d’espaces d’équipe (projets) activement mappés et en cours d’exécution sur le compte. 

  • Agents IA : Effectue le suivi du nombre total de modèles d’agent prédéfinis ou personnalisés en cours d’exécution dans vos projets.

  • Utilisateurs actifs : Le nombre de membres uniques de l’équipe qui utilisent les outils d’IA sur le compte.

Classement des activités



Dans la section Classement des activités , les classements vous aident à identifier les domaines où l’adoption de l’IA est la plus élevée parmi les trois principaux espaces d’équipe (projets), agents et utilisateurs du compte. À l’heure actuelle, vous ne pouvez voir les totaux d’utilisation que pour les trois premiers utilisateurs de chaque superficie, et non pour tous les utilisateurs. 

  • Les Teamspaces les plus actifs : Classe les espaces de travail de votre projet en fonction du volume global de conversation. Utilisez cette carte pour voir quels projets s’appuient le plus sur l’utilitaire d’agent en temps réel.

  • Agents les plus utilisés : Identifie les modèles d’agent spécifiques (par exemple, Réviseur de livrables, Agent de recherche approfondie) qui exécutent le plus de requêtes en arrière-plan.

  • Utilisateurs les plus engagés : Les trois principaux utilisateurs de l’outil, ainsi que le nombre total de chats et la mesure dans laquelle cette quantité est supérieure ou inférieure à ce qu’elle était au cours de la période précédente. 

À côté de nombreux totaux se trouve un nombre rouge ou vert indiquant les changements nets pour la plage de dates choisie. Par exemple : Avec la plage de dates définie sur « 7 jours » en haut à droite de la fenêtre Rapports, vous pouvez voir un utilisateur avec 72 chats et un +20 vert à côté. Cela signifie que l’utilisateur a envoyé 72 chats à l’IA au total, et 20 d’entre eux l’ont été au cours des sept derniers jours. Si vous définissez la plage sur « 30 jours », vous verrez peut-être un nombre vert plus élevé, mais le total restera 72.

Répartition de l’utilisation



Pour un audit plus granulaire de votre registre, faites défiler jusqu’à la section Répartition de l’utilisation et sélectionnez l’un des types de jeux de données suivants. Pour chacun de ces rapports, vous pouvez effectuer un tri en fonction d’une colonne particulière afin d’identifier des schémas. 

Par exemple, triez par nom d’agent dans le rapport « Invites et activité des utilisateurs » pour identifier les outils d’automatisation spécialisés qui sont les plus adoptés par les utilisateurs, ce qui vous permet d’identifier les flux de travail de projet les plus performants et de standardiser les stratégies d’activation réussies dans d’autres espaces d’équipe actifs. 

Invites et activité de l’utilisateur

Ce rapport capture le texte réel utilisé chaque fois qu’un utilisateur a interagi avec l’IA dans n’importe quel espace d’équipe (projet) du compte. Ces requêtes brutes des utilisateurs, ainsi que le traitement sémantique back-end et les mots-clés, peuvent montrer les tendances au sein de votre organisation ou prendre en charge l’audit de conformité.

  1. Choisissez Invites et activité de l’utilisateur dans le menu déroulant de la section « Répartition de l’utilisation ».

  2. Faites défiler pour afficher les données du rapport, qui comprennent :

    • Date de l’événement : Date du calendrier de l’interaction de l’utilisateur.

    • Utilisateur : nom de la personne qui a soumis l’invite. 

    • Nom de l’agent : Nom de l’agent fourni ou personnalisé appelé au cours de l’interaction. Les champs vides indiquent l’assistant de plateforme standard. 

    • Espace d’équipe : Projet spécifique dans lequel la session active s’est produite. 

    • Invite de l’utilisateur : chaîne de texte brute et non filtrée saisie dans le chat par l’utilisateur final. 

    • Tâche : étiquette de classification attribuée par la couche d’orchestration du système (par exemple, action-planning, semantic-retrieval, sql-retrieval) pour acheminer la demande en fonction de l’intention de l’utilisateur détectée. 

    • Mots-clés : Termes et noms de recherche de base isolés de l’entrée de l’utilisateur par le système pour rechercher des fichiers dans la base de données du projet. 

    • Requête réécrite : Chaîne de recherche sémantique générée par le modèle de raisonnement de l’IA pour maximiser la précision de la récupération des données du projet. 

  3. Facultatif : Cliquez sur le bouton Exporter pour que le rapport soit téléchargé sur votre appareil et que vous puissiez afficher les données dans leur intégralité, les utiliser pour une analyse externe ou créer des présentations. 

Consommation de crédit des utilisateurs

Ce rapport affiche un journal détaillé des transactions de chaque fraction d’un crédit consommée par l’activité de l’utilisateur, ainsi que le nom de l’utilisateur, l’action système, etc.

  1. Choisissez Consommation de crédits des utilisateurs dans le menu déroulant de la section « Répartition de l’utilisation ».

  2. Faites défiler l’écran pour afficher le journal détaillé des transactions qui suit chaque fraction d’un crédit consommée par l’activité de l’utilisateur. Passez en revue les colonnes pour auditer des éléments spécifiques :

    • Auteure : Coût de crédit exact déduit (affiché sous la forme d’une valeur décimale négative).

    • Utilisateur : membre de l’équipe qui a initié l’appel système.

    • Mesure à prendre : Ce que faisait le système (par exemple, interaction avec l’agent, exécution du pipeline d’importation, traitement de l’ensemble de données).

    • Type de ressources : couche d’actifs techniques utilisée pour effectuer cette action (par exemple, agent, pipeline de données, jeu de données, connaissances).

    • Ressources : connecteur ou nom d’actif spécifique utilisé (par exemple, connecteur Procore, agent de sécurité du site).

  3. Facultatif : Cliquez sur le bouton Exporter pour que le rapport soit téléchargé sur votre appareil et que vous puissiez afficher les données dans leur intégralité, les utiliser pour une analyse externe ou créer des présentations. 

Teamspaces Consommation de crédit

Ce rapport met en correspondance les coûts d’infrastructure directement avec des environnements de projet spécifiques. Il expose les postes de stockage de jeux de données automatisés, ce qui vous permet de suivre le coût du volume de données que chaque espace d’équipe (projet) maintient dans son index vectoriel actif.

  1. Choisissez Consommation de crédits Teamspaces dans le menu déroulant de la section « Répartition de l’utilisation ».

  2. Faites défiler l’écran pour afficher les coûts d’infrastructure permanents associés directement à des environnements de projet spécifiques. Les colonnes sont les suivantes :

    • Auteure : Affiche le coût de crédit exact déduit (affiché sous la forme d’une valeur décimale négative).

    • Espace d’équipe : Identifie le membre de l’équipe qui a initié l’action. 

    • Mesure à prendre : Identifie ce que le système faisait (par exemple, l’apprentissage de l’agent (vectorisation), l’interaction de l’agent, le traitement de l’ensemble de données).

    • Type de ressources : couche d’actifs techniques utilisée pour effectuer cette action (par exemple, agent, pipeline de données, jeu de données, connaissances).

    • Ressources : l’application qui a effectué la tâche. 

    • Date de l’événement : Date calendaire à laquelle l’action a eu lieu. 

  3. Facultatif : Cliquez sur le bouton Exporter pour que le rapport soit téléchargé sur votre appareil et que vous puissiez afficher les données dans leur intégralité, les utiliser pour une analyse externe ou créer des présentations.