GitHub розширює метрики Copilot App: деталі використання

GitHub оголосив про значне розширення метрик використання Copilot App в рамках свого API метрик використання Copilot. Ці зміни спрямовані на надання більш глибокого розуміння того, як застосунок використовується в організаціях та на підприємствах.

Деталізація активності користувачів

Тепер індивідуальна активність користувачів у Copilot App прив'язується до звітів на рівні підприємства та організації. Це дозволяє бачити, хто саме використовує застосунок, на відміну від попередньої системи, де була доступна лише загальна статистика використання на рівні підприємства чи організації.

Нові метрики та показники

Серед нових показників, що стали доступними, є:

used_copilot_app: Вказує, чи був користувач активним у Copilot App протягом певного дня.
totals_by_copilot_app: Розділ для кожного користувача, що звітує про кількість сесій (session_count), кількість запитів (request_count), кількість підказок (prompt_count), а також деталізацію використання токенів, включаючи суму вихідних токенів (output_tokens_sum), суму токенів підказок (prompt_tokens_sum) та середню кількість токенів на запит (avg_tokens_per_request).

Крім того, активність кодування в Copilot App тепер деталізується за функціями, моделями та мовами. Це означає, що активність Copilot App з'являється в таких показниках, як totals_by_feature, totals_by_model_feature, totals_by_language_feature та totals_by_language_model, дозволяючи відстежувати, з якими моделями та мовами відбувається робота.

Розширені дані про код та активних користувачів

Метрики, що стосуються кодової активності та кількості рядків коду, тепер також включають дані з Copilot App. Це охоплює загальні показники генерації коду, прийняття коду, доданих та видалених рядків. Показник daily_active_users тепер також враховує користувачів, які були активними лише в Copilot App.

Можливості для аналізу

Ці розширені метрики дозволяють ідентифікувати користувачів Copilot App та вимірювати обсяг коду, згенерованого за допомогою застосунку. Також з'являється можливість порівнювати використання Copilot App з іншими інструментами, такими як IDE, чат, інструменти для перегляду коду та агенти кодування, використовуючи ті ж самі поля даних.

Доступність та вимоги

Метрики used_copilot_app та totals_by_copilot_app на рівні користувача доступні у 1-денних та 28-денних звітах для підприємств та організацій. Зміни, що стосуються значення функції copilot_app, активності коду, кількості рядків коду та daily_active_users, застосовуються до звітів на рівні підприємства, організації та користувача для обох часових вікон. Доступ до цих метрик мають власники підприємств, менеджери з виставлення рахунків, власники організацій та будь-яка особа з індивідуальною роллю, що надає дозвіл «View Copilot Metrics». Для використання цих функцій необхідно увімкнути політику метрик використання Copilot. Зміни є зворотно сумісними.

Що це означає для розробників

Для розробників та їхніх керівників ці оновлення означають глибше розуміння використання Copilot App у команді. Вони можуть ідентифікувати активних користувачів, вимірювати обсяг згенерованого коду та порівнювати ефективність Copilot App з іншими інструментами розробки.

Ключові факти

Метрики використання Copilot App тепер розширені в API метрик використання Copilot.
Активність окремих користувачів Copilot App тепер прив'язується до звітів на рівні підприємства та організації.
Активність кодування в Copilot App тепер деталізується за функціями, моделями та мовами.
Додано нову метрику used_copilot_app, що вказує на активність користувача в застосунку.
Додано нову метрику totals_by_copilot_app з деталізацією сесій, запитів, підказок та використання токенів для кожного користувача.