OpenAI
Эта страница была переведена машинным переводом. Открыть оригинальную статью на английском.

Аналитика рабочей области для ChatGPT Enterprise и Edu

Понимайте внедрение, вовлеченность и то, как команды используют ChatGPT во всей рабочей области, с помощью встроенной аналитики и отчетности.

Обновлено: 2 days ago

В этой статье описано, что входит в аналитику рабочей области и как использовать панель мониторинга, чтобы понимать внедрение и вовлеченность в вашей рабочей области.

Рекомендации по практическому применению этих инсайтов (плейбуки, мероприятия по обучению, программы амбассадоров) см. в нашем руководстве Academy: Руководство по аналитике рабочей области ChatGPT Enterprise

Обзор

Аналитика рабочей области в ChatGPT Enterprise и Edu предоставляет представление на уровне рабочей области о внедрении и использовании, чтобы вы могли отслеживать тренды, выявлять паттерны и отчитываться о прогрессе с течением времени.

Доступ к аналитике рабочей области

В ChatGPT Enterprise или Edu:

  • Перейдите в Настройки рабочей области > Аналитика рабочей области.

  • Откройте https://chatgpt.com/admin/usage.

Разрешения

Просмотр аналитики рабочей области доступен:

  • Участникам с ролью analytics viewer

  • Администраторам рабочей области

  • Владельцам рабочей области

Разделы панели аналитики рабочей области

Обзор

Используйте Обзор для быстрой проверки уровня внедрения и вовлеченности. Он предоставляет представления тенденций, которые помогают понять, как использование меняется со временем, включая:

  • Уникальные активные пользователи

  • Общее количество сообщений

  • Сообщения GPT

  • Сообщения инструментов

  • Тенденции использования проектов, приложений и навыков

  • Разбивки по группам SCIM, если они настроены

    • Если в вашей рабочей области включен SCIM, аналитические представления можно сегментировать по группам, синхронизируемым из вашего поставщика удостоверений. Использование групп SCIM, представляющих реальные организационные единицы (например, команды или отделы), помогает создавать более содержательные аналитические разбивки.

    • Чтобы узнать больше о SCIM, ознакомьтесь с нашей подборкой статей о единой аутентификации (SSO), SCIM и управлении пользователями.

Контрольные показатели

Используйте Контрольные показатели, чтобы сравнивать ключевые сигналы внедрения и вовлеченности с медианой по отрасли:

  • Коэффициент активации

  • WAU (weekly active users) на одного активированного пользователя

  • Сообщений на WAU

Вы можете выбрать отрасль для сравнения в выпадающем списке продукта.

Влияние

Раздел «Влияние» помогает оценить результаты на уровне рабочей области по данным необязательных опросов в продукте.

В разделе «Влияние» представлены агрегированные данные самооценки из опроса о влиянии. Они помогают командам понять, как ChatGPT влияет на работу в организации, в том числе:

  • Доля респондентов, отметивших положительное влияние на производительность, экономию времени, качество работы, удовлетворенность работой, способность выполнять новые задачи и качество обслуживания заинтересованных сторон

  • Распределение ответов по каждому вопросу

  • Уровень участия в опросе (доля респондентов среди участников рабочей области)

Эти показатели предназначены для анализа общих тенденций и получения представления о ситуации в организации. Они не являются журналами соответствия требованиям и не отражают причинно обусловленную оценку окупаемости инвестиций (ROI).

Подробнее об опросах о влиянии см. в статье «Управление опросами о влиянии в аналитике рабочей области».

Task insights

Task insights показывает агрегированные паттерны работы в ChatGPT, классифицируя разговоры по широким категориям задач и темам. Он предоставляет аналитику на уровне рабочей области без раскрытия отдельных промптов, разговоров или активности на уровне пользователя.

Task type

Раздел Task type показывает распределение разговоров по категориям задач, помогая быстро понять самые распространенные способы использования ChatGPT в вашей рабочей области и то, как эти паттерны меняются со временем.

Тепловая карта

Тепловая карта сравнивает типы задач по второй размерности, чтобы вы могли детальнее анализировать паттерны использования. В зависимости от доступных данных она показывает, как типы задач соотносятся с темами разговоров или организационными единицами.

Примечание: группы SCIM с менее чем 10 участниками не будут отображаться как строка в тепловой карте task insights.

Отключение аналитики задач

Вкладка «Аналитика задач» и классификация бесед по умолчанию включены. Администраторы и владельцы рабочей области могут отключить их следующим образом:

  1. Перейдите в раздел «Настройки рабочей области»

  2. На вкладке «Общие» прокрутите страницу до раздела «Аналитика рабочей области»

  3. Отключите параметр «Включить аналитику задач»

Пользователи

Раздел Пользователи помогает отслеживать лицензии и вовлеченность:

  • Купленные места

  • Активированные места

  • Активные пользователи

  • Ожидающие приглашения

  • Метрики использования по пользователям (например: общая активность, активность GPT, инструментов, проектов и коннекторов)

  • Наиболее активные пользователи (ваши самые вовлеченные пользователи: верхние 20% по отправке сообщений с 75+ сообщениями в неделю и 3+ разными инструментами в месяц) 

GPT

Аналитика GPT включает:

  • Всего GPT

  • GPT, созданные за период

  • GPT, активные за период

  • Метрики использования и охвата на уровне GPT

Проекты

Аналитика Project включает:

  • Всего проектов

  • Проекты, созданные за период

  • Проекты, активные за период

  • Метрики использования и охвата на уровне проекта

Навыки

Аналитика Skills включает:

  • Тренды использования навыков

  • Лучшие навыки по активности сообщений

Экспорт

Используйте Экспорт для создания CSV-отчетов по запросу для следующих типов данных:

  • GPT

  • Опрос Impact

  • Проекты

  • Пользователи

Для экспорта Users, GPTs и Projects выберите предустановленный диапазон дат или выберите Custom, чтобы указать дату начала и дату окончания. Пользовательские диапазоны экспорта могут охватывать до 12 месяцев и не могут заканчиваться после текущей даты.

Форматы экспорта, отличные от CSV, и дополнительные вкладки в настоящее время не поддерживаются.

Сформировать отчет CSV

  1. Перейдите в Workspace settings > Workspace analytics.

  2. Выберите Export data.

  3. Выберите Data type.

  4. Выберите предустановленный Date range или выберите Custom и укажите дату начала и дату окончания.

  5. Выберите Generate CSV.

Охват данных и ограничения

Аналитика рабочей области — это агрегированный аналитический интерфейс. Это не интерфейс необработанных логов, и он не показывает:

  • Текст сообщений

  • Содержимое файлов

  • Записи соответствия на уровне объектов

Для необработанных логов, юридических/безопасностных рабочих процессов и средств контроля соответствия используйте Compliance API.

Актуальность данных

Аналитика рабочей области не обновляется в реальном времени. Данные регулярно обновляются каждые 1–24 часа, обычно в течение 6–12 часов. Целевой срок доступности данных — до 48 часов; расчет ведется по отчетным дням в UTC. Используйте отметку времени последнего обновления, указанную в UTC, чтобы подтвердить актуальность.

Рабочие области с резидентностью данных в ЕС

В рабочих областях с резидентностью данных в ЕС функция «Аналитика задач» по умолчанию отключена. Владелец рабочей области может в любое время включить эту функцию в разделе «Настройки рабочей области».

После включения функции ChatGPT начнет формировать агрегированные данные аналитики задач для рабочей области. Если впоследствии отключить аналитику задач, новые данные для нее перестанут формироваться. Ранее сформированные агрегированные данные в настоящее время не удаляются.

Часто задаваемые вопросы

Могу ли я сегментировать аналитику по команде, отделу или бизнес-единице?

Некоторые представления аналитики рабочей области поддерживают сегментацию по группам SCIM, которые могут представлять команды, отделы или бизнес-единицы в зависимости от того, как настроен ваш поставщик удостоверений. Если вам нужна дополнительная детализация, вы можете экспортировать отчеты и объединить их со своими внутренними данными.

Можно ли изменить опрос о влиянии или создать собственный?

Владельцы рабочей области могут создать опрос Созданный администратором на вкладке Влияние, но не могут настраивать вопросы опроса или варианты ответов. Опросы, созданные администраторами, используют тот же встроенный набор вопросов, что и опросы, созданные OpenAI. Подробнее см.: Управление опросами о влиянии в аналитике рабочей области.

Могу ли я экспортировать отчеты Task insights?

Нет. Мы активно работаем над этим и надеемся добавить такую возможность в одном из будущих обновлений.

Почему показатели Compliance API не совпадают с аналитикой рабочей области?

Показатели могут различаться, потому что Compliance API возвращает необработанные системные данные, а Workspace Analytics — очищенные аналитические данные. Например, API может включать внутренние системные сообщения или записи без временных меток, которые аналитика исключает.

В чем разница между «Filter by Group» в Overview и «All organizational units» в Task insights?

В Overview выпадающее меню Filter by Group включает все группы, доступные в рабочей области, включая как группы под управлением SCIM, так и группы, созданные в интерфейсе ChatGPT.

В Task insights выпадающее меню All organizational units включает только группы SCIM. В этом представлении организационные единицы соответствуют группам SCIM.

Что делать, если моя рабочая область не использует SCIM?

Если ваша рабочая область не использует SCIM, администраторам не нужно вручную создавать группы или сопоставлять их для Task insights. Вместо этого Task insights показывает альтернативное представление на основе пересечения Task type и Conversation topic, а не организационных единиц.

Темы разговоров создаются автоматически и могут включать такие категории, как Продажи или Инженерия.

Приложение: справочник по данным экспорта

Следующие таблицы описывают столбцы, включенные в текущие файлы экспорта.

Общие столбцы в экспортах Users, GPTs и Projects

СтолбецОписание
cadenceТип отчетного периода. Текущие значения: Weekly, Monthly, Partial Weekly, Partial Monthly и Date Range.
period_startДата начала отчетного периода.
period_endДата окончания отчетного периода. Для неполных периодов здесь указывается последняя доступная дата окончания в экспорте.
account_idИдентификатор аккаунта рабочей области, связанного с отчетом.

Поля сопоставлений

Сопоставления, связывающие элемент, например модель, GPT, инструмент или проект, с соответствующим количеством сообщений. В экспортах CSV эти сопоставления представлены как сериализованный текст.

Отчет по пользователям

Отчет об использовании рабочей области по каждому пользователю за выбранный период. Он объединяет поля идентификации и статуса пользователя с агрегированными метриками использования сообщений, GPT, инструментов и проектов.

Столбец

Описание

public_id

Публичный идентификатор, связанный с пользователем.

name

Имя пользователя. Для пользователей в ожидании оно может быть пустым.

email

Адрес электронной почты пользователя.

role

Роль, указанная пользователем при онбординге.

user_role

Роль в рабочей области на конец периода.

seat_type

Тип лицензии, назначенной пользователю на момент создания экспорта. Возможные значения: ChatGPT, Codex и Automation. Это необязательное поле отображается только для подходящих рабочих областей.

department

Отдел, указанный пользователем при онбординге.

groups

Данные о членстве пользователя в группах на конец периода.

user_status

Статус записи пользователя на конец периода.

created_or_invited_date

Дата, когда пользователь был подготовлен или приглашен.

is_active

Отправил ли пользователь хотя бы одно сообщение за отчетный период.

first_day_active_in_period

Первый день активности пользователя в отчетном периоде.

last_day_active_in_period

Последний день активности пользователя в отчетном периоде.

messages

Общее количество сообщений, отправленных пользователем за период.

messages_rank

Место по общему количеству сообщений в рабочей области за период.

model_to_messages

Сериализованное сопоставление семейства моделей с количеством сообщений.

gpt_messages

Сообщения, отправленные пользователем пользовательским GPT за период.

gpts_messaged

Количество уникальных пользовательских GPT, которым пользователь отправлял сообщения за период.

gpt_to_messages

Сериализованное сопоставление идентификатора GPT с количеством сообщений.

tool_messages

Количество записей сообщений, связанных с активностью инструментов пользователя за отчетный период. Оно может не совпадать с количеством видимых пользователю действий инструментов или вызовов инструментов.

tools_messaged

Количество уникальных инструментов, использованных за период.

tool_to_messages

Сериализованное сопоставление отчетной категории инструментов с количеством связанных записей сообщений пользователя за выбранный период. Категории могут не соответствовать один к одному видимым пользователю действиям или вызовам инструментов.

Поиск

Сообщения, связанные с поиском в интернете в ChatGPT.

Контейнер

Сообщения, связанные с выполнением в изолированной песочнице, используемым в поддерживаемых рабочих процессах с инструментами, файлами, кодом или командами.

Суммаризатор цепочки рассуждений

Сообщения, связанные со сводным статусом рассуждений, который создается в некоторых рабочих процессах рассуждений и инструментов. Это не раскрывает исходное содержимое цепочки рассуждений (CoT).

Инструмент API

Сообщения, связанные с фреймворком маршрутизации ресурсов и инструментов приложений ChatGPT. Это не отражает использование клиентом OpenAI developer API. В зависимости от рабочего процесса сюда может входить активность инструментов, поддерживаемых приложениями или коннекторами.

project_messages

Сообщения, отправленные пользователем в проектах за период.

projects_messaged

Количество уникальных проектов, в которые пользователь вносил вклад за период.

project_to_messages

Сериализованное сопоставление идентификатора проекта с количеством сообщений.

projects_created

Проекты, созданные пользователем за период.

last_day_active

Последний день активности пользователя в этом или любом предыдущем периоде.

Отчет по GPT

Отчет об использовании рабочей области по GPT за выбранный период. Он показывает сведения о GPT, метаданные создателя, активность и использование в рабочей области.

СтолбецОписание
gpt_idID пользовательского GPT.
gpt_nameНазвание GPT на конец периода.
config_typeСостояние конфигурации GPT. Текущие исходные значения в коде: live и draft.
gpt_descriptionОписание GPT на конец периода.
gpt_urlURL GPT.
gpt_creator_public_idПубличный ID создателя GPT.
is_activeПоказывает, получил ли GPT хотя бы одно сообщение за период.
first_day_active_in_periodПервый день активности GPT в периоде.
last_day_active_in_periodПоследний день активности GPT в периоде.
messages_workspaceСообщения, отправленные GPT в вашей рабочей области за период.
unique_messagers_workspaceКоличество уникальных пользователей рабочей области, которые отправляли сообщения GPT за период.
gpt_creator_emailEmail создателя, если доступен.

Отчет по проектам

Отчет об использовании рабочей области по проектам за выбранный период. Повторяет структуру экспорта GPT, но с идентификаторами проектов и метаданными создателя.

СтолбецОписание
project_idИдентификатор проекта.
project_nameНазвание проекта на конец периода.
config_typeИсходное состояние конфигурации из источника аналитики.
project_descriptionОписание проекта на конец периода.
project_urlURL проекта.
project_creator_public_idПубличный ID создателя проекта.
is_activeПоказывает, получил ли проект хотя бы одно сообщение за период.
first_day_active_in_periodПервый день активности проекта в периоде.
last_day_active_in_periodПоследний день активности проекта в периоде.
messages_workspaceСообщения, отправленные внутри проекта в вашей рабочей области за период.
unique_messagers_workspaceКоличество уникальных пользователей рабочей области, которые участвовали в проекте за период.
project_creator_emailEmail создателя, если доступен.

Отчет по опросу Impact

Экспорт данных опроса Impact на уровне ответов для выбранной рабочей области. На основе экспортируемых полей каждая строка представляет один отвеченный вопрос опроса для одного респондента.

СтолбецОписание
date_partitionДата, связанная со строкой ответа опроса.
workspace_id ID учетной записи рабочей области, связанной с ответом.
name Имя респондента.
email Email респондента.
survey_id ID опроса.
survey_name Название опроса.
question_id ID вопроса опроса.
answer_id ID выбранного ответа для этого вопроса.

Была ли эта статья полезной?