关于 Copilot 使用数据指标
Copilot 使用情况指标可帮助管理员和决策者了解团队的 Copilot采用方式。 可以跟踪参与、识别培训机会,并探索 AI 辅助工作流与拉取请求吞吐量和合并时间的关系。
使用仪表板探索跨您的企业及各组织的趋势:
- 使用情况指标仪表板显示采用情况和参与度趋势。
- 代码生成仪表板会分解用户和代理生成的代码。
- 影响仪表板将采用深度与拉取请求输出相连接。
- 存储库见解显示组织拥有的存储库的拉取请求活动和 Copilot code review 结果情况。 使用它来确定需要跟进的评审覆盖不足和反馈。 有关访问说明,请参阅 查看仓库洞察。 有关指标定义和解释,请参阅 存储库见解指标。
对于自定义报告或长期存储,请使用使用情况指标 API 和 NDJSON 导出。 这些 API 提供具有存储库和用户级详细信息的企业和组织范围的报表。 请参阅“用于 Copilot 使用情况指标的REST API终结点”。
数据度量值是什么?
使用情况指标可帮助你回答有关采用和开发工作流的不同问题。
| 类别 | 它度量的内容 | 示例问题 |
|---|---|---|
| 收养 | 有多少授权开发人员主动使用 Copilot。 | 团队是否经常使用 Copilot ? |
| 参与度 | 开发人员使用 Copilot 的频率以及他们使用哪些功能。 | 开发人员是否在培训后探索代理工作流? |
| 接受率 | 开发人员接受建议的频率。 接受趋势可以表明建议是否有用。 | 开发人员是否接受了更大比例的内联建议? |
| 代码行 | 在编辑器中建议、添加或删除的代码。 | 正在生成并插入到文件中的代码有多少? |
| 拉取请求生命周期 | 拉取请求创建和合并计数、合并时间以及审查活动。 | 采用情况与拉取请求吞吐量和交付流程有何关系? |
查找这些信号中的模式,而不是将任何单个数字视为生产力的度量值。 将趋势与开发人员反馈相结合,了解哪些方面有效,以及团队在哪些方面需要支持。
了解采用分群
活动用户计数显示用户是否使用 Copilot,但不显示其使用方式。 影响仪表板中的采用分组会按用户参与的功能对用户进行分组,涵盖从代码补全和编辑到代理优先及多代理工作流。 这有助于查看使用情况是否随时间推移而扩大。
群组描述的是符合条件的功能使用广度,而不仅仅是活动量。 经常使用补全功能的用户仍处于代码优先阶段,而使用多个代理界面的人则符合更后阶段的条件。
影响仪表板使用这些群组来比较拉取请求输出和合并时间。 其行业比较提供了来自参与同行的额外背景信息,其潜在投资回报估算比较了采用各阶段的成本和产出。 这些比较显示关联,而不是证明采用导致了生产力的变化。 团队组合、项目复杂性和经验也会影响结果。
了解覆盖范围和限制
使用情况指标结合了来自 IDE、Copilot CLI 和其他受支持平台的遥测数据。 它们不是所有 Copilot 活动的完整记录。 覆盖范围因指标和报表而异。
详细的 IDE 细分需要启用了遥测功能的受支持客户端。 缺少客户端详细信息时,服务器端遥测仍可识别活动用户。
存储库见解使用服务器端拉取请求和评审数据,并且不依赖于 IDE 遥测数据。
给定日期的数据在该日期结束后的两个完整 UTC 日内可用。 组织级别的指标可能会重叠,因为同一用户可以属于多个组织,因此不要添加组织总计来计算企业总数。
使用情况指标度量活动,而不是许可证分配。 使用 Copilot 用户管理 API 获取席位和许可证信息。
更详细地分析指标
如果需要解释或验证调查结果,请使用参考文章来检查指标覆盖率和采用阶段定义、协调仪表板和 API 报告,以及解释行业比较。 请参阅“GitHub Copilot 使用情况指标”。