この記事では、Copilot 使用状況メトリック ダッシュボードとインパクト ダッシュボード全体の使用状況と導入メトリックを解釈し、導入とエンゲージメントを向上させる機会を特定します。
全体的な使用状況の傾向の確認
ダッシュボードの主な使用状況グラフを使用して、全体的な導入パターンとエンゲージメント パターンを理解します。 これらのグラフは、使用量が増加している場所、平準化されている場所、または減少している場所を特定するのに役立ちます。そのため、エンゲージメントを維持するためのアクションを実行できます。
| メトリック | 表示される内容 | それを解釈する方法 |
|---|---|---|
| IDE の毎日のアクティブ ユーザー (DAU) | 毎日 Copilot を操作した一意のユーザー。 | 持続的なDU成長は、一貫したエンゲージメントを示します。急激な減少は、構成の問題または関心の低下を示している可能性があります。 |
| IDE の毎週アクティブなユーザー (WAU) | 7日間のスライディングウィンドウでアクティブなユニークユーザー。 | 正常な WAU とライセンスの比率 (>60%) は、強力な継続的な使用状況を示します。 |
| コード補完の受け入れ率 | 受け入れられた提案の割合。 | 上昇率は、信頼と有用性を高めることを示唆しています。ドロップは、不一致の提案やワークフローの摩擦を指している可能性があります。 |
機能導入のレビュー
"チャット モードごとの要求数" グラフと "エージェント導入" グラフは、開発者が Copilot Chat と Copilot agentをどのように使用しているかを示しています。
| シグナル | それがあなたに伝えるもの | 注意点 |
|---|---|---|
| チャット モードあたりの要求数 | モード別のチャット操作の内訳 - Ask、Edit、Plan、または Agent。 | バランスの取れた分散は、ユーザーが複数の機能を探索していることを示しています。 1 つのモードを大量に使用すると、有効化がフォーカスする必要がある場所が強調表示される場合があります。 |
| エージェントの導入 | ||
| Copilot agentを使用したアクティブ ユーザーの割合。 | 時間の経過に伴う増加は、開発者が基本的な完了からより高度な Copilot 機能に進んでいることを示しています。 |
API を使用したカスタマイズの採用状況の確認
Copilot CLI、VS Code、およびその他のサポートされているクライアント全体で開発者によるカスタマイズの導入状況を評価するには、使用状況メトリック API を使用します。 企業および組織のスキル、カスタム エージェント、モデル コンテキスト プロトコル (MCP) サーバー接続アクティビティ、スラッシュ コマンド、プラグインを報告します。 フィールドは、ユーザーごとのレポートと集計された 1 日のレポート、ユーザーごとの 28 日間のレポート、および集計された 28 日間の day_totalsに表示されます。 これらはダッシュボードでは使用できません。 フィールド定義、サポートされているクライアント、およびレポート名に関する最小バージョンについては、Copilot使用状況メトリックで使用可能なデータ を参照してください。
interaction_count は、カテゴリごとに異なるイベントを表します。スキル呼び出し、カスタム エージェントの開始、MCP 接続または再接続の試行、スラッシュ コマンドの呼び出し、またはプラグインに関連付けられたスキル呼び出しです。 これらの値は、ユーザーではなくアクティビティ イベントをカウントします。 MCP の数には、成功した接続試行と失敗した接続試行の両方が含まれますが、既に接続されているサーバーまたは進行中のサーバーの使用を介したツール呼び出しは含まれません。 すべてのプラグインの相互作用は既にスキルの相互作用数に含まれていますが、プラグインに関連付けられていないスキルの相互作用はスキルの合計にのみ表示されます。 プラグインとスキルの相互作用の数を一緒に追加しないでください。
導入の強い兆候を特定するには、多くのユーザーの配列に表示される構成済みのカスタマイズ名を探します。 カスタム名は、ユーザーごとのレポートと、集計されたエンタープライズ レポートおよび組織レポートの両方に表示されます。 集計されたレポートを使用して全体的な利用状況を確認し、ユーザーごとのレポートで各カスタマイズを使用しているユーザーを確認します。 各カスタマイズ配列には、レコードあたり最大 25 個の名前付きエントリと、残りのアクティビティ用の末尾の other エントリが保持されます。
データはクライアント テレメトリから取得され、アクティビティを過小評価する可能性があります。 名前が表示されない場合でも、使用量がゼロであることを意味するわけではありません。カスタマイズが保持されたエントリに含まれていないか、その名前を利用できないか、クライアント テレメトリが見つからない可能性があります。 これらのレポートを使用して傾向を把握し、正確な導入率を計算したり、承認されたカスタマイズのみが使用されていることを確認したりすることを目的とするものではありません。
個別のカウントは、アクティビティを持っていたさまざまな項目識別子の数を示します。 企業および組織のスコープでは、多くのユーザーが操作した場合でも識別子は 1 回カウントされるため、集計値を再現するためにユーザーごとの個別のカウントを追加しないでください。 レコードまたは day_totals 間で個別の数を比較して、アクティビティを含むカスタマイズの多様性が変化しているかどうかを確認します。
| シグナル | 提案内容 | 推奨されるアクション |
|---|---|---|
| 名前付きスキル、カスタム エージェント、スラッシュ コマンド、またはプラグインは、多くのユーザー間で高い相互作用数を持ちます | カスタマイズは広く役立ち、標準化の候補となる可能性があります。 | 社内の事例、オンボーディング資料、または共有のカスタマイズライブラリを通じて普及させましょう。 |
| 名前付きカスタマイズは、少数のユーザーに対してのみ保持されたエントリに表示されますが、それらのユーザーの操作回数が多いです | 観察された活性は、小グループ間で濃縮される。 他のユーザーは、保持されている名前付きエントリ以外でもアクティビティを行っている可能性があります。 | これらのユーザーにサンプル ワークフローを共有するよう依頼します。 その後、開発者のフィードバックやその他の内部データを使用して、有効化を拡大する前に、より広範な導入を評価します。 |
重複を除いた件数は多いですが、ほとんどの操作は other または custom にまとめられます | カスタム名は、ファイル パスのように見えるか、保持対象のエントリ外であるため、使用できないか、フィルター処理される場合があります。 | 使用されているカスタマイズに関する結論を導き出す前に、クライアントのバージョンとテレメトリカバレッジを確認してください。 |
| 開発者による利用が見込まれるスキル、カスタム エージェント、スラッシュ コマンド、またはプラグインのインタラクション数は低いままです | 開発者は、カスタマイズが存在するか、役に立つときを知らない可能性があります。 | タスクに重点を置いた例を使用して検出可能性を向上させ、関連するオンボードまたは有効化セッションにカスタマイズを含めます。 |
| MCP 接続アクティビティが予想以上または低い | 開発者は、再接続を繰り返したり、接続試行に失敗したり、計画されたロールアウトが意図した対象ユーザーに到達していない可能性があります。 接続数だけでは、開発者が MCP ツールを積極的に使用しているかどうかは示されません。 | MCP の構成とロールアウト プロセスを確認し、他の内部データまたは開発者フィードバックを使用して、継続的なサーバーの使用を評価します。 |
| 導入は有効化アクティビティの後に拡大する | このアクティビティは、開発者が便利なカスタマイズを見つけ出すのに役立つ可能性があります。 | アクティビティを拡張するかどうかを決定する前に、複数のレポート期間を比較し、開発者のフィードバックを収集します。 |
モデルの導入の確認
"[Model usage per day](1 日あたりのモデル使用量) グラフと [Model usage per chat mode](チャットモードごとのモデル使用量) グラフは、最も頻繁に使用される AI モデルを理解するのに役立ちます。"
| チャート | Description | 派生するインサイト |
|---|---|---|
| 1 日あたりのモデル使用量 | どの AI モデルが Copilot Chat アクティビティに電力を供給するかを示します。 | ユーザーが主に既定のモデルに関心を持っているか、新しいモデルを試しているかを特定します。 |
| チャット モードごとのモデルの使用状況 | チャット モード (Ask、Edit、Plan、Agent) でモデルの使用状況を分類します。 | 新しいモデルがリリースされると、モデルの導入がどのように進化するかを監視します。 |
メモ
モデルの使用状況グラフは、現在、チャット アクティビティのみを表します。 完了データは、モデルの内訳には含まれません。
言語の使用状況の確認
"言語の使用状況" グラフと "1 日あたりの言語使用量" グラフは、開発者が Copilot で最もよく使用するプログラミング言語を示しています。
| チャート | Description | 使用方法 |
|---|---|---|
| 言語の使用方法 | プログラミング言語による Copilot Chat アクティビティの共有を示します。 | |
| Copilot Chatが最も価値のある場所と、追加のサポートまたは有効化が役立つ可能性がある場所を特定します。 | ||
| 1 日あたりの言語使用量 | 言語アクティビティの毎日の変動を追跡します。 | 開発の焦点の変化を見つけるか、新しいチームやプロジェクトが活動の増加を促進しているかどうかを確認します。 |
導入コホートの検証
Impact ダッシュボードの導入コーホート分布では、各フェーズにおけるユーザーの割合と、その分布が時間の経過とともにどのように変化するかが示されます。 各フェーズの意味と分類のしくみについては、 GitHub Copilotの使用状況メトリクス を参照してください。
| シグナル | 提案内容 | 推奨されるアクション |
|---|---|---|
| フェーズ1の割合の縮小、フェーズ2またはフェーズ3の割合の拡大 | ユーザーは、コード補完からエージェント駆動型ワークフローに進んでいます。 | 現在の有効化を続行します。は、勢いを維持するために、社内の成功事例を共有することを検討します。 |
| 高い、または増加している受動的ユーザーの割合 | ライセンスを持つユーザーの多くは、フェーズのエンゲージメントしきい値にまだ達していません。 | ライセンスの割り当てと IDE のセットアップを確認する。非アクティブなユーザーを再び関与させるためにオンボードを提供します。 また、影響を受けるユーザーが、Copilot ChatのGitHub.comなど、フェーズの分類基準の一部ではないサーフェスに主に依存しているかどうかを確認します。 |
| フェーズ1からフェーズ2への移行の停滞 | ユーザーは完了とチャットに慣れているが、エージェント サーフェスを採用していない。 | |
| Copilot cloud agentの構成などの推奨事項カードに従うか、エージェント ワークフローのデモを実行します。 | ||
| フェーズ 2 からフェーズ 3 への移行の停滞 | ユーザーは 1 つのエージェント サーフェスを採用しましたが、追加のエージェント サーフェスに重ねていません。 | |
| Copilot code reviewの有効化などのレコメンデーション カードに従って、2 つ目のエージェント サーフェスを導入します。 | ||
| ユーザーのフェーズは、習慣を変更することなく、ある日から次の日に変わります | フェーズの割り当ては、末尾の 28 日間のウィンドウから毎日再計算されるため、ユーザーのフェーズは、古い日がウィンドウからロールアウトされるとシフトします。 | これは予期される動作であり、データ エラーではありません。アクションは必要ありません。 |
Copilot cloud agentの構成、Copilot code reviewの有効化、オンボード ナッジの送信など、ダッシュボードにレコメンデーション カードが表示されたら、リンクされた方法に従ってセットアップを完了します。 各推奨事項は、組織の現在のコーホート配布から生成され、ユーザーをより深い導入に移行する可能性が最も高いギャップをターゲットとしています。
導入乗数の確認
導入倍率は、コードの出荷量(ユーザー 1 人あたり月ごとにマージされたプル リクエスト数)とプル リクエストがマージされるまでの時間について、積極的なユーザー(フェーズ 1、2、または 3)とパッシブ ユーザーを比較します。 これは、各フェーズに含まれるユーザーの数に関係なく、より深い導入の相対的な影響を示しています。
| シグナル | 提案内容 | 推奨されるアクション |
|---|---|---|
| アクティブ ユーザーは、非アクティブ ユーザーよりも 1 ユーザーあたり月ごとに多くのプル リクエストをマージします | より深い Copilot 導入は、個々の出力の増加に関連しています。 | この比較を使用して、継続的な有効化投資のケースをサポートします。 |
| エンゲージされたユーザーは、パッシブ ユーザーよりも 1 か月あたりのユーザーあたりのプル要求数が少なくなります | 関心のあるユーザーは、大規模または複雑な作業により多くの時間を費やしている場合や、比較に導入の深さではなくチーム構成の違いが反映される場合があります。 | 結論を導き出す前に、導入コーホートの分布やチーム単位のデータと照らし合わせて確認し、乗数を生産性を単独で示す指標として扱わないようにしてください。 |
| 関与しているユーザーは、パッシブ ユーザーよりも高速にプル要求をマージします | より深い導入は、より短いプル要求ライフサイクルに関連しています。 | この比較を pull request ライフサイクル メトリックと共に使用して、全体的な配信への影響を評価します。 |
| フェーズ 2 またはフェーズ 3 シェアの成長にもかかわらず、乗数は横ばいのまま | エージェントの導入はまだ、関与しているユーザーとパッシブ ユーザーの間の出力の測定可能な違いに変換されていません。 | エージェントの使用が少数のユーザーまたはチームに集中しているかどうか、および影響を示すためにロールアウトから十分な時間が経過しているかどうかを確認します。 |
メモ
導入倍率は、同じユーザーを時系列で比較するのではなく、2つの異なるユーザー集団を比較します。 チーム構成、プロジェクトの複雑さ、または関与しているユーザーと受動的なユーザーの間の年功序列の違いは、導入自体 Copilot ほど、比較に影響を与える可能性があります。
業界比較の確認
業界の比較ウィジェットは、自社のエージェント導入状況と活用度を、参加企業の集計結果と比較します。 パーセンタイルの順位付け、ピア中央値、上位10%、およびピア分布をまとめて確認します。 単一の値をターゲットとして扱わないでください。
| シグナル | 提案内容 | 推奨されるアクション |
|---|---|---|
| エージェンティック導入がピア中央値を上回る | エージェント優先ワークフローまたはマルチエージェント ワークフローを採用しているユーザーに占める割合が、比較コーホートより高くなっています。 | エージェントワークフローをサポートするイネーブルメント施策を継続し、導入率が依然として低いチームを確認します。 |
| エージェント導入がピア中央値を下回る | 企業には、エージェント優先ワークフローとマルチエージェント ワークフローの採用を拡大する余地があります。 | 導入コーホートの分布を確認し、パッシブまたはコード優先のままのチームのオンボーディングまたは有効化に優先順位を付けます。 |
| レバレッジがピア中央値を上回る | エージェント ユーザーと非エージェント ユーザー間のマージ レートの比率は、貴社ではピア コーホートよりも高くなります。 | エージェント的な活用が進んでいるチームのプラクティスを確認し、それらのプラクティスをより広範に適用できるかどうかを検討します。 |
| レバレッジがピア中央値を下回る | 自律型ユーザーと非自律型ユーザー間のマージレートの比率は、比較コーホートよりも低くなります。 | ロールアウト計画を変更する前に、チームの構成、プロジェクトの複雑さ、エージェントワークフローがどのくらい最近導入されたかを確認してください。 |
| レポート期間をまたいでランキングが向上します | 参加しているピア コーホートに対する企業の立ち位置が改善されました。 | 有効化投資を拡大する前に、継続的な導入と pull request の傾向と共に改善が見られることを確認します。 |
| 結果は利用できません | ダッシュボードがピア コーホートをすべての業界に拡張した後でも、同じ会社の規模の適格な参加ピアが十分ではありません。 アクティブ なユーザーがいない場合や、すべてのアクティブ ユーザーが既にエージェント優先またはマルチエージェント ユーザーであり、レバレッジを比較する対象となる非エージェント ユーザーがいない場合など、自身のスコアを計算できないときは、結果も利用できません。 | ピア比較が可能になるまで、利用可能な場合は、企業または組織の自社または自組織の導入状況と活用の傾向を確認します。 |
| ランキングは変わりますが、スコアは変わりません | 参加しているピア コーホートが変更されたか、ダッシュボードで前の期間とは異なるコーホートとあなたを比較していた。 | 複数の期間にわたって結果を比較する前に、ランキング行に表示されるピア コーホートを確認します。 |
業界の比較では、因果関係ではなく、関連が示されます。 チーム構成、プロジェクトの種類、エンジニアリングプラクティス、導入の成熟度の違いは、両方の指標に影響する可能性があります。 参加している同業者コホートは、レポート期間間で変更される場合もあります。
潜在的な投資収益率の確認
潜在的な投資収益率セクションでは、以前の導入フェーズとエージェント優先導入フェーズで、Copilotコスト、給与の推定パーセンテージ、および開発者ごとのプル要求を月ごとに比較します。 これらの比較は、導入の変化が出力の変化を引き起こしたという証拠ではなく、方向の関連付けとして扱います。
| シグナル | 提案内容 | 推奨されるアクション |
|---|---|---|
| エージェントファーストのユーザーは、給与総額に対する割合で見て同程度またはそれ以下のコストで、より多くのプルリクエストをマージします | エージェント優先の使用は、推定投資に対するより多くの pull request 出力に関連付けられます。 | このシグナルを、有効化投資を通知するために使用する前に、複数の期間にわたる導入の乗数と傾向と比較します。 |
| エージェント優先のユーザーは、マージするプル要求の数が少ないか、人件費に占めるコストの割合が高くなります | 作業の種類、チーム構成、または導入の成熟度の違いが、比較に影響を与える可能性があります。 | 投資収益率に関する結論を導き出す前に、コホートの分布とチーム レベルのコンテキストを確認します。 |
| 別の開発者コストを選択した後の給与率の変化 | ダッシュボードでは、使用量の変化を示すのではなく、別の補正の前提条件を使用して見積もりを再計算しています。 | 異なる期間または組織を比較する場合は、同じ補正バンドを使用します。 |
分析情報に基づいて行動する
使用状況、機能導入、言語アクティビティの傾向を使用して、有効化とロールアウトの計画をガイドします。
| 観察 | 考えられる原因 | 推奨されるアクション |
|---|---|---|
| 一部のチームでは高い導入が、他のチームでは低い | 一部のチームでは、 Copilot Chat が有効になっていないか、正しく構成されていない可能性があります。 | ライセンスの割り当てと IDE のセットアップを確認する。チームレベルのオンボーディングを提供します。 |
| 使用状況は安定しているが、エージェントの採用率は低い | 開発者は、 Copilot agent 機能を認識していない可能性があります。 | 社内デモや成功事例を共有します。 |
| DAU または受け入れ率の低下 | 構成の問題または提案の関連性の低下。 | フィードバックを推奨し、IDE と拡張機能のバージョンを確認します。 |
ヒント
ダッシュボードの傾向をアンケートや振り返りからのフィードバックと組み合わせて、 Copilotが開発者の生産性に与える影響を完全に把握することを検討してください。