Skip to content

レポートとインサイト

Braze で BrazeAI Decisioning Studio™ レポートを表示する方法について説明します。これにより、AI を活用した意思決定がキャンペーンにどのような影響を与えるかを理解できます。パフォーマンスの測定基準からデータの健全性とシステムの変更まで、これらのレポートは、結果の理解、問題のトラブルシューティング、情報に基づいた意思決定に役立ちます。

前提条件

BrazeでDecisioning Studioレポートを表示するには、以下の手順が必要だ：

  • Braze と BrazeAI Decisioning Studio™ の有効な契約がある。
  • カスタマーサクセスマネージャーに連絡して、BrazeAI Decisioning Studio™ を有効にする。
  • BrazeAI Decisioning Studio™ エージェントを保有している。

レポートの表示

BrazeでDecisioning Studioエージェントのメトリクスを表示するには、AI Decisioning > BrazeAI Decisioning Studio™ に移動し、エージェントを選択する。

BrazeAI Decisioning Studio™のレポートホーム画面には、複数のレポートカードを表示するダッシュボードが表示されている。それぞれのカードには、パフォーマンス、インサイト、診断、タイムラインなどのレポートの種類が表示され、それぞれについて簡単な説明とアイコンが表示されています。

ここでは、パフォーマンス、インサイト、診断、タイムラインなどのレポートを表示できます。詳しくは、使用可能なレポートをご覧ください。

レポート日の変更

レポートを開いた後に、カレンダードロップダウンから新しい開始日と終了日を選択することで、期間を変更できます。

BrazeAI Decisioning Studio™ の日付範囲選択ツールは、カレンダーのドロップダウンメニューで表示される。カレンダーには、レポートビューをカスタマイズするための選択可能な開始日と終了日が表示されています。

デフォルトの開始日を設定したり、常に除外する日付を選択したりすることもできます。除外日は、そのエージェントのすべてのレポートから除かれます。

日付を設定または除外するには、[設定] を選択し、デフォルトの日付を変更するか、必要に応じて日付を除外します。

BrazeAI Decisioning Studio™ で開封した設定パネルには、デフォルトの開始日を設定するオプションと、レポートから特定の日付を除外するオプションが表示されている。パネルには、[デフォルトの開始日] および [除外日] というラベルの付いた 2 つのセクションが表示されています。[除外日] には、横にチェックボックスが付いたいくつかの日付が表示されています。

利用可能なレポート

パフォーマンス

パフォーマンスレポートは、治療群（Braze由来）と1つ以上のコントロールグループ（収益など）を比較する高水準のエージェント指標を提供する。これは 2 つの異なるビュー、トレンドとドライバーツリーをサポートしています。

デフォルトでは、レポートはトレンドビューを使用します。このビューは、経時的な BrazeAI™ のパフォーマンスをコントロールグループと比較し、上昇の変化を追跡します。

パフォーマンスレポートのトレンド表示。BrazeAI™とコントロールグループのパフォーマンスを時間軸で比較した折れ線グラフを示している。グラフには、[BrazeAI™] と [コントロール] というラベルの付いた 2 本の線が表示され、y 軸には上昇、x 軸には日付が表示されています。凡例は、各グループを色で識別します。

または、[ドライバーツリー] を選択して、キー値ドライバーがターゲット指標にどのようにリンクされているかを表示すると、それらの指標間の関係をより良く理解することができます。

パフォーマンスレポートのドライバーツリービューは、主要な価値ドライバーを目標指標にマッピングした階層図を示している。図には、接続された複数のノードが表示されています。それぞれにドライバーまたは指標名が表示され、さまざまな要因が総合的なパフォーマンスにどのように寄与するかが示されます。

2 つのグループ間のパフォーマンスを比較するには、ドロップダウンを使用して必要な比較基準を選択します。詳細については、次の表を参照してください。

インサイト

インサイトは、アクションバンク内の様々な推奨オプションがどのように生成されるかを示す。例えばブロック選択などだ。二種類の異なるインサイトレポートがある。エージェント設定およびSHAP の 2 種類があります。

エージェント設定レポートは、季節的なトレンドを特定し、アクションバンクの選択肢の関連性を評価し、十分な情報に基づいて更新の意思決定を行うのに役立ちます。

エージェントの選好レポートは、特定の期間における異なる推薦オプションの選択頻度を比較した棒グラフを示している。グラフには、いくつかの色付きの棒が表示されています。それぞれの棒は、アクションバンクからのレコメンデーションのオプションを表し、y 軸は選択した時間のパーセント、x 軸はオプション名を示しています。

このレポートの詳細については、次の表を参照してください。

SHAPレポートは、シャプレー加法説明（SHAP）モデルを用いて、各特徴量や変数が推薦エージェントにどのように寄与しているかを定量化するのに役立つ。グラフの各点は 1 つの SHAP を表し、点の分布は機能の方向への影響の一般的な意味を表します。

SHAPレポートのチャートは、水平棒グラフを表示する。複数の色分けされた棒が、異なる特徴量や変数を表している。各バーは、特徴量が推薦エージェントに与える影響を示している。x軸はSHAP値、y軸は特徴量名（例：最新性、頻度、チャネル）をそれぞれ表示している。この図は、各特徴量がエージェントの予測にどのようにプラスまたはマイナスの影響を与えるかを可視化したものである。

診断

診断レポートには、アウトバウンドおよびインバウンドの 2 つのレポートタイプがあります。

アウトバウンド診断レポートには、オーディエンス全体で生成および有効化された 1 日あたりのレコメンデーションの量が表示されます。これを使用して、配信の問題を特定し、アクティベーションのスパイクまたはドロップを追跡し、メッセージが期待どおりに適切なグループに到達していることを確認します。

アウトバウンド診断レポートは、異なるオーディエンスグループ向けに生成・有効化された推奨事項の日次ボリュームをトラッキングする折れ線グラフを示している。グラフには、[生成済み] と [有効化済み] のラベルが付いた 2 本の線が表示されています。y 軸はレコメンデーションの数を表し、x 軸は日付を表しています。凡例では、各行を色で識別しています。インターフェイスには、グラフの上の期間とオーディエンスセレクションのドロップダウンフィルターが含まれます。

インバウンド診断レポートでは、BrazeAI™ へのデータフィードの健全性を監視します。各アセットのファイル数、サイズ、行数などの詳細をトラッキングする。これにより、データが想定通りに流入していることを確認し、エージェントやキャンペーンに影響が出る前に問題をトラブルシューティングできる。

ドロップダウンを使用して、平均ファイルサイズやファイル数など、さまざまなグラフ指標を選択できます。

BrazeAI™に配信されたデータ資産の、日々のファイル数と平均ファイルサイズをトラッキングする折れ線グラフを示すインバウンド診断レポート。グラフでは、ファイル数と平均ファイルサイズ (MB) というラベルの着いた 2 本の線が表示されています。y 軸は値を表し、x 軸は日付を表しています。上記のグラフは、期間とデータアセットのセレクションに関するドロップダウンフィルターです。

インバウンドレポートの各指標の詳細については、次の表を参照してください。

タイムライン

タイムラインレポートでは、パフォーマンス指標と共に、主要なイベントの視覚的な記録を提供します。これらのイベントには、エージェントの実行、設定変更、ガードレールの更新などが含まれる。注釈は、上昇グラフと専用のタイムラインタブで直接表示されるため、履歴の変更を追跡する必要なく、すぐに結果の変化について状況を確認できます。

経時的なパフォーマンス指標を示すタイムラインレポートのグラフ。エージェントの実行、設定変更、ガードレールの更新といった主要なイベントは、タイムライン上にアイコンとして表示される。グラフの下の表に、日付、タイプ、ラベル、詳細、グラフでの可視性の列を含むイベントが一覧表示されています。

2 つのグループ間のパフォーマンスを比較するには、ドロップダウンを使用して必要な比較基準を選択します。詳細については、次の表を参照してください。
Github   GitHub でこのページを編集
New Stuff!