> For the complete documentation index, see [llms.txt](https://docs.wicle.io/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://docs.wicle.io/action/experiment/delivery.md).

# 配信と効果測定

施策の配信を管理し、`配信前チェック` と `配信状況` タブで確認・測定します。

## 施策のステータス <a href="#status" id="status"></a>

施策は次のステータスを持ちます。

| ステータス | 説明                               |
| ----- | -------------------------------- |
| 下書き   | 作成・編集中の状態。まだ配信されていません            |
| 予約中   | 開始日時待ちの配信予約です                    |
| 配信中   | URL条件に一致するページでA/Bテストが配信されている状態です |
| 一時停止  | 配信を止めている状態。再開できます                |
| 終了    | A/B配信が終了した状態です。まだバリアントを採用していません  |
| 採用済み  | 選んだトリートメントを100%で継続配信している状態です     |
| アーカイブ | 保管した状態です。解除するとアーカイブ前のステータスに戻ります  |

### ステータスごとの編集可否 <a href="#editability" id="editability"></a>

| ステータス | 施策内容の編集 | スケジュールの編集 | 施策名・説明の編集 |
| ----- | ------- | --------- | --------- |
| 下書き   | ○       | ○         | ○         |
| 予約中   | ×       | ○         | ○         |
| 配信中   | ×       | ○         | ○         |
| 一時停止  | ○       | ×         | ○         |
| 終了    | ×       | ×         | ○         |
| 採用済み  | ×       | ×         | ○         |
| アーカイブ | ×       | ×         | ○         |

{% hint style="info" %}
施策名と説明は、ヘッダーの `基本情報` ダイアログから、上記のすべてのステータスで編集できます。予約中・配信中はスケジュールのみ編集できます。開始・終了の反映には数分かかることがあります。一時停止中はスケジュールを編集できません。終了・採用済み・アーカイブでは施策内容を編集できません。
{% endhint %}

## 配信を開始・停止する <a href="#operations" id="operations"></a>

編集画面のヘッダーから、ステータスに応じた操作ができます。

| 操作        | 説明                                                                                   |
| --------- | ------------------------------------------------------------------------------------ |
| 保存        | 編集内容を保存します。未保存の変更がある場合は警告が表示されます                                                     |
| スケジュールを更新 | 予約中・配信中の施策で、スケジュールのみ更新します                                                            |
| 配信開始      | 下書きの施策の配信を開始します。設定したURL条件に一致するページでコードが実行されます                                         |
| 配信予約      | 未来の開始日時が設定されているとき、`配信開始` の代わりに表示されます。開始日時になると配信が始まります                                |
| 今すぐ開始     | 予約中の施策を、予約した開始日時を待たずに配信開始します                                                         |
| 予約を取り消す   | 予約中の施策を下書きに戻します                                                                      |
| 一時停止      | 配信中の施策を止めます。再開するまでコードは実行されません                                                        |
| 再開        | 一時停止中の施策の配信を再開します。終了日時を過ぎている場合は終了になります                                               |
| 施策を終了     | 予約中・配信中・一時停止・採用済みの施策を終了します。終了後は編集や配信の再開ができません                                        |
| 採用する      | 配信中または終了の施策で、選んだトリートメントを100%配信し続けます。トリートメントが複数ある場合は、採用する案を選択します。A/Bテストは終了し、採用済みになります |
| 変更履歴      | 施策の変更履歴を確認します                                                                        |
| アーカイブ     | 施策を保管します。下書き・予約中・一時停止・終了から実行できます（配信中・採用済みからは直接アーカイブできません）                            |
| アーカイブ解除   | アーカイブを解除し、アーカイブ前のステータスに戻します                                                          |
| 複製        | 設定とコードをコピーして、新しい下書きの施策を作成します                                                         |
| 削除        | 下書き・一時停止・アーカイブの施策を削除します。関連データ・アップロード画像もすべて削除されます                                     |

配信操作（配信開始・配信予約・一時停止・再開・今すぐ開始・施策を終了・採用する）はヘッダーのボタンから行います。アーカイブ・複製・削除はメニューから操作します。各操作の実行前には確認画面が表示されます。

{% hint style="warning" %}
`採用する` を実行すると、スケジュール設定はクリアされます。採用済みの施策は終了日時による自動終了の対象外になります。
{% endhint %}

{% hint style="info" %}
終了日時を過ぎた施策は配信開始できません。また、配信中・採用済みの施策をアーカイブするには、先に一時停止または施策の終了を行ってください。アーカイブ解除後も、終了・採用済みだった施策は配信を再開できません。
{% endhint %}

{% hint style="danger" %}
削除した施策は元に戻せません。関連するデータとアップロード画像もすべて削除されます。
{% endhint %}

## 配信前チェック <a href="#pre-check" id="pre-check"></a>

`配信前チェック` タブでは、配信開始前に設定の抜け漏れや品質を確認できます。

### 設定チェックリスト <a href="#checklist" id="checklist"></a>

| 項目             | 必須 | 確認内容の例                              |
| -------------- | -- | ----------------------------------- |
| スケジュール         | 任意 | 即時開始 / 終了なし、開始・終了の日時。終了が開始以前の場合はエラー |
| コンバージョン設定      | 任意 | 未設定（効果測定なし） / 設定件数                  |
| バリアント設定        | 必須 | 合計が100%になっているか                      |
| 配信デバイス         | 任意 | 全デバイス / PC / モバイル                   |
| URL条件          | 任意 | 未設定（全URLで配信） / 設定件数                 |
| ディメンション条件      | 任意 | 未設定 / 設定件数                          |
| フリークエンシーコントロール | 任意 | 制限なし / 1回のみ / セッション1回 / カスタム        |

{% hint style="warning" %}
開始日時と終了日時が逆転している場合（終了が開始以前）、スケジュールはエラーとなり、配信を開始できません。
{% endhint %}

{% hint style="info" %}
配信操作はヘッダーのボタンから行えます。チェックリストは確認用で、ここから配信は開始しません。
{% endhint %}

### AIによる施策レビュー <a href="#ai-review" id="ai-review"></a>

`施策をAIにレビューしてもらう` をクリックすると、コード品質とビジネスフィットをAIが点検します（最大1分程度）。

* 指摘は警告のみで、配信自体はブロックしません
* 各指摘には、タイトル・推奨対応・重要度（高・中・低）が表示されます
* カテゴリ（ランタイム・タイポ・HTML/CSS・URL・文言・ビジネス適合・セキュリティ・その他）がバッジで表示されます
* 種別バッジで `必須対応`（コード検証）と `AI提案` を区別できます
* 該当コードがある場合は、対象バリアント（パターン名）・フィールド（HTML/CSS/JavaScript）とコード抜粋が表示されます
* 各指摘の `チャットで修正` をクリックすると、AI編集チャットに指摘内容が入力された状態で開きます。下書きまたは一時停止の施策でのみ利用できます
* コードを変更したあとは「コードが変更されています。最新のコードで再レビューを推奨します。」と表示されます。セクション右上の再レビューボタンから、最新コードで再実行できます
* 最終レビュー日時が表示されます

{% hint style="info" %}
施策を保存してからレビューできます。ビジネスサマリーが未設定の場合、ビジネスフィットは未評価になります。Wicle AIが無効、または配信済み・アーカイブの施策では `チャットで修正` は利用できません。
{% endhint %}

### 配信規模感とマッチURL <a href="#reach" id="reach"></a>

`配信規模感を計算する` をクリックすると、直近7日でURL条件にマッチするvisitor数の推定を確認できます。

| 項目             | 説明                               |
| -------------- | -------------------------------- |
| リーチ            | URL条件にマッチするvisitor数の推定           |
| マッチURL数        | マッチしたページ数                        |
| マッチしたURL（上位5件） | PV順のURL一覧。ブラウザで開く、またはプレビュー接続できます |

{% hint style="warning" %}
配信規模感の計算では、ディメンション条件・フリークエンシーコントロールは加味されません。また、計算にはクエリ実行が伴うため、明示的に操作したときのみ実行されます。
{% endhint %}

## 効果測定の見方 <a href="#result" id="result"></a>

`配信状況` タブでは、配信実績と効果測定の結果を確認できます。施策を保存すると表示されます。

### 配信実績 <a href="#delivery-stats" id="delivery-stats"></a>

バリアント別に、配信状況とコンバージョンの実績を一覧で確認できます。CV列のみ、効果測定期間（配信開始〜終了翌日）で集計されます。

| 項目             | 説明                                              |
| -------------- | ----------------------------------------------- |
| 配信UU           | 施策が表示されたユーザー数。数値をクリックするとユーザー一覧を確認できます           |
| クリックUU / クリック率 | クリック操作を行ったユーザー数とその割合。トリートメント行のみクリックでユーザー一覧を開けます |
| CV UU / CVR    | コンバージョンに至ったユーザー数とその割合                           |
| リフト率           | コントロールに対するCVRの改善幅                               |
| エラー            | 施策の実行中に発生したエラー数。数値をクリックするとエラー詳細を確認できます          |
| 最終配信           | 最後に施策が表示された日時                                   |

トリートメント行の `操作内訳` を開くと、クリック・クローズの操作UUを要素別に確認できます。コントロール行には操作内訳は表示されません。

バリアント割当前など、施策全体に紐づかないエラーがある場合は、テーブル上部に `施策全体のエラー` として表示されます。

`日次配信UU推移` では、バリアント別の日次UUをグラフで確認できます。

### 効果測定 <a href="#evaluation" id="evaluation"></a>

設定したコンバージョンをもとに、バリアント間の効果を統計的に比較します。コンバージョンを複数設定している場合は、上部の切り替えで比較対象を選べます。

**判定カード**

現在の状況に応じて、次のいずれかの判定が表示されます。`暫定` バッジが付く判定は、統計的に確定する前の参考情報です。トリートメントが複数ある場合は、代表案をもとに判定が表示され、有意な改善が見られた案には `〇〇 を採用` ボタンが表示されます。

| 判定              | 意味                                                                  | 推奨アクション           |
| --------------- | ------------------------------------------------------------------- | ----------------- |
| 改善（有意）          | トリートメントがコントロールより有意に改善している                                           | トリートメントを採用してテスト終了 |
| 悪化（有意）          | トリートメントがコントロールより有意に悪化している。複数案の場合は「いずれの案もコントロールより有意に悪化」と表示されることがあります | トリートメントを却下してテスト終了 |
| データ蓄積中          | 配信が少なく、まだ傾向も判断できない                                                  | 配信が蓄積されるまで継続      |
| 優勢の傾向（暫定）       | どちらかが優勢な傾向だが、まだ確定していない                                              | 確定まで継続観察          |
| 効果方向が定まりません（暫定） | 優劣の傾向がまだ見えない                                                        | 継続観察              |
| 有意な差なし          | サンプルは十分だが、有意な差がない                                                   | コントロールと同等の効果      |

「データ蓄積中」「優勢の傾向」「効果方向が定まりません」では、判定確定に必要なサンプル数に対する進捗もあわせて表示されます。

施策が終了している場合は「配信は終了しています。必要ならバリアントを採用できます。」と表示されます。採用済みの場合は「採用済みです。」と表示されます。終了・採用済み後は、判定用の集計は翌日までで閉じられ、それ以降の配信は配信実績のみに反映されます。

**バリアント比較表**

トリートメントが複数ある場合、各案ごとのCVR・リフト・信頼区間・p値（raw p / Holm補正p）・判定を一覧で確認できます。代表案には `代表` バッジが付きます。

**日次CVR推移**

バリアント別の日次CVRをグラフで確認できます。

**統計的有意性**

`統計的有意性（根拠データ）` を開くと、判定の根拠となる指標を確認できます（トリートメントが1案の場合に表示されます）。

| 指標      | 説明                                  |
| ------- | ----------------------------------- |
| 信頼水準    | 判定の確からしさ（例: 95.0%）                  |
| リフト     | コントロールに対するCVRの改善幅。`±` で信頼区間の幅を併記します |
| p値      | 差が偶然である確率。小さいほど差が確かといえます            |
| 信頼区間    | リフトが収まると考えられる範囲。チャートで可視化されます        |
| サンプルサイズ | 現在のサンプル数と、判定に必要なサンプル数               |

{% hint style="info" %}
配信後の内容・配分変更は補正されません。比較案が増えると、既存案の Holm 補正後判定も変わり得ます。
{% endhint %}

{% hint style="warning" %}
**SRM（Sample Ratio Mismatch）の警告**: 設定した配信比率と実際の配信数に大きな偏りが検出されると、警告が表示されます。この場合、テスト結果の信頼性が低下しているため、計測タグの設置状況を確認してください。配信後の配分変更や履歴上限により診断できない場合は、`SRM 診断不能` と表示され、比較結果の表示は継続されます。
{% endhint %}


---

# Agent Instructions
This documentation is published with GitBook. GitBook is the documentation platform designed so that both humans and AI agents can read, navigate, and reason over technical content effectively. Learn more at gitbook.com.

## Querying This Documentation
If you need additional information that is not directly available in this page, you can query the documentation dynamically by asking a question.

Perform an HTTP GET request on the current page URL with the `ask` query parameter, and the optional `goal` query parameter:

```
GET https://docs.wicle.io/action/experiment/delivery.md?ask=<question>&goal=<endgoal>
```

`ask` is the immediate question: it should be specific, self-contained, and written in natural language.
`goal` is optional and describes the broader end goal you are ultimately trying to accomplish on behalf of the user. GitBook uses it to tailor the answer towards what is most useful for that goal.

The response will contain a direct answer to the question and relevant excerpts and sources from the documentation.

Use this mechanism when the answer is not explicitly present in the current page, you need clarification or additional context, or you want to retrieve related documentation sections.