# その順位表、稟議に載せられますか：1回測定の数字が揺れる理由 원문: https://citeangle.com/jp/research/single-run-rank-table-variance 目次 1. [1回の実行は「点」](#sec-point) 2. [公開の場での判定](#sec-canon) 3. [書面で求める五項目](#sec-checklist) 4. [私たちのやり方](#sec-us) このページが答える質問：[1回の実行で何が言えるか](#sec-point) [公開の場での判定はどうなっているか](#sec-canon) [書面で求める五項目は何か](#sec-checklist) [私たちはどう測るか](#sec-us) 公開 2026-07-17 · 執筆: [Jay Sim](https://citeangle.com/jp/methodology#measurement-lead) · CiteAngle Research(発注前検証) · 根拠基準日 2026年7月16日 · 本稿の外部数値はすべて [公開クレームレジストリ](https://citeangle.com/jp/claims)に出典・基準日つきで登録しています · 更新 2026-07-22――見出しを発注者の問いの形に整理 **週次AIレポートの順位表は、そのまま稟議に載せられる数字なのか —** 「その順位は何回測定した数字か」を確認するまでは載せられません。AIは同じ質問でも毎回ちがう 答えを返します。だから1回だけ測った順位では、実力の差なのか、たまたまなのかを分けられません。 これを点推定と言います――幅をつけずに一点だけで示した数字です(冒頭の順位表の場面は仮想の 例です)。本稿は発注前検証シリーズ第1回として、その確認手順を外部数値の根拠つきで整理します。 **要点:**1回測定の順位表は、実力差とノイズを区別できない点推定です。 稟議・検収に使う前に、その順位が何回測定した数字かの確認が要ります。 発注者が書面で求める五項目を本文に整理しました。 **このシリーズについて。**発注前検証シリーズは、AI可視性の測定・改善提案で数字が作られる 方式を一回に一つずつ分解し、発注者が契約前に書面で確認できる質問に変換する連載です。対象は業界の 報告形式であって、特定の事業者ではありません――本文中の提案・レポートの文例はすべて仮想の例であり、 引用する外部数値にはすべて原文リンクと日付を併記します。 1回測定の順位表を稟議に載せる。次の回で順番が入れ替わったとき、説明ができません。上がったのか、たまたまか。この問いに答えられない資料は、一度使うと二度目から信用されません。決裁の場に出す数字に要るのは、動いた幅が意味のある大きさかどうかを、その場で読み取れる形です。 ## 1回の実行で何が言えるか：順位表の前提 生成AIの回答は決定的ではありません。LLMの出力は標本抽出だけでも10〜34%変動するという学術測定が あります([arXiv 2601.21339](https://arxiv.org/abs/2601.21339)、2026年1月、プレプリント)。同じ質問を同じ条件で投げても、挙がるブランドも、引用される 出典も、実行ごとに変わり得ます。つまり一回の観測が言えるのは「その実行ではそう出た」ということまで です。 順位表は、その一回ずつの数字の**差の集合**です。二つのブランドの数字の差が、測定自体の揺れの 幅より小さければ、順位の入れ替わりは市場の出来事ではなく、サイコロの目です。3位から5位への後退が 「事件」なのか「想定内の揺れ」なのかは、順位表そのものからは読めません――反復回数と幅(信頼区間)が 書かれていて、初めて読めるようになります。 ## 公開の場での判定はどうなっているか この点は学術・業界誌・ツール側の三者が、それぞれ公開の場で指摘しています。すべて原文リンクつきで 挙げます。 **1. 学術分析。**単一実行のAI可視性測定は非決定性のため本質的に信頼しがたい(fundamentally unreliable)とする学術分析があり、同論文は引用シェアに5%ポイント幅の95%信頼区間を得るには プラットフォームごとに40〜150問のクエリが要ると推定しています([arXiv 2603.08924](https://arxiv.org/html/2603.08924)、 2026年、プレプリント)。数えているのは互いに異なる質問の数で、同じ質問を聞き直す回数ではありません。 **2. 検索業界誌。**検索業界の専門誌への寄稿(Search Engine Land、2026年6月10日)は、1回の 観測を点推定と見なし、反復測定と信頼区間の併記報告を推奨しています([原文](https://searchengineland.com/make-prompt-tracking-more-accurate-479708))。 **3. ツール側の公式発表。**海外大手AI可視性ツールの一社も公式ブログ(2026年7月8日)で 「1日1回」の測定方法を公式に説明しつつ、自社実験では10回の反復測定が引用シェアの日次ノイズを 約40%減らしたと報告しています([tryprofound.com](https://tryprofound.com/blog/is-once-a-day-enough))。数値の引用はここまでで、解釈は当社の文章です — 反復すると消える部分は、単発の読み取りでは「変化」として報告されてしまう、ということを、ツール側の 実験自体が示しています。 揺れの幅と、必要とされる質問数――公開研究の数字 サンプリングだけで生じる出力変動(0〜100パーセントのスケール) 出力変動 10〜34% 引用シェアに±5%ポイント幅の95%信頼区間を得るための質問数(学術推定) 学術推定 40〜150問/プラットフォーム CiteAngle パノラマ 50問/プラットフォーム――この帯の中(本文の通り) 出典: arXiv 2601.21339(変動幅)・arXiv 2603.08924(必要質問数の推定)――原文リンクは 本文に併記 · 根拠基準日 2026年7月16日 · 横棒は各パネルの最大値基準の比例(0基準線) · 数値は [公開クレームレジストリ](https://citeangle.com/jp/claims)に登録。1問を7回ずつ聞く反復はこれとは別の軸で、 実測のWilson 95%信頼区間をセルごとに併記します。 反復と幅の併記は、学術の中だけの作法ではなく、公開の場で繰り返し推奨されている報告形式です。 順位表を読む側の実務に翻訳すると、こうなります――**順位の差が信頼区間の重なりの内側にあるなら、 その入れ替わりを根拠に予算や方針を動かす材料はまだ無い。** ## 稟議・検収の前に、書面で求める五項目は何か **1. 反復回数(k)と信頼区間の幅の書面記載を求める。**順位表の各数字が何回の測定から来て いるか、幅はどれだけか。記載がなければ、まずそれを訊くところからです。 **2. 順位の差が信頼区間の重なりの内側か外側かを質問する。**重なりの内側の入れ替わりは 想定内の揺れであり、外側の変化だけが行動の根拠になります。 **3. 質問セットのバージョンと判定基準の書面化を求める。**「先月」と「今月」で質問リストが 変わっていれば、それは同じ測定の比較ではなく、別々の測定です。 **4. 再測定の条件(同一プロトコル)の明文化を求める。**同じ条件でもう一度測れることが書面で 確認できて、初めて来期の数字と比較できます。 **5. 単一の数値だけのレポートは「測定1回基準」かをまず確認する。**幅の記載がない数字は、 1回の実行の点推定である可能性をまず確かめてから読む――それがこのシリーズの出発点です。 五項目とも、数字の大小を聞いてはいません。**数字の作り方と残し方**への質問です。書面で答えられる測定は、 稟議でも検収でも同じ質問に耐えます。 ## 私たちはどう測るか(同じ基準で) 私たちは測定と実行の両方を販売しています。だからこそ、すべての測定に検証可能な記録を残します。 当社実測は同じ質問を7回反復し、適用可能な比率にWilson 95%信頼区間を併記します。 先の40〜150は質問数の推定であって、反復回数の基準ではありません。パノラマは1プラットフォームあたり 50問を投げるので、この推定の帯の中に入ります。7回の反復はその上に積み増す別の軸で、 当社は反復数の十分性を主張しません。数で押す代わりに、実測の信頼区間の幅をセルごとに出たまま載せます。 広い幅は広いまま示します。各測定セルには測定時刻・モデル・設定を記録した封印証跡が付き、納品後に ハッシュ照合で確認できます。稟議に出す数字がどこまで体重を支えられるか、書面の上で確かめてから 決められます。 1回だけの順位表が実際にどう潰れるかは、自分たちの記録で確かめてあります。当社実測(韓国市場・ 2026-07-17、美容医療9ブランドを10問・6サーフェスで観測)を1回条件で読むと、9ブランド全部が最上位バンドに 入り、サーフェス別の首位件数も全社が6/6で並びました。順位表の形はしていても、順位はどこにもありません。 同じ設計を7回に増やすと最上位バンドが分かれ、首位件数にも散らばりが出ます。ブランド名は公開しません。 公開するのはバンドの数と散らばり方で、発注側が見るべきものはそちらです。 区間の幅で言うと、1回で79.3ポイント、7回で35.4ポイント、40回で8.8ポイントです (当社の測定関数で再計算 2026-07-17)。発注書に「何回聞くか」を書く価値は、この差の分だけあります。 測定設計そのものの解説は、既発行の[「AI可視性測定の再現性――なぜ一回の 測定では足りないのか」](https://citeangle.com/jp/research/ai-visibility-measurement-reproducibility)にあります――あの稿が「なぜ反復か」という原理なら、本稿は「順位表をどう 読むか」という発注実務です。当社が公開面に掲載する主張は、出典・基準日つきで[公開クレームレジストリ](https://citeangle.com/jp/claims)から確認できます。自社ブランドの現在地は、無料 診断(1〜3クエリを6つのAIエンジンで1回ずつ試す予備観測)から 確認できます: [CiteAngle Japan](https://citeangle.com/jp/) · [測定方法](https://citeangle.com/jp/methodology) · [なぜ7回か――精度のはしご](https://citeangle.com/jp/methodology#why-7)。 発注前検証シリーズ――稟議に耐えるAI可視性測定 本稿は第1回です。シリーズはAI可視性の測定・改善提案の報告形式を一回に一つずつ 分解します――対象は業界の慣行であって特定の事業者ではなく、外部数値はすべて原文リンクと日付を 併記します。次回: 第2回――再現できないレポートを受け取ったら(書面で求める項目、公開予定)。 測定設計の原理編: [AI可視性測定の 再現性](https://citeangle.com/jp/research/ai-visibility-measurement-reproducibility)。リサーチ一覧: [CiteAngle リサーチ――シリーズ索引](https://citeangle.com/jp/research#verify-series)。 その順位表への質問を、当社にもどうぞ。 当社の答えは公開の記録にあります。反復と信頼区間の設計は測定方法のページに、公開面の数値は公開クレームレジストリに、納品画面はサンプルにあります。 稟議に載せる前に順位表の反復回数を確かめたい場合は、[お問い合わせ](https://citeangle.com/jp/contact)ください。 [測定プロトコルを読む](https://citeangle.com/jp/methodology)[公開クレームレジストリを見る](https://citeangle.com/jp/claims) ## その順位表を稟議に載せる前に 測定回数を確認しないと、1回の観測を実力の順位として扱うことになります。差がぶれの中に収まっていれば、その表を根拠に動かした予算は失われます。 幅の記録がないと、翌週に順位が入れ替わった理由を説明できません。説明できない変動は、社内での信用を減らします。