12Wの第3週に、私は1つのKPIを捨てました(新しい視点)

実際の観察:第3週の指標の落とし穴

Startup Digestの2023年の調査では、60%以上の初期スタートアップが第3週時に指標を見失う問題に直面しています。これは個別の現象ではなく、体系的な判断ミスです。『The Lean Startup』の著者であるEric Riesが提唱した「イノベーション会計」の概念によると、多くのチームは第3週までに最初のデータを蓄積しているものの、十分な読み取りフレームワークをまだ構築しておらず、不完全な指標に基づいて重大な意思決定を下してしまっています。

典型的な例は、いわゆる「偽の相関指標」です。研究によると、チームが単一の数字に過剰に集中すると、他のより重要な兆候を自然に無視してしまいます。この現象は行動経済学では「注意バイアス」と呼ばれています——人々は測定しやすい指標に注目する傾向があり、本当に重要な指標には注目しないのです。12Wの観察では、第3週が往々にしてこの問題が最も鋭く爆発するタイミングです。

背後にある原因:指標設計の体系的な欠陥

なぜ第3週に特にKPIの失効が起こりやすいのでしょうか?主な原因は「検証サイクル」と「調整コスト」の非対称性にあります。多くのスタートアップは第1週、第2週に迅速に仮説を立てて実験を開始しますが、第3週になるとこれらの仮説がすでに実行に移され、チームは実際の市場フィードバックに向き合い始めます。問題は、多くのKPIが「仮説の証明」のために設計されており、「問題発見」のためには設計されていないことです。

ハーバード・ビジネス・レビュー2022年の記事は、初期スタートアップが最も頻繁に犯す間違いの一つは「確証バイアスに駆動された指標選択」であると指摘しています——チームは自分が正しいことを証明する指標を選ぶ傾向があり、自分が間違っている可能性を示す指標は選びません。この偏りは第3週になると特に顕著になります。なぜなら、チームメンバーはすでに「埋没コスト」心理を抱え始め、初期の指標選択が誤っていたことを認めたがらないからです。

もう一つの重要な要因は「資源の希少性」と「意思決定の圧力」の交差点です。YCのパートナーであるPaul Grahamは複数の場で、初期チームの最大の敵は「間違った優先順位」であると強調しています。第3週になると、チームは通常すでに最初の波の初期資源を消費していますが、安定したキャッシュフローはまだ確立されていません。この時、間違ったKPIがチームを完全に間違った方向へ導き、残された少ない資源を消耗させる可能性があります。

実際に学んだ教訓:いつ果断に諦めるべきか

すべてのKPIを諦めるべきではありません。鍵となるのは「方向は正しいが実行が芳しくない」場合と「方向そのものが間違っている」場合を区別することです。12Wは有用な判断フレームワークを観察しています——ある指標が「自然に起こる」のではなく「追加の努力」が必要でなければ良く見えない場合、それは通常、方向が間違っているというシグナルです。

『Measure What Matters』の著者であるJohn DoerrのOKRフレームワークによると、効果的な指標は3つの条件を備えるべきです:具体的であること、測定可能であること、長期目標と直接関連していること。あるKPIがこれら3つの条件を満たせない場合、それはたとえ合理的に見えても、合格する指標ではありません。具体的な判断基準は次の通りです:チームが毎週手動で調整したりデータを「修飾」したりしなければ指標を維持できない場合、その指標自体はその意味を失います。

より深い教訓は次の通りです:KPIを諦めることは失敗ではなく、「フェイルファスト」文化の真の実践です。多くのチームは「諦める」ことを恥と見なしていますが、「間違った指標の堅持」が消費する機会コストを無視しています。データによると、初期スタートアップの最大のコストはお金ではなく、「方向調整の遅延」です。方向調整を1週間遅らせるごとに、その後の修正コストが平均15〜20%増加します。

すぐに実行できる調整:「動的な指標チェックリスト」の構築

上記の分析に基づき、12Wは各チームに第3週時に「指標ヘルスチェック」を実施することを推奨しています。以下は具体的なチェックプロセスです:まず、現在追跡しているすべての指標をリストアップし、各指標の「意思決定の根拠」を明記します——つまり、その指標が良くなった場合や悪くなった場合、あなたは何の行動を取るかということです。この質問に答えられない場合、その指標自体が余分であることを示しています。

次に「逆方向テスト」を実施します:各指標に対して一つの質問をします——「この指標が良さそうに見えるが、他のすべての兆候が製品の退潮を示している場合、あなたは指標を信じますか、それとも他の兆候を信じますか?」答えが「指標を信じる」であれば、あなたはすでに指標崇拝に陥っています。最後に、すべての指標を「ノーススターメトリクス」と「二次的指標」に分類し、「ノーススターメトリクス」の数を厳格に制限します——最大2つまでです。

この調整には追加のツールは一切必要なく、チームが第3週終了時に2〜3時間かけて構造的な振り返りを行うだけで済みます。重点は一度に完璧な指標を見つけることではなく、「既存の指標を定期的に疑う」組織習慣を確立することにあります。12Wの観察によると、継続的に成長できるチームとは、決して間違えないチームではなく、指標の失効を迅速に特定し、認められるチームです。

「最も重要なのは、何を測定するかではなく、何を測定することを拒否するかです。」——『The One Metric That Matters』著者 クリス・ルコント