アウトカムを最もよく予測するカットオフをROC曲線分析で見極めて、アウトカムを予測する回帰分析を行うことの是非


医療や疫学研究において、検査値のような連続データを「異常/正常」に区切るカットオフ値の設定はよく行われる。このカットオフ値を決定する強力な手法がROC曲線分析である。しかし、「ROC分析で最適化したカットオフ値を用いて二値化し、その結果をさらに回帰分析で使う」という一連の手順は、統計学的に見て本当に適切なのであろうか。本記事では、この一般的な手法のメリットとデメリット、そしてより厳密なデータ分析の進め方について、初心者向けに解説する。

>>もう統計で悩むのは終わりにしませんか? 

↑1万人以上の医療従事者が購読中

目次

カットオフ値を決めるといえばROC曲線分析

医療や研究の分野で、「ある検査の値がどれくらい高ければ病気である(アウトカムがある)と判断すべきか」を決める際、ROC曲線分析(Receiver Operating Characteristic Curve Analysis)が非常によく使われる。

ROC曲線は、検査結果をある値(カットオフ値)で区切ったときの感度(真の陽性率)と特異度(真の陰性率)の関係を図示するもので、この曲線の下の面積(AUC: Area Under the Curve)が大きいほど、その検査がアウトカムを予測する能力が高いとされる。

そして、特定の目的(例えば、「感度を最も高く保ちつつ特異度も確保したい」など)に応じて、感度と特異度のバランスが最も良い点、すなわち「アウトカムを最もよく予測する」と考えられる値が最適なカットオフ値として選ばれる。よく使われるのは、「感度+特異度−1」(Youden指数)が最大になる点である。

ただし、Youden指数が最大の点は、見逃し(偽陰性)と誤報(偽陽性)を同じ重さで扱った場合の「最も良い分け方」にすぎない。がん検診のように見逃しの害が大きい場面では感度を優先した値が、確定診断前の侵襲的な検査につなげる場面では特異度を優先した値が、それぞれ適切になる。「最もよく予測する」は、あくまで一つの前提のもとでの最適だと理解しておきたい。


連続データのカットオフ値をROC曲線分析で決めて良いか

ROC曲線分析は、検査値のような連続データ(例:血糖値、ホルモン濃度など)を、「陽性/陰性」や「高値/低値」といった二値のカテゴリデータに変換するためのカットオフ値を決定する強力な手法である。

例えば、

  1. 連続データであるAという検査値を用意する。
  2. ROC曲線分析を行い、「病気(アウトカム)」の有無を最もよく区別できるAのカットオフ値 $C$ を見つける。
  3. このカットオフ値 $C$ を用いて、「A $\ge C$ なら高値(陽性)」、「A $< C$ なら低値(陰性)」という二値変数を作る。
  4. この新しく作った二値変数を説明変数として、アウトカム(例:病気の有無)を予測するロジスティック回帰分析を行う。

このような手順は、特に臨床現場での使いやすさから、頻繁に行われている。


>>もう統計で悩むのは終わりにしませんか? 

↑1万人以上の医療従事者が購読中

連続データのカットオフ値をROC曲線分析で決めない方が良い理由

しかし、統計学的には、上記の手順、特に「ROC曲線分析で決めたカットオフ値を使って二値化したデータを、同じアウトカムの予測に使う回帰分析」には、いくつかの問題点がある。

1. 情報の損失(Information Loss)

連続データをカットオフ値で二値化すると、本来持っていたデータの詳細な情報が失われる。例えば、カットオフ値を100と設定した場合、検査値が101の人も、200の人も、さらには500の人も、すべて「陽性」と分類される。これにより、101という低リスクの陽性者と、500という高リスクの陽性者の間に存在するリスクの差が無視されてしまう。これは、分析に利用できる情報量を減らしてしまい、統計的な検出力(効果を見つける能力)を低下させる。

2. データドリブンなカットオフ値の利用(Data-Driven Cutoff Bias)

ROC曲線分析は、手持ちのデータセットを最もよく区別できる点を選び出す。この「最も良い点」は、そのデータセットの偶然のノイズや特徴を反映している可能性が高く、他の新しいデータセット(外部検証)に適用した際に、同じように最適な予測力を発揮するとは限らない。これを過剰適合(Overfitting)と呼ぶ。

3. $P$値の歪み(Distortion of $P$-values)

ROC曲線分析でカットオフ値を決め、その結果を使って回帰分析を行うと、分析手順が二重になってしまう。同じデータで「最適な分類」を探し、その結果を「予測力の検定」に使うため、$P$値が実際よりも小さく出やすくなる(統計的に有意になりやすい)という問題が生じる。

これは、的を射たあとで矢の周りに的を描くようなものである。Altmanらは、データを見ながら「最も有意になるカットオフ値」を選ぶと、本当は検査値とアウトカムに関係がなくても、有意水準5%のつもりでも「有意」になる確率(第1種の過誤)が大きく膨らむことを示している(Altman DG, et al. J Natl Cancer Inst. 1994;86:829-835)。どのくらい膨らむのか、Rの簡単なシミュレーションで確かめてみよう。

検査値 x とアウトカム y がまったく関係がないデータを2,000回作り、(1) 連続のまま、(2) 中央値で二値化、(3) Youden指数が最大の点で二値化、の3通りでロジスティック回帰を行って、$P<0.05$ になった割合を数える。

# ROCで決めたカットオフで二値化して検定すると、P値はどれくらい歪むか
# 検査値 x とアウトカム y は「まったく関係がない」データを繰り返し作り、
# P < 0.05 になった割合(=本当は関係がないのに「有意」になる割合)を数える

set.seed(2026)

sim_once <- function(n, prev = 0.3) {
  dat <- data.frame(x = rnorm(n),               # 検査値
                    y = rbinom(n, 1, prev))     # アウトカム(xとは無関係)

  # (1) 連続のまま回帰分析
  p_cont <- summary(glm(y ~ x, family = binomial, data = dat))$coefficients["x", 4]

  # (2) 中央値で二値化(アウトカムを見ずに決めたカットオフ)
  dat$high_med <- as.integer(dat$x >= median(dat$x))
  p_med <- summary(glm(y ~ high_med, family = binomial, data = dat))$coefficients["high_med", 4]

  # (3) Youden指数(感度+特異度−1)が最大のカットオフで二値化
  #     「x が高いほど病気」「x が低いほど病気」のどちらの向きも探す
  cand <- sort(unique(dat$x))[-1]
  youden <- sapply(cand, function(cc) {
    pos <- dat$x >= cc
    mean(pos[dat$y == 1]) + mean(!pos[dat$y == 0]) - 1
  })
  cut_youden <- cand[which.max(abs(youden))]
  dat$high_youden <- as.integer(dat$x >= cut_youden)
  p_youden <- summary(glm(y ~ high_youden, family = binomial, data = dat))$coefficients["high_youden", 4]

  c(連続のまま = p_cont, 中央値で二値化 = p_med, Youden最大点で二値化 = p_youden) < 0.05
}

nsim <- 2000
for (n in c(100, 300)) {
  res <- replicate(nsim, sim_once(n))
  cat("n =", n, "\n")
  print(round(rowMeans(res), 3))
}

結果は次のとおりである(R 4.6.1)。

n = 100 
          連続のまま       中央値で二値化 Youden最大点で二値化 
               0.037                0.038                0.322 
n = 300 
          連続のまま       中央値で二値化 Youden最大点で二値化 
               0.053                0.051                0.412 

連続のまま、あるいはデータを見ずに決めた中央値で区切った場合は、「有意」になる割合は5%前後で、有意水準のとおりである。ところが、Youden指数が最大の点で区切ると、本当は関係がないのに32%(n=100)〜41%(n=300)が「有意」になった。データを見てカットオフを選ぶこと自体が、$P$値を小さくしてしまうのである。サンプル数を増やしても、この歪みは解消しない。

カットオフ値そのものも、データが変われば大きく動く。その揺れの大きさは、ROC曲線における最適なカットオフ値のブートストラップ信頼区間を理解するで紹介したブートストラップ信頼区間で確かめることができる。


連続データのカットオフ値をROC曲線分析で決めるメリットとデメリット

項目メリット (利点)デメリット (欠点)
臨床・実務✅ 解釈しやすい: 「この値以上なら危険」と単純化でき、臨床現場や患者への説明が容易である。❌ 情報が失われる: 連続データの詳細な情報(例:数値の増減の度合い)が失われる。
統計➖ 統計的なメリットは乏しい: 非線形な関係があっても、二値化は曲線を1段の階段に置き換えるだけで、解決にはならない。非線形な関係には制限付き3次スプラインなどで対応する。❌ 過剰適合のリスク: 手持ちのデータに最適化しすぎてしまい、他のデータへの汎用性が低くなる。
実用性✅ ガイドライン作成: 検査や治療の基準として具体的な数値(閾値)を設ける際の根拠の一つになる(実際の基準は、見逃しと誤報の重みや別のデータでの検証もふまえて決められる)。❌ バイアス(偏り): $P$値が歪み、真の効果よりも大きく見えてしまう可能性がある。

どうすればよいのか

統計学的な厳密性と、臨床的な実用性のバランスを考慮すると、以下の方法が推奨される。

1. 連続データをそのまま回帰分析に使う

特別な理由がない限り、予測変数(検査値など)は連続データ(元のスケール)のまま、ロジスティック回帰分析やCox比例ハザードモデルといった回帰分析に投入すべきである。これにより、データの情報損失を防ぎ、より正確なアウトカムの予測(例:ロジスティック回帰なら、検査値が1単位上がるごとにアウトカムのオッズが何倍になるか。Cox比例ハザードモデルならハザードが何倍になるか)が可能になる。

なお、連続データのまま扱う場合も、検査値とアウトカムの関係が直線的とは限らない。U字型やJ字型の関係が疑われるときは、制限付き3次スプラインで関係の形を確かめるとよい。

2. カットオフ値は統計的厳密性とは別の目的で利用する

ROC曲線分析でカットオフ値を決めるのは、統計的な予測モデルを構築するためではなく、臨床的なガイドラインやスクリーニング基準を設けるためと割り切るのが賢明である。

推奨されるアプローチ

  1. 予測モデル構築: 連続データは元のまま回帰分析に使い、正確な予測モデルを作る。
  2. 臨床判断基準: ROC分析や過去の知見に基づき、現場で「治療介入を開始すべきか」などの判断基準としてカットオフ値を用いる。

3. 外部検証を行う

もしROC分析で決めたカットオフ値を使うなら、その有効性を別の独立したデータセット(外部検証)で検証することが不可欠である。


まとめ

ROC曲線分析は、連続データから最適な二値分類の閾値(カットオフ値)を見つけるための非常に有用なツールである。

しかし、そのカットオフ値を同じデータで決定し、その結果を使って回帰分析を行うと、情報損失や過剰適合、$P$値の歪みといった統計的な問題が生じ、結果の解釈に誤解を招く可能性がある。

最も重要な原則は、「情報は最大限に利用する」ことである。

特別な理由がない限り、連続データは連続データのまま回帰分析に利用し、ROC分析は臨床現場で使いやすい判断基準を設定する目的で利用するのが、統計的にも実用的にもバランスの取れたアプローチである。


おすすめ書籍

誰も教えてくれなかった 医療統計の使い分け〜迷いやすい解析手法の選び方が,Rで実感しながらわかる!

よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!

>>もう統計で悩むのは終わりにしませんか?

医療統計の教本を無料で差し上げます

↑1万人以上の医療従事者が購読中

この記事を書いた人

医師、医学博士(専門は疫学および統計学)。10年以上の研究歴を有し、筆頭著者として10本の英文原著論文を執筆した実績を持つ。現在、外資系製薬企業にて15年以上にわたり、臨床開発やデータ解析、承認審査、薬価交渉戦略といった実務の最前線に従事。

「統計に悩むあなたを救いたい」をコンセプトに、ブログやYouTube、SNSを通じて、医療従事者や研究者向けに「実務直結の統計ノウハウ」を配信。

学術的な厳密さと、製薬業界での高度な実務経験を融合させた独自の視点から、ブラックボックス化しない統計解析の普及を目指す。個人サイト(https://toukeier.net)では、統計解析の個別相談(主にRを使用)や、統計解析を助けるWebアプリを提供している。

運営:株式会社データシード

コメント

コメントする

目次