各効果推定値にその相対的重要性の乗数を掛けたものを、重要性調整効果推定値（Importance-adjusted effect estimate）と呼びます。

シナリオの重要性調整効果推定値（患者1000人あたりの全原因死亡に相当するイベントの単位で）は、以下のようになります。

 
重要性調整効果推定値のそれぞれの点推定値を合計すると、正味の効果の点推定値（Net effect estimate）が得られます（この例では34.5）。

統計式（原著論文に記載）により、正味の効果の95%信頼区間も計算が可能で、本シナリオの場合の正味の効果は、34.5 (95%CI: -333 ～ +402）です。
これは「不精確さの分類」としては、possible net harmですが、論文にも記載されているように、”正味の利益の閾値＝０”として利益と害のバランスを評価していることに注意が必要です。

また、正味の効果推定値のオンライン計算ツールも利用可能です。
https://computablepublishing.us/net-effect/

 

４つのアウトカムの絶対効果推定値を95%CIを含めて入力し、相対的重要性を乗じて得られた正味の効果の推定値が図１です。
表中の”Importance Multiplier”が相対的重要性で、この推定値に関しても、”possible net harm”と表示されています。

図１：


 

4つのアウトカムの重要性調整絶対効果と、併合した正味の効果推定値をプロットしたものが以下の図２です。

図２

 
***つづき（step4）
次回は、アウトカム全般にわたる正味の効果推定値の精確さ（precision）の分類です。

 

シナリオでは、ステップ１において、併合される重大アウトカムを４つ決定しました。
各アウトカムに関するエビデンスとその確実性を要約したものが以下です。

完全コンテキスト化アプローチ（Alper）の第2ステップは、各アウトカムの相対的重要性を決定することです。
（Alper BS, Oettgen P, Kunnamo I, et al. Defining certainty of net benefit: a GRADE concept paper. BMJ Open 2019;9:e027445. doi:10.1136/bmjopen-2018-027445）

切除可能な口腔がん患者の術前化学療法による全原因死亡を参照単位（＝１）として、他の３つのアウトカムの重要性を決定します（ここでは、アウトカムの重要性の質的９ポイント評価のスコアは関係ないです）。
相対的重要性は以前は「価値観や選好（values and preferences）」と呼ばれていたものですが、例えば決断分析の効用値のように、不効用値（disutility = [1- utility]）を使って、相対的重要性に変換できます。

相対的重要性や不効用値に関する詳細は、原著あるいは、GRADE3版の2.4-2.1(p146)を参照ください。
（当然ながら、GRADE3版で解説している完全コンテキスト化アプローチは、今回説明している手法とは異なっています。Hultcrantz M, et al. The GRADE Working Group clarifies the construct of certainty of evidence. JCE 2017）

相対的重要性は、単一の変換係数（例、0.7）というよりは、”ある範囲”というのが現実的ですが、この点は後のステップ６で感度分析することになります。
いずれにしても、このステップ２（各アウトカムの相対的重要性の決定）では利害関係者の意見を反映させる必要があります。

全原因死亡が参照単位とみなされ、例えば、患者が局所再発と遠隔転移の重要性を全原因死亡の0.5倍、重篤有害事象を0.7倍重要視するという仮定から始めてみます。

 
***つづき（step3）

 

パネルがピックアップしたアウトカムは8個ですが、診療ガイドラインに必要なアウトカムの選択（完全コンテキスト化アプローチ）には３つの原則があります。

1. 推奨の決定に重大なもの（7～９点）を選出する（非重要[１～３点]、重要だが非重大[４～６点]は除外）。
2. 統合のためのアウトカムは互いに独立していて重複しない（相関なし）（効果推定値の重複カウントを回避するためであり、例えば、複合アウトカム[総死亡]とそのアウトカムの一つ以上のコンポーネント[心血管死]の両方を含めることはできない。しかし、現実的には完全に独立していることは稀であり、そのために感度分析を実施）。
3. アウトカムの数は最大７個まで選出する（重大性の低いアウトカムによる正味の効果推定値への希釈的影響を回避するため）。

 
以上から最終的に、利害関係者を含めたパネルは併合するアウトカムとして、全原因死亡、局所再発、遠隔転移、重篤有害事象と決定したというシナリオとします。
これが、完全コンテキスト化アプローチの第一ステップです。

 
***つづき（step2）

 

歯科口腔癌診療ガイドライングループのメンバーからの依頼利用例は、同ガイドライン2019版のSR1でした。
今後の解説では、一部のデータや解釈には仮想的なものが含まれていることに注意してください。

CQ:切除可能で外科治療を予定している症例に対して術前療法を行なうべきか？
> P:切除可能な口腔がん患者
> I:術前化学療法あり
> C:術前化学療法なし
> O：（術後アウトカムとして）：　

歯科口腔癌診療ガイドライン2019の本CQに関するPICの適格基準の詳細を私は知りませんので、具体的には以下のものとして進めます。
***********************
P＝切除可能な進展例（Stage２～３以上）
I＝術前化学療法は、シスプラチンやフルオロウラシルを中心とした多剤併用療法で、２～３サイクル
C＝術前化学療法なし
***********************

アウトカム（O）について、パネル（SRチームや利害関係者を含む）は、最初に以下のように8個選出したと仮定します。

１．全原因死亡（OS）
２．口腔癌そのものによる死亡
３．局所再発
４．遠隔転移
５．発熱性好中球減少
６．QOL
７．重篤有害事象（Grade 3以上）
８．口腔機能

＠＠＠．これらのアウトカム（#7以外）は口腔癌診療ガイドライン2019に記載されているものから選択しました（相原）

***つづき

歯科口腔癌診療ガイドライングループのメンバーからGRADEの「完全コンテキスト化アプローチ」を解説してほしいという依頼がありましたので、口腔がん診療ガイドライン2019の例（一部のデータは仮想）を使って、推奨作成までのプロセスを解説したいと思います。

CQ:切除可能で外科治療を予定している患者に対して術前療法を行なうべきか？

P:切除可能な口腔がん患者
I:術前化学療法あり
C:術前化学療法なし
O：（術後アウトカムとして）：

本CQに関して、アウトカムを設定することになります。

 

偶然にも、複数のガイドライン作成パネルから、RCTとNRSの統合に関する問い合わせをいただいた。

両者の統合には保守的なスタンスが良いかと思いますが・・・
以下を参照してほしいです。

EBMを超えてー診療ガイドラインの動向や新しい潮流（GRADE）を中心として_相原.pdf

同じような質問がでてくる可能性があるので、（FBFのボードでコメントした内容を、健忘録として）自分のブログでも紹介しておきます。

■質問：
推奨を作成する際の、複数の重大なアウトカムの価値観（相対的重要性）を２倍、あるいは５倍など設定するのは・・・なにか決まりがあるのか？

■回答：GRADEの基本方針：

(臨床的に常識な範囲であれば)、1.5倍でも、3倍でも、5倍でもなんでもよいのです。　(^^;
要するに、重大なアウトカムのいくつかで効果の方向が異なる場合の感度分析ですから。

単純に２～３個のアウトカム（推奨に必要なcritical outcomes）があると想定して考えると以下です
(注：マイナスがbeneficialで、プラスはharmfulです)。

 
●シナリオ１：死亡が20増加(= +20)/1000、臨床回復30増加 (= -30)/1000
この場合、差し引き（単純計算では）20-30 = -10/1000　で、net benefitとなり「推奨する」の方向性です。
ところが、死亡アウトカムの価値観を臨床回復の2倍と想定すると、20*2 – 30 = +10/1000で、net harmとなり「推奨しない」の方向性となります。
また、1.5倍ならば正味の利益はゼロとなります。

なので、シナリオ１の場合は、価値観の設定でアウトカム全般にわたる効果は非常にばらつき、「推奨はできないだろう、そもそも死亡が20/1000自体から推奨できないだろう」、というような判断過程と思います。

 
●シナリオ２：死亡が10増加（= +10)、臨床回復100増加（= -100)/1000、重篤有害事象 50減（= -50)/1000
この場合、単純計算では、10-100-50 = -140/1000で、net benefitです。
死亡アウトカムを5倍の価値観と設定しても、この正味の利益効果は相殺されません。
なので、シナリオ２の場合には、「推奨」となります。

この辺の価値観としての効用値設定は、パネルが判断することになりますが・・・・

以上は、単純な点推定値の差し引きで、全般の点推定値を表示しましたが、実際は、アウトカム全般の95%CIを参考にnet estimateの不確実性（特にimprecision）を評価することになります。

***********
このような内容は、なんどかブログでも説明していますし、GRADE３版の2章でも同じようなことを記載しています。
http://aihara.la.coocan.jp/?p=11165
http://aihara.la.coocan.jp/?p=11045

ブログで説明している以下のサイトでも算出可能です。
https://bmjopen.bmj.com/content/9/6/e027445.long

Guidelines rarely used GRADE and applied methods inconsistently: a methodological study of Australian guidelines
DOI:https://doi.org/10.1016/j.jclinepi.2020.10.017

論文の内容は以下です。
******************************
豪州では国家保健医療研究評議会が診療ガイドライン作成においてGRADEを使用することを提唱している。

●目的：オーストラリアの診療ガイドライン（2011～2018）についてGRADEが適切に利用されているかを調査した。

●方法：GRADEプロセスをGRADE compliance score（7つの基準とサブ項目：全17項目）で評価し、AGREE-IIのドメイン３（Rigour of development Score：Scaled Domain Score [SDS]）と比較した。

●結果：51の異なる団体からの240件のガイドラインが見つかり、無効リンクのために取得できなかった106件を除いた134件からデータを抽出した。
134件中15件（11%）のみが、GRADE手法に従ったと報告していた。
15件のガイドラインにおけるGRADE compliance scoreは、4件が80%以上であったが、0%から100%までばらついていた（表A）。

GRADE compliance score（中央値59%）とSDS（中央値71%）には正の相関があった（r=0.86, R2=0.75)
GRADE が低いドメインとしては、アウトカムに関する患者にとっての重要性ランキングの不明瞭さ、エビデンスの確実性評価の方法論的情報の欠如などであった。

●結論：
オーストラリアのガイドラインではGRADEの使用が増加しているが、さらなる取り込みと適用のための戦略が必要である。

*************
注1．GRADE_compliance_score.pdf

注2．この研究はCOVID-19パンデミックの前に開始されたため、その後典型的なガイドライン作成プロセスに大幅な変更が加えられました。例、MAGICapp living guidelines

2017年4月にも一度紹介しているGRADE ADOLOPMEMTを、診療ガイドラインのためのGRADEシステム3版から再度紹介します。

*******************************************
ガイドライン作成グループには、通常、次の3つの選択肢がある。（1）既存の推奨事項をそのまま採用する（adoption）。（2）既存の推奨をそれぞれの状況に適用させる（adaptation）。（3）利用可能な統合エビデンスに基づいて新たに推奨を作成する（de novo creation）。信頼できるガイドライン作成のためのこのアプローチを、GRADE working group は、GRADE-ADOLOPMENTとよんでいる（図1.2-4）。新たなシステマティックレビューが必要な場合は、完全システマティックレビューを実施するための、（時間と資金などの）十分な資源があるかを判断・評価する。
*******************************************

■GRADE ADOLOPMENTを採用した有名な診療ガイドラインが、Holger SchunemannらそうそうたるGRADE memberが主導したサウジアラビア（KSA）の診療ガイドラインです。
https://www.moh.gov.sa/en/Pages/default.aspx

このガイドライン作成は2013年7月にスタートし、wave1で80の推奨事項を含む10件のガイドラインを完了するのに必要な有効時間は約4か月で、wave2で146の推奨事項を含む12件のガイドラインを完了するには約6か月でした。ガイドラインのトピックは幅広く、プライマリケア、専門家ケア、集団スクリーニング、血液学、循環器、神経学、腎臓学、母体胎児医学、アレルギー、がんなどの分野をカバーしていました。
22件のガイドラインにおける226の推奨事項に関しては、多くが、adaptationとde novo creationでした。

■日本集中治療医学会と日本救急医学会によるCOVID-19のリビングガイドライン（2020）も、GRADE ADLOPMENTを採用しています。
http://aihara.la.coocan.jp/?p=11052