STATAを利用したQUADAS-2評価

2014年5月2日 Posted by aihara

 

診断精度研究を評価する際には、潜在的なバイアス”ばらつき”(適用可能性を決定する)の双方を検討する必要があります。この2つが、QUADAS-2におけるrisk of biasとapplicabilityです。

 

0501-1

 

前回は、RevManを使ったQUADAS-2評価例を紹介しましたが、今回はSTATA(version 13)を使った解析例です。
●quadas command:

#Methodolgical Quality Graph
.quadas patient_selection index_test reference_stds flow_timing,bar col

#Methodolgical Quality Summary

.quadas patient_selection index_test reference_stds flow_timing, id(studid) sum col ysiz(4) xsiz(5)

 

stata-1

●midas command:

stata-2

 

このように、STATAでも、QUADAS評価グラフやサマリーが作成できます。

RevManがあるので、不要だろう! と思う方・・・・ そうではありません。(^^)

今後、診断精度研究のメタアナリシスの解説において、この理由を説明します。

 

 

 

 

 

 

 

Minds診療ガイドライン作成マニュアル(2014)の問題

2014年4月30日 Posted by aihara

Minds診療ガイドライン作成マニュアル ver.1.0 (2014.03.31)で記載されている診療ガイドライン作成のためのエビデンスの強さや推奨の強さの評価例をみてみよう。

■クリニカルクエスチョン

  • 対象:虚血性脳卒中(79歳まで)
  • 介入:6時間以内のアルテプラーゼ iv
  • 対照:プラセボ

 

■アウトカムとエビデンスの強さ
4-7

  • (1) 6か月後の総死亡:(重要性9) RCT3件からのエビデンスで、非直接性(-1)、464/1976(alteplase)   vs 456/1960(control)、相対リスク1.01 (95%CI 0.91-1.14) にもかかわらず、エビデンスの強さはA(強)。
  • (2) 6か月後の依存性(ADL):(重要性7) RCT3件からのエビデンスで、非直接性(-1)、1176/1976(alteplase)   vs 1226/1960(control)、相対リスク0.92 (95%CI 0.83-1.04) にもかかわらず、エビデンスの強さはB(中)。
  • (3) 1週間以内の脳出血:(重要性9) RCT3件からのエビデンスで、非直接性(-1)、144/1975(alteplase)  vs 29/1960(control)、相対リスク4.43 (95%CI 2.07-9.48) にもかかわらず、エビデンスの強さはA(強)。

========================
エビデンスの等級ダウンはどうなっているのか、評価の判定理由がわかりません。

 

■推奨の強さ

80歳未満の発症後3時間を超えた急性脳梗塞患者に対して、総死亡率低下、ADL保持、脳出血防止を考慮した場合、6時間以内のrt-PA投与を提案する。(弱い推奨)
  • ”価値観や好み:本推奨の作成にあたっては、急性脳梗塞患者に対する死亡率低下の低下、ADL保持、脳出血拍子を重要視した”
  • ”エビデンスの総括(重大なアウトカム全般に全体的なエビデンスの強さ) ・・・B(中)”
  • ”益と害のバランスは不確実。脳出血は増加するが、死亡率はほとんど差がなく、ADL保持もわずかに改善する。これは、アルテプラーゼ投与によって改善する患者もいることを示している。”

======================

上記の評価判定は全く理解できません。

患者にとって最も重大なアウトカムに関する全体的なエビデンスの質は、(著者らの判定に従えば)、”A”です。

利益と害のバランスは、明らかに害が大きく、害の内容は、”1週間以内の脳出血でありそのほとんどが死亡する”というものです。NNH(Number needed to harm)にして、17 (95%CI 14-21) と大きい。しかし、本書の解説例においては、この急性期の害と比較しても、6か月後のADL保持(しかもその差は統計学的には有意ではない)というエビデンスを採用し、レベル”B”としています。

「急性期脳卒中の治療介入のアウトカムを問題としている状況で、半年後のADLというアウトカムが重大なものなのだろうか」

「脳出血リスクが4倍(最悪なら10倍)も多くその殆どが死亡するという初期の1週間をしのぐと、6か月後のADL保持が得られる“かも”しれない」というアルテプラーゼ治療を臨床医として、recommend forの方向性として推奨するだろうか?

 

提示データからすれば、”do no harm!”の原則から、明らかに、Recommend against/A と判定すべきでしょう。

 

まあ、ガイドライン作成の手順としての記載例なので、これもありかとも言えますが、エビデンスの質や推奨の強さのGRADE評価に関する解説としては不適切と思います。

COIの項はよく記載されていると思いますが、上記記載例をみるかぎりは、アルテプラーゼの製薬会社となにか関連があるパネルの意見が強く反映しているのかと勘違いされる可能性もあるでしょう。

誰が見ても本マニュアルはGRADEシステムを参考にしていることは明らかですが、GRADEに順守しているとも明記せず、GRADEシステムを適格に記載しておらず、利用者の多くは混乱することだろう。

本マニュアルを的確に利用しようとすると、それはGRADEを改変するという方向となり、大きなジレンマとなることでしょう。

 

・・・・どうするMinds!

 

附:ちなみに、「rt -PA (アルテプラーゼ)静注療法 適正治療指針 適正治療指針 第二版(2012年)」では、
http://www.jsts.gr.jp/img/rt-PA02.pdf

”静注用の 静注用の 血栓溶解薬には、アルテプラーゼを用いる [エビデンス レベル レベル Ia, 推奨 グレード  A”

・・・Minds2007基準を使うと、(利益と害のバランスによる推奨評価ではないため)このような評価になります。

 

GRADEを適切に利用したい方々は、診療ガイドラインのためのGRADEシステム(相原、他、弘前、凸版メディア、2010)を。

 

 

 

 

QUADAS-2:診断精度研究のrisk of biasと適用可能性

2014年4月22日 Posted by aihara

診断精度研究の質評価ツールの一つとして、QUADAS-2があります。QUADAS-2は、2011年に、QUADASよりアップグレードされました。

QUADAS-2は、バイアスのリスク、ならびに研究疑問への適用可能性に関する懸念の観点から、4つの各主要領域(患者の選択、指標検査、参照基準、推移とタイミング)を評価するよう構造化されています。それぞれの質問に対して“Yes”か“No”、もしくは“Unclear”か回答し、判定結果をRisk of bias and applicability concerns summary, Risk of bias and applicability concerns graphとして提示します。

 

quadas2-1 quadas2-2

 

QUADASからQUADAS-2への変換、あるいは、QUADAS-2を使った4段階、4つのドメインに関する評価について簡単にまとめたものを公開しました。 

 

quadas-2 診断検査へのGRADEシステムの適用

(資料内の、QUADAS-2を使った2つの表に提示するデータは仮想のもので、相原がRevManを使って作成したものです)

 

 

QUADAS-2の詳細: http://www.bris.ac.uk/quadas/quadas-2/

 

 

 

診断検査へのGRADEの適用は困難だが実行可能である

2014年4月18日 Posted by aihara

診断検査へのGRADEの適用に関する論文が、JCEに発表されました。
(DECIDE計画からの発表で、GRADE working groupの診断GRADEに関するJCEシリーズ2編ではないです)

Gopalakrishna G1, et al:Applying Grading of Recommendations Assessment, Development and Evaluation (GRADE) to diagnostic tests was challenging but doable

J Clin Epidemiol. 2014 Apr 8. pii: S0895-4356(14)00044-4. doi: 10.1016/j.jclinepi.2014.01.006. http://www.ncbi.nlm.nih.gov/pubmed/24725643

”診断検査へのGRADEの適用は困難だが実行可能である”

figure1

RoBはQUADAS-2を、QoEはGRADEを使うべしということで、エビデンスの等級ダウン/アップ、推奨の強さの決定もこれまでと同じです。

診断検査へのGRADEシステムの適用

http://www.grade-jpn.com/diagnosticTest_grade.html

 

 

 

 

GRADEを利用した国内ガイドライン: 急性胆管炎・胆嚢炎診療ガイドライン2013

2014年3月18日 Posted by aihara

Mindsからの報告:
■ 1.『急性胆管炎・胆嚢炎』の医療提供者向け診療ガイドラインを公開しました。(2014/03/18)

◇急性胆管炎・胆嚢炎
‐TG13新基準掲載‐急性胆管炎・胆嚢炎診療ガイドライン2013
  http://minds.jcqhc.or.jp/n/med/4/med0020/G0000565

【編集】 急性胆管炎・胆嚢炎診療ガイドライン改訂出版委員会
日本腹部救急医学会、日本肝胆膵外科学会、日本胆道学会、日本外科感染症学会、日本医学放射線学会

———————————————————–
やっと、GRADEシステムに関する国内の教科書を引用してくれました。

診療ガイドラインのためのGRADE システム
相原守夫,三原華子,村山隆之,相原智之,福田眞作、凸版メディア,弘前,2010.

アマゾン

grade


本ガイドライン作成グループが適切にGRADEシステムを利用しているのかどうかは、現時点では十分に検討していませんが、評価のプロセスや判断理由は不透明でGRADEに沿ったものではないように思います。いずれ時間があるならば、検討してその結果を以下のサイトで紹介します。

GRADEを利用した国内の診療ガイドライン

また、本ガイドラインにおいては、新しい試みとして、作成したガイドラインそのものの効果と有用性について記載していますが、検討対象ガイドラインはMinds2007手引きを使ったものです。それでも、「急性胆管炎・胆囊炎診療ガイドラインを遵守した場合、患者の臨床アウトカムが改善し、さらに医療経済的な効果もあるという結論です。

GRADEシステムの5つの限界-2

2014年3月10日 Posted by aihara

——————————————————————————————————————-
5. いわゆる形式的な推奨(motherhood statements)や優れた医療慣行に基づく推奨などの、一連の不明瞭な推奨にGRADEを適用することには問題がある。有用でない推奨には、曖昧すぎて実行できないもの(例: 「包括的な病歴の聴取」、「詳細な身体診察の実施」)が含まれる。このような推奨の解釈は、場合によっては非効率的または非生産的な行為を招きかねない。したがって、ガイドラインパネルは、具体的かつ実行可能な推奨のみを策定すべきである。
——————————————————————————————————————-

#5に関して、JCEシリーズで解説されている表の一部を翻訳して以下に紹介します。
(表の全訳は、ML GRADE-japanにて紹介)

優れた医療慣行に基づく推奨と、形式的な推奨と混同されがちな推奨の例

motherhood_statements

RoBANSチェックリスト

2014年2月8日 Posted by aihara

Testing a tool for assessing the risk of bias for nonrandomized studies showed moderate reliability and promising validity. J Clin Epidemiol. 2013 Apr;66(4):408-14の、追加資料としてのチェックリストを和訳紹介します。

robans-j

 

観察研究のrisk of bias(RoB)を評価するためのツールで、コクランのRoBに準じた6つのドメインから構成されています。また、GRADEに対応した評価となっています。

RoBANS-checklist-j.pdfは、以下よりダウンロード可能です。
ROBANS-checklist-j.pdf

 

 

 

 

観察研究のrisk of bias評価ツール: RoBANS

2014年2月7日 Posted by aihara

非ランダム化試験の方法論的な質評価としては、200を超えるチェックリストやツールがあります。有名なツールの1つとしてNew castle Ottawa Scale(NOS)がありますが、信頼性が低く、偏った結果の研究を同定できないため改訂の必要性が指摘されています。

GRADEシステムにおいても、観察研究のための限界(limitations/risk of bias)評価のための基本的な基準を発表しています。(「診療ガイドラインのためのGRADEシステム参照」

今回紹介するツールは、RoBANS(Risk of Bias Assessment Tool for Nonrandomized Studies)というもので、昨年発表されたものです。

Testing a tool for assessing the risk of bias for nonrandomized studies showed moderate reliability and promising validity. J Clin Epidemiol. 2013 Apr;66(4):408-14

robans

■RoBANSによるrisk of bias評価:

Domain Details Risk of bias
Selection of participants Selection bias caused by the inadequate selection of participants •Low
•High
•Unclear
Confounding variables Selection bias caused by the inadequate confirmation and consideration of confounding variable •Low
•High
•Unclear
Measurement of exposure Performance bias caused by the inadequate measurement of exposure •Low
•High
•Unclear
Blinding of outcome assessments Detection bias caused by the inadequate blinding of outcome assessments •Low
•High
•Unclear
Incomplete outcome data Attrition bias caused by the inadequate handling of incomplete outcome data •Low
•High
•Unclear
Selective outcome reporting Reporting bias caused by the selective reporting of outcomes •Low
•High
•Unclear

■注: RoBANSは、Cochran risk of bias toolに準拠したoutcome-basedの6つの基本ドメインによるチェックリスト(Low, High, Unclearの3段階)で、GRADEアプローチにも適用可能、信頼性は中等度、RoBANSによる評価時間は平均10分であると記載されています。

GRADEシステムの5つの限界-1

2014年2月3日 Posted by aihara

GRADEの使用においては、GRADEシステムにおける5つの重要な限界を考慮すべきです。

GRADEの限界に関しては、すでに診療ガイドラインのためのGRADEシステム(相原、他 凸版メディア、2010)でも記載していますが、JCEシリーズにて追加されたものを含めて、以下にまとめました。

1. GRADEは、介入または政策の比較という複数の管理戦略に関する疑問に対応するために開発されたもので、予後やリスクに関する疑問に対処するために策定されたものではない。

2. これまでGRADEは主として、公衆衛生や医療システムに関わる疑問というよりはむしろ、予防的介入と治療的介入の評価や臨床疑問への対処のために使用されてきた。診断検査、公衆衛生、または医療システムに関わる疑問にGRADEを適用した場合は、いくつかの特別な課題に直面することになるだろう。

3. ガイドラインの作成においては、GRADEシステムが適用される一連の手順の前後に複数の手順を踏む必要がある。レビューの著者やガイドライン作成者は、全体のプロセスの中でGRADEが適用される部分を理解し、それ以外の手順については他所に指針を求めることが重要である。

4. GRADE は、系統的かつ明示的な、エビデンスの質および推奨度の評価を可能にするが、エビデンスの質判定の不一致を解消することを目的としたものではない。すなわち、同じエビデンスでもエビデンスの質の判定が異なることがしばしばあるが、GRADE で確実にできることは、その見解の不一致の本質的な理由を把握することである。

5. いわゆる形式的な推奨(motherhood statements)や優れた医療慣行に基づく推奨などの、一連の不明瞭な推奨にGRADEを適用することには問題がある。有用でない推奨には、曖昧すぎて実行できないもの(例: 「包括的な病歴の聴取」、「詳細な身体診察の実施」)が含まれる。このような推奨の解釈は、場合によっては非効率的または非生産的な行為を招きかねない。したがって、ガイドラインパネルは、具体的かつ実行可能な推奨のみを策定すべきである。

——————————————————–
上記の#1~#4は、診療ガイドラインのためのGRADEシステム(p8-9、GRADEシステムの長所と限界)に記載ずみのもので、
#5としてJCEシリーズで記載されている内容を追加しました。

#5に関して、優れた医療慣行に基づく推奨とか、形式的な推奨と混同されがちな推奨とは、具体的にはどのようなものかを、次回紹介します。

GRADEシステムを利用する際には・・・

2014年1月25日 Posted by aihara

診療ガイドライン作成者から(個人メールで)、GRADEに関するいろいろな質問をいただいています。GRADEシステムを利用しようとする診療ガイドライン関係者が明らかに多くなっています。

 

診療ガイドラインやシステマティックレビューの作成においてGRADEシステムを利用する際には、「診療ガイドラインのためのGRADEシステムー治療介入ー」を参考にしてください。

 

http://homepage3.nifty.com/aihara/grade-cover.html

・[出版社] 診療ガイドラインのためのGRADEシステムー治療介入ー(相原他、弘前、凸版メディア、2010)

 

エビデンスから推奨への枠組みに関しては、

エビデンスに裏付けられた情報に基づく決断と診療を支援するコミュニケーション戦略の策定と評価(DECIDE):プロトコルと予備的結果(臨床評価誌 41(2): 431-464, 2013)を参照ください。
decide-2.JPG

  • カレンダー

    2025年6月
     1
    2345678
    9101112131415
    16171819202122
    23242526272829
    30  
  • 最近の投稿

  • アーカイブ