How to Read a Systematic Review and Meta-analysis: Users’ Guides

2014年7月14日 Posted by aihara

EBMにおいて、”医学文献をどのように読むべきか、そしてどのように活用するか”を解説している世界の教科書が「JAMA users’ guides to the medical literature」(JAMA UG)ということには、世界中のどなたも異論がないと思います。

”How to use an overview”のタイトルでJAMA UGで発表され、SRの批判的吟味に関するフレームワークが報告された1994年から、20年ぶりにアップデートされた内容がJAMAで出版されました。

How to read a systematic review and meta-analysis and apply the results to patient care: users’ guides to the medical literature.

Murad MH, Montori VM, Ioannidis JP, Jaeschke R, Devereaux PJ, Prasad K, Neumann I, Carrasco-Labra A, Agoritsas T, Hatala R, Meade MO, Wyer P, Cook DJ, Guyatt G.
JAMA. 2014 Jul 9;312(2):171-9. doi: 10.1001/jama.2014.5559.
PMID: 25005654

システマティックレビューやメタアナリシス論文の批判的吟味および患者への適用は、このように実施すべきという内容です。

・・・そして、評価システムの手法として記載しているのはGRADEシステムです。

この論文内容を理解したい人、そして、システマティックテビューやメタアナリシスを使う・作る・伝える人の全てが、GRADEの基本としての、以下の点に留意する必要があります。

エビデンスの質を下げるかもしれない5つの要因はどうか

●risk of biasはどうか、

●メタアナリシスの結果の異質性はどうか、

●結果の不精確さはどうか

●非直接性はどうか

●出版バイアスはどうか

エビデンスの質を上げる3つの要因はどうか

———————————

なお、(治療介入に関する)GRADEシステムの基本を理解して、はじめて 診断精度研究に関するエビデンスの質評価や推奨の決定が可能になります。

ug_of_sr

 ●JAMA UG第2版のフルバージョンを日本語翻訳出版したものが、JAMA版の医学文献ユーザーズガイドです。

●GRADEシステムに関する日本語教科書が、「診療ガイドラインのためのGRADEシステム」です。

grade_book_0621

 

GRADEは再現性を保証するものではない

2014年7月7日 Posted by aihara

あるCQについて、2つのチームが別々に、GRADEシステムを使って、診療ガイドライン作成にチャレンジしたとします。しかも、採用するエビデンスは同じです。

しかし、2つのグループが作成したガイドラインにおける、最終的な「推奨とエビデンスの質」は同じとは限りません。GRADEシステムにおいては、推奨を決定する要因はエビデンスだけではないため、この結果は当然のことです。

つまり、GRADEの最大の長所は、
再現性のある判断を保証することではなく、作成過程における透明性の高い明示的な判断」です。

したがって、

ガイドライン作成を担当する方は、GRADEの特徴を理解しておく必要があります。

このGRADEの基本は、GRADEが発表された10年前から何度も言われていることで、(学会誌などにおける)不適切な理解に基づいたGRADE批判の発表に対して、GuyattをはじめとしたGRADEワーキンググループメンバーがたびたび反論・解説している内容の一つでもあります。

 

DECIDE翻訳論文がDECIDEのwebサイトにて紹介!

2014年7月1日 Posted by aihara

DECIDEの翻訳論文(臨床評価誌 2013; 41(2):431-464)が、DECIDEのwebサイトに掲載されていました。(^^;

decide_grade

http://www.decide-collaboration.eu/dissemination-0

 

「エビデンスに裏付けられた情報に基づく決断と診療を支援するコミュニケーション戦略の策定と評価(DECIDE):プロトコルと予備的結果」

Morio Aihara. Developing and evaluating communication strategies to support informed decisions and practice based on evidence (DECIDE): protocol and preliminary results
DECIDE Protocol in Japanese (with permission): Clinical Evaluation 41 (2) 2013, November 2013.

decide

 

Prof. Shaun Treweek(Professor of Health Services Research, Health Services Research Unit, University of Aberdeen)とやりとりして、さまざまなことを教えていただきました。

GRADE handbookのアップデート版が公開

2014年7月1日 Posted by aihara

 

www.guidelinedevelopment.org

 

診療ガイドラインの掲載基準: Minds vs NGC

2014年7月1日 Posted by aihara

治療GRADEや診断GRADEだけではなく、Economic GRADEに関しても、日本の考え方はとても遅れている。
国内のガイドラインの多くは、介入普及に利害を有する人々が、医療資源の影響を無視して推奨だけを作成したいと考えている状況があると思う。

診療ガイドラインにおいては、(可能な限り)医療資源の利用に関する”エビデンスの質”と”推奨の強さ”についての、透明性の高い判断を提示してほしい。

多くの診療ガイドライン作成チームは、Mindsに掲載公開されることをひとつの目標としているようであるが、肝心のMindsは掲載基準を明示していない。
従来より掲載されているガイドラインの多くは、「信頼できるガイドラインとはなんぞや」というIOMの基本基準を満たしていない

Minds自らが不適切だったと認めているMinds2007基準を使った診療ガイドラインに、お墨付きを与えるべく公開してい状況そのものが、修正されなくてはいけない。

日本のGuideline Clearinghouseと自負するMindsは、本家NGCが6月から診療ガイドライン掲載のための基準を変更したことに気づいているのだろうか。

ガイドライン作成手法だけではなく、ガイドライン掲載基準さえも遅れをとっている・・・・この国内現状に対して各ガイドライン作成者からは建設的な意見が出てこない、推奨がメインのガイドラインに従った介入を受けるのは何も知らない患者、・・・なんとも おそまつな構造である。

NGC’s Revised Inclusion Criteria

What are the main changes to the inclusion criteria?

The two main changes are:

  • Documentation will need to be provided showing that the guideline is based upon a systematic review of the evidence.
  • Documentation must contain an assessment of the benefits and harms of the recommended care and alternative care options.

 

 

 

 

 

 

 

ネットワークメタアナリシスのエビデンスの質

2014年6月21日 Posted by aihara

ネットワークメタアナリシスの全体的なエビデンスの質(QoE)評価は、きわめて難しい。エキスパートの意見が強く影響し、結果的に推奨の強さも偏り安いように思います。
図は、自分で出力したネットワーク内の直接・間接比較のRisk of biasですが、自分で解析処理してみると、いかに恣意的な判断になりやすいかがよくわかります。

 

nma-0621

 

JAMAユーザーズガイドにおいても、ネットワークメタアナリシス(NMA)の解釈について発表されたように、効果推定値の確信性の評価は非常に難解です。
GRADEワーキンググループは、NMAに関する評価手法を確立しようとしていますが、naive direct comparison、indirect comparison(間接比較)、さらにNMAのエビデンスの質を判断するためには、GRADEアプローチの基本の理解が必須です。そのためには、唯一のGRADEの教科書である「診療ガイドラインのためのGRADEシステム」を参照ください。(注:下記本においては間接エビデンスの評価については解析していますが、NMAについては解説していません。)

 

grade_book_0621

機能性消化管疾患 診療ガイドライン2014-機能性ディスペプシア(FD)

2014年6月10日 Posted by aihara

「機能性消化管疾患診療ガイドライン2014-機能性ディスペプシア(FD)」をMRよりいただいた。

診療ガイドラインのためのGRADEシステム」(相原、他、凸版メディア、弘前、2010)を参考にしていると記載されている。

body of evidenceの質評価も推奨の強さの分類もGRADEであるが、統合エビデンスに基づいた評価でないものもある。

しかし、
(1)エビデンスプロファイルがないので、読者は「質評価プロセス」を知ることはできない。
(2)「推奨の強さ」に合意率が付記されているが、その評価判定には疑問があり、GRADEの推奨4基準が明記されていないものがある。
さらには、
(3)「推奨なし」のCQに関する記載内容をみると、「弱い(条件付き)」の推奨としたほうがよいと思われるものがある。
(これは、ガイドライン作成グループの総意なのだろう)
(4)診断研究のGRADE評価をどのように実施したのか記載はない。

・・・・(1)は、もったいない

ネットワークメタアナリシスにおけるrisk of bias

2014年6月7日 Posted by aihara

network meta-analysis(NMA)においては、単に統合値を算出するだけではなく、各比較に寄与した研究のRisk of bias(RoB)を提示すべきと思います。

なぜなら、我々は、”間接エビデンスのQuality”を知りたい。

下図は、私が、あるサンプルデータを使ってNMAを実施し(*)に各armのrisk of bias結果を表示したものです。コクランに準じて、high, unclear, lowで評価し、各々をカラー(3種類で対応)表示したもので、Nodeの大きさは、研究の大きさを反映しています。

(*) NMA解析においてはSTATA13を利用しましたが、OpenBUGSやRでは効果推定値算出やフォレストプロット表示はできるものの、RoBの表示はできませんでした。

NMAにおいては、このように提示すべきということではなく、・・・・

何を主張したいのかというと、
「NMAの著者は、患者にとって重要なアウトカムに関して、間接比較のRoBを提示し、NMAによる統合エビデンスの”質”を明記してほしい。できたらば、そのエビデンスの質はGRADEアプローチを使って評価していただきたい」ということです。

単にNMAによるデータや各薬剤のランキングを示されても、エビデンスの質(効果推定値が正しいという確信性)が解らなければ、意思決定のための推奨の程度もわからない、ということです。
(例、抗鬱剤に関するNMAにおいても、各研究の”バイアスのリスク”はどうだったのだろうか、と疑問に思います)

nma_rob

Network meta-analaysisの報告者は、間接比較、直接比較および統合エビデンスの質を提示すべきである

2014年5月29日 Posted by aihara

network meta-anlaysis(NMA)に関しては、自分でいくつかの論文データを入力してNMAを実施してみて気づきましたが、多くの既報論文においては、各研究のRoBあるいはNMAのRoB、直接比較と間接比較との整合性・一致性の報告は不十分で、さらにはNMAの全体的なエビデンスの質、などの報告はほとんどありません。

そして、ネットワークにおける認容率と反応率のわずかな統計学的解析結果の発表や薬剤ランキングの作成などによる、偏ったエビデンスにより推奨が決定されているように思います。

”エビデンスはアウトカムごとに評価しないといけない、そして、推奨を決める要因は、エビデンスだけではない”が、GRADEの基本です。

NMA手法の独特な複雑性のために正当な反論というか、NMAに関する、あるべき標準的な批判的吟味ができてない状況が、国内の一部の診療領域でおきているようが気がします。

NMAは、方法論としてのハードルは高いものの(R, OpenBUGS, STATAなど)、実は一般MAと同じようなものです。

ただ、NMAを自身で実施すると、通常のNMには決して味わえない、”お~、解析を実施している!”という感動が(統計学者になったかのような誤解とともに)味わえることは確かです。 (^^)
自分で、(エクセルデータを利用して)NMAを実施して以下のような結果を得ることができると、自分がNMAをできるように勘違いしてしまいます。

NMA-0529

しかし、重要なことは、選択研究を含めて「結果は妥当か」、「結果は何か」、「結果を患者ケアにどのように適用できるか」、というEBMの基本3ステップというか、Evidece Cycleの基本5Aであり、SRにおいてはエビデンスの質を、CPGにおいては推奨の強さとエビデンスの質の双方を提示しないといけません。

ところが、このNMAのエビデンスの質評価と推奨の強さの判断は相当に難しい。

GRADEシステム:アウトカムの重要性の再評価

2014年5月23日 Posted by aihara

GRADEを使った診療ガイドライン作成においては、国内のガイドライン作成手順には記載されていない、いくつかの重要なポイントがあります。

その一つが、「アウトカムの重要性の再評価」です。

■GRADEシステムにおけるアウトカム評価は、意思決定において、”重大か”、”重要だが重大ではない”、”重要ではない”、の3つのカテゴリに分類されてスタートします。(下図では、アウトカム1,2が重大、アウトカム3が重要、アウトカム4が重要ではない)

gradeFlow_2014

アウトカムの再評価に関しては、本図においては、「左斜め上に向かう矢印」で示しています。

アウトカムの再評価の具体例:
=============================================================
■アウトカムの相対的な重要性の再評価
例えば、腹部大動脈瘤のスクリーニングのような、スクリーニング介入を考えてみよう。最初は、ガイドラインパネルは全死因死亡率に対する介入の影響を重大と考える可能性がある。しかし、たとえばエビデンスの要約では腹部大動脈瘤による原因別死亡率の重要な減少が明らかであるものの全死因死亡率の減少は明らかにできなかったとしよう。全原因死亡率の明らかな減少(他の死亡原因によるランダム誤差のために検出されないことがある)がないとしても、原因別死亡率の減少は十分に説得力のあるものと判定され、スクリーニング介入は明らかに価値がある。従って、全死因死亡率は関連性が低くなり、重大なアウトカムではなくなる。
==============================================================

同じように、
当初は重大としてリストアップした有害作用が、エビデンスを検索した結果、極めて稀なもので、かつ介入群においても対照群と差がなく、意思決定には影響しないと判断される場合には、アウトカムの重要性を再評価する必要があるということです。

★GRADEを使った、アウトカムの評価の詳細については、
書籍「診療ガイドラインのためのGRADEシステムー治療介入」(相原、他、弘前、凸版メディア、2010)を参照してください。
http://www.grade-jpn.com/grade-cover.html

★GRADEを使ってガイドラインを作成しようとする方々は、この点についてよく考慮していただきたいと思います。

  • カレンダー

    2025年6月
     1
    2345678
    9101112131415
    16171819202122
    23242526272829
    30  
  • 最近の投稿

  • アーカイブ