Guideline development tool (GDT)の利用の注意

2015年9月28日 Posted by aihara

DECIDE/GRADEが推進するエビデンスから推奨作成ツールの一つである、GRADEpro Guideline development tool(GDT)についての注意です。

GDTは、ほぼ毎月、なんらかの改変修正が行われています。たとえば、エビデンスプロファイルやSoFテーブルの作成表示方法や、エビデンスの質評価におけるdirectnessの判定をさらにわかりやすく容易にする表示(下図)や、EtDテーブルの評価項目などが(公開当時より)変更になっています。

しかし、GDTの基本は変わっておらず、以下です。
*********************************************************************
エビデンステーブル(Evidence table)は、医療専門家、患者、一般市民、ガイドライン作成者、政策決定者が決断の情報源を得るには、簡潔かつ明確な構造化されたエビデンス要約にアクセスできるようになっているべきである。エビデンスを要約するには明白な医療上の疑問が鍵となるが、特定のユーザーにとっての必要条件は内容や詳細において異なるかもしれない。
GDTによって作成されるもう1つの表である決断表(Decision table)には、根底にあるエビデンスの質、利益と害のバランス、価値観と好み、資源に関わる要件に基づいて推奨を行うための論拠が含まれるべきであり、この表は、ガイドライン作成者が推奨を作成する際に下す判断を列挙するために使用されるものである。
*********************************************************************

したがって、現状では、診療ガイドライン作成時に、ガイドライン作成後の普及や公平性などまで踏み込んだEvidence to Decisionテーブルを含めることは、ガイドライン作成チームの負担がとても大きなものとなると考えるべきです。
各ガイドライン作成チームが、利用しやすく、わかりやすくしたものを考案し対応するだけで十分であり、むしろ、DECIDEでは、ガイドラインの視点に合わせた改変を勧めています。

gdt

(2015/09/28時点)

信頼できる診療ガイドラインを作成するために

2015年9月24日 Posted by aihara

信頼できる診療ガイドラインを作成するための基準としては、以下の2つが代表的です。

(1)米国IOMの「Standards for Developing Trustworthy Clinical Practice Guidelines(信頼できる診療ガイドライン(CPG)作成のための基準)

(2)診療ガイドラインの国際的ネットワークであるGIN (Guidelines International Network)の「Guidelines international network: toward international standards for clinical practice guidelines

これらの2つの基準の違いに関しては、IOM基準は非常に厳格で、GINのminimum G-I-N standardsはIOMよりは緩やかなものでより現実的で実行可能な基準と考えられていますが、米国においては、ATS (American Thoracic Society)を含むガイドラインの専門家団体は、IOM基準を順守するよう要求されているようです。

●minimum G-I-N standards:

gin

●どのような基準を設定すべきなのだろうか:

While both the G-I-N and IOM standards will likely improve the trustworthiness of guidelines produced by professional societies, together they bring several additional challenges. First, development groups must choose between the minimum G-I-N standards and the more rigorous IOM standards, or perhaps something in between.

(A Guide to Guidelines for Pulmonary, Sleep, and Critical Care Medicine Clinicians. Proc Am Thorac Soc. 2012 Dec;9(5):211-4.

●他には、「GIN-McMasterガイドライン作成チェックリスト」という、GRADE working groupが中心となって作成したものもあります。
GRADE教科書2版の、オンライン資料サイト(以下URL)より、DL可能です。
http://www.grade-jpn.com/online_supplementals/online_supplemental_materials.html

●GRADEを使った診療ガイドラインならば、「GRADEを利用したとする最小限の基準(GRADE利用基準」を参考にすべきです。
http://www.grade-jpn.com/jp_grade/japanese_grade_cpg.html

AGREE-IIを使った診療ガイドイランの質評価

2015年9月15日 Posted by aihara

作成された診療ガイドラインの質がどのようなものかを、一般の人が分かるように、AGREE-II評価スコアを提示してほしい。
また、その評価に際しては、ガイドライン作成グループとは独立した外部評価委員が実施すべきと思います。

●AGREE-IIを使ったスコアリング

agree2

 

●AGREE-IIスコアによる診療ガイドラインの質評価基準に関しては、いくつかのものがあるが、統一されたものはない。

●例1:CTFPHC’s criteria for high quality. (ref)
◦Scores of at least 60% on the AGREE II domains of Scope and Purpose, Rigor of Development and Editorial Independence.
◦At least 60% consensus on the question that asks whether the CPG should be supported or not

●例2:Quality evaluation (ref)
A guideline is ‘‘strongly recommended’’ if the majority of items (above 4 items) scored above 50%. A guideline is ‘‘recommended’’ if 3 main items scored above 50%. A guideline is ‘‘not recommended’’ if all items scored below 50%.

●例3:Overall quality Assessment of guidelines (ref)
6 CPGs were strongly recommended as a result of the majority of item (above 4 items) scores being above 50%.These CPGs were produced mainly by the National Guideline Clearinghouse (NGC). One guideline [22] is recommended due to 3 main item scores being above 50%. One CPG [24] was not recommended due to all item scores being below 50%.

*************************************************************
国内ガイドライン例、90%評価得た「高血圧治療ガイドライン2014」

私には、このガイドラインは、AGREE-IIの基本的かつ最も重要なドメインである、「領域3. 作成の厳密さ RIGOUR OF DEVELOPMENT」の#9を十分に満たしているとは思えない。そもそも、Minds2007システムを使ったガイドラインであり、総体エビデンスの概念が欠如している手法です。
CPG作成法の根幹に疑問があるのに、90%評価点というのは、どうかなあと。
****************************************************************

以上から、ガイドライン作成グループとは独立した組織が、一定の基準を使って、AGREE-IIスコアとともに、high-quality, moderate quality, low-qualityなどと評価すべきと思います。
そうしないと、多くの読者はガイドラインの質を知ることができないですが、実際にAGREE-IIスコア基準作成となると難題ですね。

他にどんなガイドライン質評価基準があるのかを、次回紹介したい。

ワークショップの課題とパネリストへの質問 (IOM)

2015年9月11日 Posted by aihara

診療ガイドライン作成にあたって、パネリストには具体的にどのような質問をすべきなのだろうか。

IOMの信頼できる診療ガイドライン(Clinical practice guidelines we can trust)に記載されている、「ワークショップの課題とパネリストへの質問」(Appendix B)で、2010年1月のWashington, DCで開催されたワークショップで利用されたものが以下です(フリーで公開されているものなので、紹介します)。

Questions for the Panelists

What do you believe are the biggest challenges clinical practice guidelines developers/users face today? For example:

  • What do you do when the scientific evidence is absent or poor?
  • How do you reconcile disagreements in evidence interpretation among guidelines?
  • How do guidelines accommodate subgroups (e.g., older populations or persons with multimorbidities) whose treatment outcomes may differ from the average patient?
  • Are there other challenges you believe are important?

What topics and/or processes do you think the committee should consider in deriving quality standards for clinical practice guidelines? For example:

  • What should the composition of CPG development panels,in particular the balance of methodologists, topical experts, and consumers, look like?
  • What methods might be developed for determining which recommendations among those in a guideline should be applied to quality measures or electronic medical record decision prompts?
  • Is there an available assessment tool that adequately rates both the level of the scientific evidence and strength of clinical recommendations that should be used as standard practice in guideline development?
  • What administrative (e.g., accreditation) or legal approaches might improve the quality of clinical practice guidelines?
  • What explicit approaches might harmonize guideline developers and increase guidelines convergence?
  • What types of strategies might promote greater use of guidelines?
  • Are there other characteristics of guideline standards you think are important for the committee to consider?

上記を翻訳したものが、こちらです.(WORDPDF)。

「GRADEにおけるevidence評価と伝統医学」の誤解

2015年9月10日 Posted by aihara

以下は岩崎鋼先生(東北大学大学院医学系研究科・医学部)のFBにおける記事(2015/9/9)です。この内容には、GRADEに関する基本的な誤解や、GRADE適用前の判断の誤解があります。転載可ということですので、その出典を明記して紹介し、どこがおかしいのかを簡単に説明します。

GRADEにおけるevidence評価と伝統医学(岩崎:転載可、但し出典を示すこと)

既に何度か述べたように、The Grading of Recommendations Assessment, Development and Evaluation (GRADE) system ではQuality of Evidence (QoE)とRecommendation Strength (RS)という二つの観点から治療法を検討する。従来のエビデンス・ヒエラルヒーがもっぱらエビデンスの質だけを評価していたのに比べると、RSが新たに追加されている。

しかし、RSについてはまだ新しい概念であり、固まっていない部分もあり、またその評価は極めて難しい。特に、高齢者医療や漢方など幅広い領域を扱う場合、これを実際評価するのはかなり困難である。

そこでここでは、QoEに限って、ある有名な方剤を例にとって考えてみたい。釣藤散である。

GRADEはRCTでないcase seriesをも評価の対象とするが、ここでは紙面の関係上、RCT以上に限ってのべる。釣藤散には、認知症を対象としたDB-RCTが二つ存在するので、それを評価しようというわけである。

GRADEによれば、RCT以上の研究のQoEは初めはhighから評価がスタートする。しかし、ここでQoEを下げる5つの要因を考慮せねばならない(RCTでない場合は、他に上げる要因、というものもあるがここでは述べない)。

1.Limitations (バイアスリスク):デザインが不適切、maskingが成されていないなど研究手法上の問題
2.inconsistency(非一貫性):複数の同じRQの研究がある場合、研究によって結果が異なる
3. indirectness(非直接性):知りたいことと研究結果が一致しない。
4.imprecision(不精確さ):サンプルサイズの不足などで研究の精確性に疑問がある。
5.publication bias(出版バイアス):都合のよいデータだけが出版された、あるいは出版に何らかの偏りがある

GRADEではこれらを元にして、QoEをhigh, moderate, low, very lowに分類する。では、これを用いて釣藤散の脳血管性認知症に対する効果を検証してみよう。

釣藤散は我が国の医療用漢方製剤の一つであり、脳血管性障害後遺症としてのADL改善を示唆する2本のDB-RCT(下記1,2)を有し、また薬理機序に関しても多くの報告がある。文献1は、伝統医学として世界で始めて行われたDB-RCTであり、その医史学的価値は計り知れない。

しかしながら、今GRADEシステムに照らしてその内容を評価すると、まずランダム化が封筒法であることがバイアスリスクに該当し、適切なsample size estimationや95%CIが記載されて居ないことは不精確性に該当する。さらに、RQが認知機能に対する効果を観るものであったのに対し、結果的に有意差が見られたのはADL, BPSDに該当する項目であったことは、非直接性に該当する。これらを総合すると、DB-RCTであるにもかかわらず、GRADE基準によるQoEはvery lowとなる。

文献2もDB-RCTであるが、認知症の中核症状である認知機能を評価した研究にもかかわらず、異なる疾患群(アルツハイマー病、脳血管性認知症など)を区別せず対象としており、疾患毎のサブ解析も行われていない。これはGRADE基準で言えば非直接性に該当する上、そもそも対照群の選択が医学的に妥当性を欠くため、limitationも指摘できる。にもかかわらずこの文献がJournal of the American Geriatrics Societyに掲載されたことについては、peer reviewを経ないレターであったため、出版バイアスも生じたと判断せざるを得ない。よってこの論文のQoEはやはりvery lowである。

以上を勘案すると、釣藤散の脳血管性認知症改善効果のQoEは不充分である。このように、世界で始めて伝統医学に関して行われたDB-RCTを有する釣藤散といえども、GRADEに於けるQoE評価は最低ランクの「very low」となってしまうのである。

伝統医学についてRSが一律に評価できるかどうかは、極めて難しい問題がある。しかし今後伝統医学に於いてもガイドラインなどを作成するに当たって、少なくともQoEに関しては、勘案せざるを得ないであろう。今後日本漢方、中医学ともガイドラインを作るという動きが出てきているが、この点をよく考慮する必要がある。

釣藤散論文

1.Choto-san in the treatment of vascular dementia: a double-blind, placebo-controlled study. Terasawa K; Shimada Y; Kita T; Goto S; Mizushima N; Fujioka M; Takase S; Seki H; Kimura I; Ogawa T; Nakamura S; Araki G; Maruyama I; Maruyama Y; Takori S. Phytomedicine vol4(1) 15-22 (1997)

2A Chinese herbal medicine, choto-san, improves cognitive function and activities of daily living of patients with dementia: a double-blind, randomized, placebo-controlled study. Suzuki T; Futami S; Igari Y; Matsumura N; Watanabe K; Nakano H; Oba K; Murata Y; Koibuchi H; Kigawa Y. Journal of the American Geriatrics Society 53(12) Page:2238-40 (2005)

 

GRADEの、Weak recommendationの”weak”は、誤解されている可能性があるようだ(FB@8/31)において、国内GRADEメンバーがたとの大論争の結果を経てのこの発言なので、とても残念です。

上記内容の間違いのいくつかを以下に指摘します。

GRADEの5要因の説明も不適切な点が多々ありますが、それらは無視します。
(例、publication biasとselective outcome reporting biasの区別ができていません)

文献1のQoE= very low, 文献2のQoE= very lowということですが、GRADEの使い方を間違っています。
高齢者の安全な薬物療法ガイドライン2015(案)でも、同様のアプローチをしたと判断したようですが、それは間違っています。

GRADEは複数の研究にわたる各アウトカムに関するエビデンスの質を評価するもので、個々の研究の質を等級するものではないです。
(GRADE rates the quality of evidence for each outcome across studies rather than rating each study as a single unit)

封筒法なので high RoBという判定もいけません。

出版バイアスについても、選択的アウトカム報告バイアスとの区別ができていません。”この文献が~~peer reviewを経ないレターであったため、出版バイアスも生じたと判断せざるを得ない”とか、過去の”自分の研究なので、個人的にはpublication biasはあり得ませんと断言できる”などという不可解な発言も頷けます。
(GRADE considers selective outcome reporting under risk of bias (study limitations) since it can be addressed in single studies.)

つまり、GRADEの基本を誤って解釈しているということです。GRADEシステムにおけるさまざまな定義を曲解して、上記のような発言や、”GRADEはimmatureである”、”GRADEの推奨表は間違っており訂正されるべきである”などというのは混乱のもとです。高齢者の安全な薬物療法ガイドライン2015(案)のパネル会議において大論争がおきたことも納得できますね。

BMJもしくはJCEシリーズを読んだほうが良いと思います。

蛇足ながら、(釣藤散の効果を否定するつもりは全くないですが)、医史学的価値が計り知れない文献1は、総数139例(CS 69例 vs 対照70例)でスタートし、解析時はそれぞれ59例と60例で、ITTではありません。また、文献2は、総数20例(CS群と対照群はいずれも10例)だけです。GRADEを使うと、このようなデータの効果推定値には確信がおけないと判断すると思います。

 

推奨のグレードは連続体

2015年9月8日 Posted by aihara

推奨のグレーディングにはさまざまな方法が報告されていますが、国際的に最もよく利用されているものが次の3つです(JAMA-UG3eより)。

  • GRADE (Grading of Recommendations Assessment, Development and Evaluation)
  • American Heart Association (AHA)
  • US Preventive Services Task Force (USPSTF)

重要なことは、下図に示すように、「推奨の強さと方向に関する確信性の程度は、”連続体”である、という認識が必要」ということです。当たり前といえば、当たり前なんですが。。。

direction and strength of recommendation

また、どのような手法を利用するにしても、
診療ガイドラインを作成する場合には、パネルは、臨床疑問設定や文献検索の前に、そのシステムを利用することに合意する必要があります。

そのためには、診療ガイドラインを作成する前に、”当該システムの推奨やエビデンスンの質に関する定義や意味”をよく理解しておくことが必須です。

そうしないと、ガイドライン草案の検討において、意見の衝突がでてくる可能性があります。

いったん、そのシステムを利用してガイドライン作成作業がスタートしたならば、パネルの総意による推奨の決定を行うことになります。
その際には、パネルが決めたルールに従って、最終的な「推奨の強さと方向」を決定しますが、その評価過程は透明性の高いものでなくてはいけません

GRADE書籍の正誤表

2015年9月5日 Posted by aihara

医学文献ユーザーズガイド第2版、診療ガイドラインのためのGRADEシステム(初版、第2版)の正誤表を、ホームページと、ブログに、わかりやすい形で表示しました。

さまざまな誤記がありまして、申し訳ございません。
http://www.grade-jpn.com/

seigohyo

●医学文献ユーザーズガイドの正誤表

●診療ガイドラインのためのGRADEシステム2版の正誤表

●診療ガイドラインのためのGRADEシステム初版の正誤表

「高齢者の安全な薬物療法ガイドライン2015(案)」は、GRADEにあらず

2015年9月1日 Posted by aihara

FBでもディスカッションが続いていますが、診療ガイドラインの作成過程においては、どこからどこまでがGRADEが関与する範囲なのかを把握しておく必要があります
GRADE考慮の前の、臨床疑問(CQ)の設定においては、全体のAnalytic frameworkを作成し、各CQのPICOをよく考えるべきです。


CQを安易に作成すると、どうなるかというと・・・・
「高齢者の安全な薬物療法ガイドライン2015(案)」は、GRADEにあらず、のようになります。

FBでのコメントやスレッドも参照ください
GRADEの、Weak recommendationの”weak”は、誤解されている可能性があるようだ

「高齢者の安全な薬物療法ガイドライン2015(案)」は、GRADEにあらず

以前からなんども申し上げているように、GRADEガイドラインを作成した際には、「GRADEシステムを利用したと言えるための最低限の基準」を使って、GRADE利用が適切だったかどうかをガイドラインチームが自らチェックしてほしいです。

webリンクの、GRADE*を利用した国内の診療ガイドラインには、これぞGRADEガイドラインという例を紹介しています。(日本歯科保存学会、•う蝕治療ガイドライン 第2版、など)

interactive Evidence to Decision (iEtD) frameworks

2015年8月27日 Posted by aihara

interactive Evidence to Decision frameworksは、エビデンスに基づく診療ガイドライン/HTAの作成者や、政策決定者を支援するために、GRADE/DECIDEによって開発されたものです。

interactive Evidence to Decision frameworks
interactive Summary of Findings

EtD frameworkの背景、EtDを使ったエビデンスから推奨に関する各評価項目のガイダンス、エビデンスを見つけることができない場合の対応、などが記載されています。また、EtD frameworkの様式は、目的によって異なり、10種類以上のテンプレートがあります。
EtDにおける推奨表示が以下です。

EtD-0808

上記のwebサイトにおいては、iSoFについて3つの例が紹介されていますが、EtDのサンプルやFAQなどは工事中で、今後、iEtDに関してもGRADEpro GDTを使って作成できるようになるようです。

Evidence to Decision frameworkや、EtD tableの例については、GRADE教科書2版において解説しているので、そちらを利用すると、理解しやすいと思います。

サブグループ解析を判断するための基準

2015年8月25日 Posted by aihara

JAMA版医学文献ユーザーズガイド(第2版)の20.4章は「いつサブグループ解析を信頼するか」で、サブグループ解析の結果が妥当なものかを判断するための7つの基準がよく知られています。

subgroup-7

GRADEシステムにおいては、body of evidenceの非一貫性がある場合に、サブグループ別にエビデンスを提示する必要があり得ます。

上記の従来の7基準に、新たに4項目が加えられた基準(以下の蛍光部分)が発表されています。
Is a subgroup effect believable? Updating criteria to evaluate the credibility of subgroup analyses
BMJ 2010;340:c117

Criteria to assess the credibility of subgroup analyses

Design

  • Is the subgroup variable a characteristic measured at baseline or after randomisation?*
  • Is the effect suggested by comparisons within rather than between studies?
  • Was the hypothesis specified a priori?
  • Was the direction of the subgroup effect specified a priori*
  • Was the subgroup effect one of a small number of hypothesised effects tested?

Analysis

  • Does the interaction test suggest a low likelihood that chance explains the apparent subgroup effect?
  • Is the significant subgroup effect independent?*

Context

  • Is the size of the subgroup effect large?
  • Is the interaction consistent across studies?
  • Is the interaction consistent across closely related outcomes within the study?*
  • Is there indirect evidence that supports the hypothesised interaction (biological rationale)?

*New criteria

  • カレンダー

    2025年6月
     1
    2345678
    9101112131415
    16171819202122
    23242526272829
    30  
  • 最近の投稿

  • アーカイブ