Category: ‘GRADEシステム’

欠損値(missing data)に関するimputation strategy

2016年4月27日 Posted by aihara

SRにおいて、”欠損値(missing data)”は、Risk of biasのうちの”不完全なアウトカム報告”につながります。
“missing data”のある試験をどのように対処すべきかという問題に対して、‘‘worst-case scenario,’’を始めとしたさまざまな補完戦略(imputation strategy)があります。GRADEmemberによる関連論文が発表されており、2値アウトカムのケースの解析法が以下の図です。

 

●2値アウトカム:
Addressing Dichotomous Data for Participants Excluded from Trial Analysis: A Guide for Systematic Reviewers
http://www.ncbi.nlm.nih.gov/pubmed/23451162

 

●連続アウトカム:
・同じ尺度の場合:
Addressing continuous data for participants excluded from trial analysis:a guide for systematic reviewers
http://www.ncbi.nlm.nih.gov/pubmed/23774111

・異なる尺度の場合:
Addressing continuous data measured with different instruments for participants excluded from trial analysis:a guide for systematic reviewers
http://www.ncbi.nlm.nih.gov/pubmed/24613497

 

でもって、さらにGRADE working groupは、missing dataに伴うrisk of biasのグレードダウン評価を補完戦略で考え、さらに診療ガイドラインのエビデンスの質評価にも利用いようと主張しています。

■研究における参加の流れ
figure

■解析方法
table1

■missing matrix
missing_matrix

 

日本語版GRADEpro GDTの公開

2016年4月11日 Posted by aihara

GRADEガイドライン作成のためのツール”GRADEpro GDTの日本語版”が公開されました。

http://gradepro.org/にログイン後(ブラウザとしてGoogle chromeまたはFirefoxが推奨)に、ツールバーのsetting>language>日本語(Japanese)で利用可能です。

現時点でGDT作成者らの和訳対象資料はすべて翻訳ずみですが、実際にGDTを立ち上げると日本語変換ができていないものがあるようです。

GDT-jp

GDTの利用法は、以下の資料を参考にしてください。

GDTの使い方-臨床疑問の優先順位づけ_0129.pdf
診療ガイドラインのためのGRADEシステム第2版(2015)

 

 

GRADEユーザーズガイド

2016年3月28日 Posted by aihara

GRADE working groupによる、GRADEのユーザーズガイドに関する論文です。

A guide for health professionals to interpret and use recommendations in guidelines developed with the GRADE approach
Neuman I, et al. JCE 2016;72:45-55

ポイントは2つです。

(1)推奨を批判的に吟味するためのユーザーズガイド:

●Were all the relevant outcomes important to patients explicitly considered?
●Was the recommendation based on the best current evidence?
●Is the strength of the recommendation appropriate?
●Is the recommendation clear, actionable, and does it provide the necessary information?
●Does the recommendation provide the necessary additional information?

臨床シナリオ:心房細動と高血圧をもつ55歳の患者には、どの抗血栓治療が最も適切か?
ビタミンK拮抗薬、ダビガトラン

(2)GRADEを使ったとする最小限の基準にしたがって作成された推奨は、信頼できる診療ガイドラインの最も重要な基準をおそらく満たしているだろう。

trustworthy

この”GRADEを使ったとする最小限の基準”を使って国内のGRADE診療ガイドラインの一部を評価したものが、
GRADEを利用した国内の診療ガイドラインです。

国内には信頼できる診療ガイドラインが非常に少なく、その理由の一つはGuideline methodologistが参加していないことでしょう。

 

診断GRADEとEvidene to Decisionフレームワーク

2016年3月12日 Posted by aihara

診断精度検査に関するGRADEシステムの適用とEvidence to Decision フレームワークについての論文です。

Development of the GRADE Evidence to Decision (EtD) frameworks for tests in clinical practice and public health.
Schünemann HJ, Mustafa R, Brozek J, Santesso N, Alonso-Coello P, Guyatt G, Scholten R, Langendam M, Leeflang MM, Akl EA, Singh J, Meerpohl J, Hultcrantz M, Bossuyt P, Oxman AD; GRADE Working Group.
http://www.ncbi.nlm.nih.gov/pubmed/26931285

実際のエビデンステーブル(SoF, iSoF, EtD)などは以下のオンラインデータで閲覧可能です。

http://dbep.gradepro.org/profile/E6E2B650-7F68-405D-96C6-8D2CE131CD9D

CQ:
Should Highly sensitive D-Dimer (ELISA) be used to diagnose DVT in patients with suspected DVT but low pretest probability?

layer one EP

診断GRADEを理解するためには、
「診療ガイドラインのためのGRADEシステム」第2版が必須です。

 

 

診療ガイドラインの質評価が求められている

2016年3月1日 Posted by aihara

国内においては相変わらず不適切な手法による診療ガイドラインが乱造されています。

GRADEを利用した国内の診療ガイドライン
IOM基準による国内の診療ガイドライン作成法の評価

しかし、そろそろ診療ガイドラインの質(特に作成手法の厳格さ)を評価する精度の高いツールを開発すべきと思います。既存のツールとしては、以下のようなものが代表的ですが、アウトカム中心のエビデンスの質評価、アウトカム全般にわたるbody of evidenceの質と推奨の強さの関連づけなど、診療ガイドラインの質を十分に評価できるかどうか疑問があります。

WHOチェックリスト
COGSチェックリスト
AGREE-II
IOM基準
GIN-McMasterチェックリスト
Cluzeau評価ツール
Shaneyfelt基準

(これらについては、「診療ガイドラインのためのGRADEシステム第2版」も参照ください)

つまり、たとえば単純にAGREE-II評価を実施して高得点といって合意しても、肝心の作成手法の項目がいいかげんなものでは診療ガイドラインの質は高くないということです。
以下は、海外GRADE working group memberからのコメントです。

Dear Morio,
Not sure whether someone has done that yet.
Personally, I would not use AGREE as it is not specific enough and is mostly about process.
Same with IOM. It is a good starting point and broader framework, but if one would have to closely look at “guideline quality”, I think we need a new checklist. I believe there was a group that worked on this using Delphi technique, but I have not seen the final result.

There are fundamental issues at play: for example, do you rate studies or outcomes? You could have a traditional study based rating system in place and get top points with AGREE and IOM and I would argue unless you do outcomes based rating, such as GRADE, the guideline would be
worthless to me. Example in point: both IDSA and AASLD use GRADE, but they broke all their internal rules when they teamed up and created a
separate guideline for hep c that does not use GRADE. And predictably, it is very poor. They knew that if they use GRADE, there would be much less chance of injecting their opinion into the guideline.

So for any guideline rating system to be sensible, people would have to agree that you cannot give appropriate recommendations without
separating study level issues from rating our confidence in the effect of an outcome and ideally be able to trade-off outcomes against each
other (which, as you know, we did in AT9). I haven’t seen any guidelines similar in quality as AT9 but of course there’s a good chance I missed other excellent guidelines.

Best,
Yngve

On 2/28/2016 10:52 PM, morio aihara wrote:
> Dear Yngve

> Is there any report that compared the quality of some CPG (with GRADE vs non-GRADE) using AGREE criteria or IOM standard?

> Best wishes,
> Morio

結局のところ、診療ガイドライン作成においてGRADEシステムを利用することが、診療ガイドイランの質評価ツール基準を満たす確率が高くなる方向です。
したがって診療ガイドラインはGRADEを使って作成し、そしてGRADEを適切に利用したかどうかを外部評価を含め客観的に判断することがベストと思います。

その方法は?・・・・

「GRADEを利用したと言えるための最小限の基準」を利用することでしょう。
 

GRADE評価の再現性

2016年2月4日 Posted by aihara

GRADE文献紹介。
Kumar A, Miladinovic B, Guyatt GH, Schunemann HJ, Djulbegovic B. GRADE guidelines system is reproducible when instructions are clearly operationalized even among the guidelines panel members with limited experience with GRADE.
http://dx.doi.org/10.1016/j.jclinepi.2015.11.020

目的と方向:
GRADEを使った評価の再現性を調べるために、18人のメンバー(American Association of Blood Banking (AABB)パネル。1時間のGRADE講義を2回受講)における評価者間の一致度(κ係数)を調査した。血小板輸血に関連する効果推定値の確信性と推奨について検討した。

結果:
2つのドメイン(エビデンスの質と、推奨の方向)に関して、評価者間の一致度が良好だった。

GRADEドメイン
Kappa (95%CI)
評価者間一致度
エビデンスの質 0.68 (0.25-0.57) 良好
利益と害のバランス 0.40 (0.25-0.57) まあまあ
資源の利用 0.28 (0.12-0.42) まあまあ
患者の価値観や好み 0.44 (0.31-0.56) 中等度
推奨
方向 0.74 (0.33-0.91) 良好
強さ 0.39 (0.18-0.68) まあまあ

 

結論:
GRADE方法論を十分に理解してない者でも、”エビデンスの質”や”推奨の方向”の2つに関しては、評価者間の一致度は良好である。これは、2つのドメインに関しては、他のGRADEドメインよりも詳細に運用可能となっているためだろう。
今後、新バージョンのEvidence to Decision framework(DECIDE)を利用することで、再現性が高まるだろう。

 

GDTの使い方:臨床疑問の優先順位づけ

2016年1月30日 Posted by aihara

GRADEpro GDTは、診療ガイドラインにとって必須のGRADEエビデンスプロファイルを作成するためのツールです。GRADEエビデンスプロファイルとは、以下のようなアウトカムごとのbody of evidenceの質とsummary of findingが同時に表示されているエビデンステーブルです(図1)。

図1:GRADEエビデンスプロファイル

fig-0

 

さて、エビデンスプロファイル作成の最初のステップは、患者にとって重要な臨床疑問(CQ)をリストアップすることですが、GDTを使って診療ガイドライン作成チーム全体として(特に、ガイドラインモジュレータを中心)、CQのリストアップ、課題抽出、優先順位づけなどのステップを簡単に紹介します。

1. GDTサイト(http://gradepro.org/)にアクセスし、ログイン

2. 新規プロジェクトの作成:Start new>”full guideline”>name: test sample>”Create project”
(ここではプロジェクトのタイプを”full guideline”、プロジェクト名をtest_sampleとしています)

fig-1

 

3. 左フレームから「SCOPE」モジュールを選択し、SCOPE>QUESTIONSと進みます。
CQ作成のためのステップが以下の7つのタグで表示されています(図2)。

図2

scope_cq

[Initial draft]>”add management question”をクリックし、CQの各成分を入力し、[initial draft](初期の下書き)を作成します。
(ここでは、以下の3つのCQを作成)

fig-2

入力完了後は、”finish and send to team members”をクリックし、次のステップに進みます。

 

4. 左から2つ目のタグの [brainstorming](課題抽出)段階で作成した下書きCQへのリンクを記載したメールを、チームメンバーに送り検討することになりますが、その前に下書きCQに関するwebデータを処理するためのチームメンバーを登録する必要があります。
左フレームのTEAM>MEMBERS>”add team member”をクリックしてメンバーを登録します。

(注:登録メンバーはあらかじめGDTにアカウント登録が必要)

fig-3

 

5.再びQuestionにもどり(SCOPE>QUESTIONS>)、”finish and send to team members”をクリック、ポップアップ表示される”Are you sure you want to proceed to the next step?”をクリック
この操作により、step 4で登録したメンバーにwebリンクを記載した内容のemail(メールのタイトル:”Selection of questions for the guidelines:プロジェクト名”)が送信されます。

 

6. (モジュレータから案内を受けたチームメンバーは)受診メールに記載されるURLにアクセス。
必要ならばコメントやCQを追加し、下部に表示されているオレンジ色の”submit”ボタンをクリック。

fig-4

その後、ガイドラインモジュレータは、”Close brainstoming and proceed to mederation”をクリックして次のステップに進みます。

7. [Completed list](完了リスト): 必要ならばコメントやCQを追加し、”send for prioritizing”をクリック
CQの重要性についての優先順位づけのアクセスリンクを記載したメールがチームメンバーに送信されます。
メールのタイトル:”Prioritization of questions for the guidelines:プロジェクト名”

fig-5

8. [Prioritizing](優先順位づけ)の段階では、登録されたチームメンバーの左表示カラー部が、下図のように黄色(未評価)になっています。

fig-6

連絡したメンバーが各CQについて”等級”を実施したかどうかは、「refresh」(更新)ボタンをクリックすることにより確認可能で、等級実施済みの場合には、メンバー名の左側カラー表示が、下図のように、黄色から緑色に変わります。

refresh

 

9. (モジュレータから案内を受けたチームメンバーは)受診メールにあるURLにアクセスして、優先順位を評価します。評価は、1~9ポイントのいずれかを選択し、必要ならばコメントを入力し、オレンジ色の”save and finish”ボタンをクリックします。
(本例では、team member-1は、CQ1を9点、CQ2を8点、CQ3を2点と等級しています)

fig-7

 

モジュレータは(refreshボタンを使用して)チームメンバーの投票が完了したことを確認したならば、”close prioritizing” をクリックし、次のステップ(Final list for approval)に進みます。

 

10. [Final list for approval](承認用の最終リスト): 評価の等級によって3段階(回答すべき、リストに含めるべき、除外すべき)に分類されたCQリストが、等級の中央値順に並び替えられて表示されます。モジュレータはコメントを加えて評価の等級を修正することができ、それが完了したならば、”send for approval”をクリックします。
この操作により、チームメンバーに承認のためのwebリンクを記載したemail(メールのタイトル:”Confirmation of the final list of questions for the guidelines”:プロジェクト名”)が送信されます。

fig-9

ガイドラインのモジュレーターは、”send for approved list”をクリックして次に進みます。

 

モジュレータから案内を受けたチームメンバーは、CQリストの”承認”に関するメールに記載されたURLにアクセスして、承認yes/noの判断をチェックして、オレンジ色の「保存」ボタンをクリックします。

approval

 

11. [Approved list」(承認されたリスト):モジュレータは、メンバーが各CQについて“承認チェック”を実施したかどうかを、「refresh」ボタンで確認可能で、実施済みの場合には、メンバー名の左側のカラー表示が、黄色から緑色に変わります。
(本例では、team member-2がいまだ未承認ということがわかります)

approved list

モジュレータは、全メンバーが承認したことを確認して(refreshボタンを使って、メンバーの表示が緑色となる)、投票を終了します。”Close voting and copy the questions to Questions module”をクリック。
(この操作により、左フレームの「QUESTIONS」モジュールに、承認されたCQ(本例では、CQ1とCQ2)がコピーされます)

 

12. [Finished](完了):除外されたCQ3は、「DOCUMENT SECTIONS」モジュールの”附録”の項で閲覧可能となっています。

finished

excuded
 

13. 診療ガイドラインにおいて回答すべきCQが完了したならば、次は・・・・

アウトカムごとにbody of evidenceの質とSummary of findingの入力となります(つまり、GRADEエビデンスプロファイルの作成です)。
この作業は、[COMPARISONS](比較)モジュールにおいて実施します。
COMPARISONS>(select question)と進み、目的のCQを選択して、”add outcome”をクリック。

(こうして作成したエビデンスプロファイル例が、最初に紹介した図1です)

 

body of evidenceとはなにか?
エビデンスの質はどのように決定するか?
さらに、エビデンスから推奨を決定する際に使うEvidence to Decisionテーブルとはなにか?

などについては、「診療ガイドラインのためのGRADEシステム」を参照ください。

本記事をダウンロードする:pdf
GRADE関連の online supplement material
GDTの使い方-臨床疑問の優先順位づけ_0129.pdf

 

GRADEエビデンステーブルの改善

2016年1月18日 Posted by aihara

GRADEを使ってシステマティックレビュー、HTA、診療ガイドラインを作成する際に、エビデンステーブルをどのように作成すべきかに関する論文です。

Santesso N, Carrasco-Labra A, Langendam M, Brignardello-Petersen R, Mustafa RA, Heus P, Lasserson T, Opiyo N, Kunnamo I, Sinclair D, Garner P, Treweek S, Tovey D, Akl EA, Tugwell P, Brozek JL, Guyatt G, Schünemann H,
Improving GRADE Evidence Tables part 3:Guidance for useful GRADE certainty in the evidence judgments through explanatory footnotes, Journal of Clinical Epidemiology (2016), doi: 10.1016/j.jclinepi.2015.12.006

本論文には、GRADEの8ドメインやエビデンスの確実性の評価に関して、どのように記載すべきかの具体的な手引きが記載されています。
GRADEガイドライン作成者は、必読ものです。

例:
tab_a

GRADEpro GDTの日本語版

2016年1月16日 Posted by aihara

GRADEpro GDT(G2DT)の日本語版作成作業を先週からスタート。 (^^)

G2DTの日本語版が、おそらく日本の診療ガイドライン作成システムを大きく変えることになると思って、GRADErの協力者(大田さん、湯浅先生、南郷先生)とともに作業しています。
G2DTの日本語版が公開できると、body of evidenceの必要性がより理解されるでしょうし、また作成した「推奨」に関連するGRADEエビデンスプロファイル(Evidence profile)のリンクや、Evidence to Recommendation (EtR)Evidence to Decision (EtD)テーブルの作成がルーチン化すると思います。

もっとも、G2DTの日本語版公開後も Mindsの「R」や「エクセル」を中心としたシステムが継続されるようならば、お手上げですね。

■海外のG2DT翻訳の現状が以下です。

gdt_translation
 

GRADEの今後: JCEシリーズ

2016年1月7日 Posted by aihara

GRADEアプローチに関しては、今後 以下の論文がJCEシリーズとして発表される予定になっています。

***************
Diagnostic tests
14. Applying GRADE to diagnostic testsー summarizing the evidence

Making recommendations
15. Going from evidence to recommendationsー the meaning of strong and weak recommendations
16. Going from evidence to recommendationsーdeterminants of a recommendation’s direction and strength
17. Going from evidence to recommendationsーresource use
18. Going from evidence to recommendationsーdiagnostic tests

Observational studies
19. Special challenges in using observational studies
20. GRADE for public health and health policymaking

Concluding articles
21. Group processes, variations of GRADE, and further developments of GRADE part 1
22. Group processes, variations of GRADE, and further developments of GRADE part 2
・・・・・While this is the last article in this series, the work of the GRADE working group is not finished.

このように、JCEシリーズにとどまることなく、さまざまなフィードバックを参考にしつつ、適応拡大を検討していくという方針です。

 

  • カレンダー

    2025年4月
     123456
    78910111213
    14151617181920
    21222324252627
    282930  
  • 最近の投稿

  • アーカイブ