Oleh: Gita Kostania

Materi di-upload pada: https://www.academia.edu/43411594/Penilaian_Kritis_Critical_Appraisal_terhadap_Bukti-Bukti_Artikel_Penelitian

Tujuan Pembelajaran

Setelah mempelajari materi ini, Anda diharapkan dapat melakukan penilaian kritis (Critical Appraisal) terhadap bukti-bukti/ artikel penelitian yang telah didapatkan secara online. Secara khusus, Anda diharapkan dapat:

1. Mengembangkan pertanyaan penelitian.
2. Menentukan critical appraisal worksheet yang sesuai.
3. Menginterpretasikan evidence.

Credit: criticalappraisal.com

Uraian Materi: Penilaian Kritis (Critical Appraisal) terhadap Bukti-Bukti/ Artikel Penelitian

Penilaian kritis adalah evaluasi sistematis dari makalah penelitian klinis untuk menetapkan:

1. Apakah penelitian ini membahas pertanyaan yang jelas fokus?
2. Apakah penelitian menggunakan metode yang valid untuk menjawab pertanyaan ini?
3. Apakah hasil yang valid dari penelitian ini penting?
4. Apakah hasil yang valid dan penting ini berlaku untuk pasien atau populasi saya?

Apabila jawaban untuk semua pertanyaan ini adalah “tidak”, Anda dapat menyelamatkan diri dari kesulitan membaca sisanya. Untuk dapat penilaian kritis/ menafsirkan bukti, Anda hanya perlu bisa bagaimana Cara membaca makalah dan bagaimana cara menghitung perhitungan analisis hasil penelitian.

Hal yang perlu diperhatikan adalah bahwa Anda TIDAK harus menjadi peneliti, ahli epidemiologi, atau ahli statistik untuk menjalankan EBM / EBP. Anda hanya perlu fokus pada bagaimana MENGGUNAKAN laporan penelitian, bukan pada bagaimana menghasilkannya. Namun, Anda harus memiliki pemahaman yang kuat tentang prinsip-prinsip penelitian dasar dan pelajari desain untuk memahami dan menafsirkan bukti. Mengevaluasi Bukti Tertulis dilakukan untuk mengetahui kualitas dan kegunaan hasil penelitian tersebut, dengan menilai validitas, keandalan, relevansi, dan kepentingan klinis.

Dalam melakukan penilaian kritis, kita akan menggunakan worksheet/ lembar kerja, terdiri atas:

1. Systematic review
2. Treatment and prevention test, berupa desain RCT
3. Diagnostic test
4. Prognostic test
5. Etiology and meaning test, berupa desain descriptive study dan cross sectional study.

Masing-masing worksheet diadopsi dari worksheet by. Centre for Evidence-Based Medicine, University of Oxford, 2010. Worksheet tersebut dijelaskan sebagai berikut:

1. Worksheet Critical Appraisal untuk Systematic Review dan Research Synthesis

Judul Artikel:
Penulis:
Tanggal Publikasi:
Publisher:
No.	Penjelasan	Ya	Tidak	Tidak Jelas	Tidak Berlaku
1.	Apakah pertanyaan ulasan dinyatakan dengan jelas dan eksplisit?
2.	Apakah kriteria inklusi sesuai untuk pertanyaan ulasan?
3.	Apakah strategi pencarian sesuai?
4.	Apakah sumber dan sumber daya yang digunakan untuk mencari studi memadai?
5.	Apakah kriteria untuk menilai studi sesuai?
6.	Apakah penilaian kritis dilakukan oleh dua atau lebih pengulas secara independen?
7.	Apakah ada metode untuk meminimalkan kesalahan dalam ekstraksi data?
8.	Apakah metode yang digunakan untuk menggabungkan studi sesuai?
9.	Apakah kemungkinan bias publikasi dinilai?
10.	Apakah rekomendasi untuk kebijakan dan / atau praktik didukung oleh data yang dilaporkan ?
11.	Apakah arahan khusus untuk penelitian baru sesuai?
Penilaian Keseluruhan: Inklusi  □      Eksklusi □     Cari Info Lebih Lanjut □
Komentar (Termasuk Alasan untuk Faktor Eksklusi)

 

2. Worksheet Critical Appraisal untuk Artikel Treatment atau Prevention dengan Desain Penelitian Randomized Control Trial (RCT)

Judul Artikel:
Penulis:
Tanggal Publikasi:
Publisher:
Apakah Studi ini Merumuskan Pertanyaan Penelitian yang Jelas ?
1	Apakah yang berikut ini dengan jelas dinyatakan: Perbandingan intervensi pasien-pasien dengan hasil (outcome) intervensi.	Ya	Tidak Bisa Dijelaskan	Tidak
Apakah Hasil Percobaan Tunggal ini Valid ?
A.	Pertanyaan utama untuk dijawab	Ya	Tidak Bisa Dijelaskan	Tidak
2	Apakah uji coba kepada pasien untuk perawatan dilakukan secara acak?
3	Apakah daftar pengacakan disembunyikan? Bisakah Anda jelaskan ?
4	Apakah semua subjek yang memasuki uji coba intervensi bertanggung jawab atas kesimpulan penelitian?
5	Apakah mereka dianalisis dalam kelompok yang diacak, yaitu intention-to-treat analysis (ITT)?
B.	Beberapa poin yang lebih baik untuk dijawab	Ya	Tidak Bisa Dijelaskan	Tidak
6	Apakah subyek dan klinisi ‘buta’ (blinded) terhadap perawatan mana yang sedang diterima, mis. Bisakah mereka memberi tahu?
7	Selain dari perlakuan eksperimental, apakah kelompok diperlakukan sama?
8	Apakah kelompok-kelompok tersebut serupa pada awal percobaan?

Apa Hasilnya?

Group	Outcome event		Total
	Yes	No
Experimental group	a	b	a+b
Control group	c	d	b+c

Keterangan:

1. Experimental Event Rate = risiko kejadian hasil dalam kelompok eksperimen = EER = a/(a+b)
2. Control Event Rate = risiko kejadian hasil pada kelompok kontrol = CER = c/(c+d)
3. Relative Risk (RR) = EER/ CER
4. Odds Ratio (OR)= ad/bc
5. Relative Risk Reduction (RRR) = (CER – EER)/CER or 1 – RR
6. Absolute Risk Reduction (ARR) = CER – EER
7. Number Needed to Treat (NNT) = 1/ARR = 1/(CER – EER)

9	Seberapa besar efek pengobatannya? Pertimbangkan: Bagaimana hasilnya diungkapkan (RRR, NNT, dll).
10	Seberapa tepat hasilnya? Apakah hasil disajikan dengan interval kepercayaan (Convidence Interval)?

 

Dapatkah Saya Menerapkan Hasil yang Valid dan Penting untuk Pasien Saya?
11	Apakah hasil ini berlaku untuk pasien saya? ü Apakah pasien saya sangat berbeda dari pasien dalam percobaan sehingga hasilnya tidak berlaku? ü Seberapa besar manfaat terapi bagi pasien saya?	Ya	Tidak Bisa Dijelaskan	Tidak
12	Apakah nilai dan preferensi pasien saya puas dengan intervensi yang ditawarkan? ü Apakah saya memiliki penilaian yang jelas tentang nilai dan preferensi pasien saya? ü Apakah mereka dipenuhi oleh rejimen ini dan kemungkinan konsekuensinya?

 

Keterangan:

Randomised controlled trial (RCT)	Uji klinis dimana setidaknya dua kelompok perlakuan dibandingkan. Seseorang harus menjadi grup kontrol, mis. menerima perawatan standar atau perawatan plasebo. Alokasi ke grup harus acak dan tidak bias.
Randomisation	Proses mengalokasikan individu ke perawatan alternatif dalam uji klinis, menghindari bias. Harus menghasilkan kelompok yang serupa, kecuali untuk perlakuan yang menarik.
Blinding	Proses memastikan bahwa peserta/ responden atau peneliti (single-blind) atau peserta dan peneliti (double-blind) tidak mengetahui peserta kelompok perlakuan mana yang telah diacak, mengurangi kemungkinan bias dalam hasil
Intention-to-treat analysis (ITT)	Semua pasien yang dialokasikan untuk satu kelompok RCT dianalisis dalam kelompok itu, apakah mereka menyelesaikan pengobatan atau rejimen yang ditentukan.
Experimental Event Rate (EER)	Risiko (atau peluang) peristiwa hasil dalam kelompok eksperimen.
Control Event Rate (CER)	Risiko (atau peluang) peristiwa hasil dalam kelompok kontrol.
Relative Risk (RR)	Ukuran peluang kejadian yang terjadi pada kelompok eksperimen relatif terhadap yang terjadi pada kelompok kontrol.
Relative Risk Reduction (RRR)	Perbedaan dalam proporsi peristiwa antara kelompok kontrol dan eksperimen, relatif terhadap proporsi peristiwa dalam kelompok kontrol. Dapat juga dihitung sebagai 1-RR.
Absolute risk reduction (ARR)	Perbedaan mutlak antara risiko peristiwa dalam kelompok kontrol dan eksperimen
Number Needed to Treat (NNT)	Jumlah pasien yang perlu dirawat untuk mencegah terjadinya satu peristiwa buruk (mis. komplikasi, kematian) atau mempromosikan terjadinya satu peristiwa bermanfaat (mis. penghentian merokok).
Confidence Interval	Untuk efek apa pun yang diukur (mis. RR, RRR, ARR, NTT), interval kepercayaan adalah rentang nilai di mana nilai “benar” dalam populasi ditemukan. Umumnya dinyatakan sebagai interval kepercayaan 95%, mis. Anda bisa yakin 95% bahwa nilai populasi berada dalam batas-batas itu.

 

3. Worksheet Critical Appraisal untuk Artikel Diagnostic Test

Judul Artikel:

Penulis:

Tanggal Publikasi:

Publisher:

 Step 1: Apakah hasil penelitian valid?

Apakah tes diagnostik dievaluasi dalam spektrum perwakilan pasien (seperti yang akan digunakan dalam praktik)?
Apa yang terbaik?	Dimana saya mendapatkan informasi?
Artikel ini: Ya      Tidak      Tidak Jelas  Komentar:
Adakah perbandingan independen dan “blinded” antara tes indeks dan standar diagnosis yang sesuai (‘gold standard’)?
Apa yang terbaik?	Dimana saya mendapatkan informasi?
Artikel ini: Ya      Tidak      Tidak Jelas  Komentar:

Step 2: Apa hasilnya?

Apakah karakteristik pengujian disajikan?
Apa ukurannya?	Apa artinya?
Sensitivity (Sn) = Proporsi orang dengan kondisi yang memiliki hasil tes positif.
Specificity (Sp) = Proporsi orang tanpa kondisi yang memiliki hasil tes negatif.
Positive Predictive Value (PPV) = Proporsi orang dengan tes positif yang memiliki kondisi.
Negative Predictive Value (NPV) = Proporsi orang dengan tes negatif yang tidak memiliki kondisi.

Step 3: Penerapan hasil

Apakah metode untuk melakukan tes dijelaskan secara cukup rinci untuk memungkinkan replikasi?
Apa yang terbaik?	Dimana saya mendapatkan informasi?
Artikel ini: Ya      Tidak      Tidak Jelas  Komentar:

4. Worksheet Critical Appraisal untuk Artikel Prognostic Test

Judul Artikel:
Penulis:
Tanggal Publikasi:
Publisher:
Apakah hasil penelitian ini valid? (Validitas internal)
1. Apakah sampel representatif yang ditentukan dari pasien dikumpulkan pada titik umum (biasanya awal) dalam perjalanan penyakit mereka)?
Apa yang terbaik?	Dimana saya mendapatkan informasi?
Artikel ini: Ya      Tidak      Tidak Jelas  Komentar:
2. Apakah tindak lanjut pasien cukup lama dan lengkap?
Apa yang terbaik?	Dimana saya mendapatkan informasi?
Artikel ini: Ya      Tidak  Tidak Jelas  Komentar:
3. Apakah kriteria hasil objektif atau diterapkan secara ‘buta’?
Apa yang terbaik?	Dimana saya mendapatkan informasi?
Artikel ini: Ya      Tidak  Tidak Jelas  Komentar:
4. Jika subkelompok dengan prognosis berbeda diidentifikasi, apakah penyesuaian untuk faktor prognostik penting terjadi?
Apa yang terbaik?	Dimana saya mendapatkan informasi?
Artikel ini: Ya      Tidak  Tidak Jelas  Komentar:
Apa Hasilnya?
Seberapa besar kemungkinan hasilnya dari waktu ke waktu?
Seberapa tepat perkiraan prognostiknya?
Dapatkah saya menerapkan bukti penting dan valid tentang prognosis ini kepada pasien saya?

5. Worksheet Critical Appraisal untuk Descriptive Study (Studi Korelasi dan Studi Komparasi)

Panduan Appraisal	Komentar
I. Apakah metodenya valid / dapat dipercaya ?
1. Apakah pertanyaan penelitiannya jelas? Apakah kebutuhan untuk penelitian cukup dibuktikan? Jelaskan!
2.  Apa desain penelitian ini? Bagaimana data dikumpulkan (satu kali (cross-sectional) atau diulang dari waktu ke waktu (longitudinal)? Apa keterbatasan metode pengumpulan data?
3.  Jelaskan sampel. Bagaimana sampel dipilih (kriteria kelayakan)? Bagaimana sampel mewakili populasi?
4. Jelaskan variabel yang menarik. Jika studi perbandingan, pada variabel apa kelompok-kelompok tersebut dibandingkan? Bagaimana kesamaan kelompok? Bagaimana perbedaan kelompok? Jika ini adalah studi korelasi, pada variabel apa saja asosiasi diperiksa? Apakah ada variabel perancu?	.
5. Apakah ukuran sampel cukup besar untuk mendeteksi hubungan atau perbedaan yang signifikan secara statistik? Apakah analisis kekuatan dilakukan?
6. Apakah ada sumber bias potensial? (Perbedaan antara kelompok-kelompok yang tidak diperhitungkan dalam analisis, drop-out, hasil diskon, agen pendanaan, dll.)
7. Jelaskan keandalan dan validitas tindakan. Apakah langkah-langkah yang sesuai untuk populasi atau variabel sedang dipelajari? Jelaskan!
8. Apakah rencana analisis (metode statistik) dijelaskan secara rinci? Bagaimana data didistribusikan (mis., Normal versus condong)? Apakah tes korelatif dan komparatif sesuai untuk jenis data yang dianalisis dan pertanyaan yang diajukan? Jelaskan!
II. Apa hasil / temuannya ?
1. What were the findings? Apa saja temuannya
2.  Was there clinical significance? Statistical significance? Apakah ada signifikansi klinis? Signifikansi statistik?
3. Did the authors put their findings in the context of the broader literature on this topic?  Explain Apakah penulis menempatkan temuan mereka dalam konteks literatur yang lebih luas tentang topik ini? Menjelaskan
III. Bagaimana saya bisa menerapkan hasil / temuan ?
1. Apa relevansi temuan dengan praktik klinik?
2. Diskusikan bagaimana temuan dapat diterapkan pada praktik.

6. Worksheet Critical Appraisal untuk Artikel Cross Sectional Study (Penelitian Survey)

No	Pertanyaan Appraisal	Ya	Tidak Dapat Dijelaskan	Tidak
1.	Apakah penelitian ini membahas pertanyaan / masalah yang difokuskan dengan jelas?
2.	Apakah metode penelitian (desain penelitian) sesuai untuk menjawab pertanyaan penelitian?
3.	Apakah metode pemilihan subjek penelitian (karyawan, tim, divisi, organisasi) dijelaskan dengan jelas?
4.	Bisakah cara sampel diperoleh menimbulkan bias (seleksi)?
5.	Apakah sampel dari subjek representatif terkait populasi yang akan dirujuk temuannya?
6.	Apakah ukuran sampel berdasarkan pertimbangan pra-studi kekuatan statistik?
7.	Apakah tingkat respons yang memuaskan tercapai?
8.	Apakah pengukuran (kuesioner) cenderung valid dan dapat diandalkan?
9.	Apakah signifikansi statistik dinilai?
10.	Apakah interval kepercayaan diberikan untuk hasil utama?
11.	Mungkinkah ada faktor pembaur yang belum diperhitungkan?
12.	Bisakah hasilnya diterapkan ke organisasi Anda?

RINGKASAN

Critical Appraisal / penilaian kritis adalah evaluasi sistematis dari makalah penelitian klinis untuk menetapkan kevalidan penelitian. Untuk dapat melakukan penilaian kritis/ menafsirkan bukti, Anda hanya perlu bisa bagaimana Cara membaca makalah dan bagaimana cara menghitung perhitungan analisis hasil penelitian.

Dalam melakukan penilaian kritis, worksheet/ lembar kerja yang digunakan, terdiri atas worksheet: systematic review, treatment and prevention test, berupa desain rct, diagnostic test, prognostic test, etiology and meaning test, berupa desain descriptive study dan cross sectional study.

---

Untuk mensitasi: https://www.academia.edu/43411594/Penilaian_Kritis_Critical_Appraisal_terhadap_Bukti-Bukti_Artikel_Penelitian