در کارآزماییهای تصادفیسازی و کنترل شده (randomised controlled trials; RCTs) چند مرکزی، ارزیابی رویدادها توسط کمیتههای داوری (adjudication committees; ACs) توصیه میشود. با این حال، مفید بودن آن مورد تردید قرار گرفته است.
هدف از این مرور سیستماتیک، مقایسه 1) تخمین تاثیر درمان بر رویدادهای بالینی ذهنی (subjective) و ارزیابی شده توسط ارزیابان در محل در برابر AC، و 2) تخمین تاثیر درمان با توجه به وضعیت کورسازی (blinding) ارزیاب در محل (onsite) و همچنین فرآیند مورد استفاده برای انتخاب رویدادها برای قضاوت کردن بود.
پایگاه مرکزی ثبت کارآزماییهای کنترل شده کاکرین (CENTRAL)؛ PubMed؛ EMBASE؛ PsycINFO؛ CINAHL و Google Scholar (25 آگوست 2015 به عنوان آخرین تاریخ جستوجوی بهروز شده) را با استفاده از ترکیبی از عبارات برای بازیابی RCTها با اصطلاحات شایع برای توصیف ACها جستوجو کردیم.
همه گزارشهای RCTها و RCTهای منتشر شدهای را وارد کردیم که در مرورها و متاآنالیزها گنجانده شده، و رویداد پیامد ذهنی مشابهی را گزارش کردند که هم توسط یک ارزیاب در محل و هم توسط یک AC ارزیابی شدند.
نسبت شانس (OR) را از ارزیابی در محل و OR مربوطه را از ارزیابی AC استخراج کرده و نسبت نسبتهای شانس (ratio of the odds ratios; ROR) را محاسبه کردیم. نسبت نسبتهای شانس کمتر از 1 نشان داد که ارزیابان در محل تخمین اثرگذاری بزرگتری را به نفع درمان تجربی نسبت به ACها به دست آوردند.
دادههای حاصل از 47 RCT (275,078 بیمار) در متاآنالیز استفاده شدند. تعداد 11 RCT را به دلیل دادههای ناقص پیامد برای محاسبه OR برای ارزیابیهای در محل و AC حذف کردیم. بهطور میانگین، هیچ تفاوتی در تخمین تاثیر درمان از ارزیابان در محل و AC وجود نداشت (ROR ترکیبی: 1.00؛ 95% فاصله اطمینان (CI): 0.97 تا 1.04؛ I 2 = 0%؛ 47 RCT). زمانی که ارزیابان در محل کورسازی شدند، ROR ترکیبی 1.00 بود (95% CI؛ 0.96 تا 1.04؛ I 2 = 0%؛ 35 RCT)؛ زمانی که AC رویدادهایی را ارزیابی کرد که بهطور مستقل از ارزیابان کورسازی نشده در محل شناسایی شدند، معادل 0.76 (95% CI؛ 0.48 تا 1.12؛ I 2 = 0%، دو RCT) گزارش شد؛ و زمانی که AC رویدادهای شناسایی شده را توسط ارزیابان کورسازی نشده در محل ارزیابی کرد، 1.11 (95% CI؛ 0.96 تا 1.27؛ I 2 = 0%؛ 10 RCT) بود. با این حال، اثر متقابل (interaction) میان این زیر گروهها از اهمیت آماری برخوردار بود (P = 0.03).
بهطور متوسط، تخمینهای تاثیر درمان برای رویدادهای پیامد ذهنی ارزیابی شده توسط ارزیابان در محل با مواردی که توسط ACها ارزیابی شدند، تفاوتی نداشت. نتایج تجزیهوتحلیل زیر گروه یک اثر متقابل (interaction) را با توجه به وضعیت کورسازی ارزیابان در محل و فرآیند مورد استفاده را برای ارسال دادهها به AC نشان داد. این نتایج نشان میدهند که استفاده از ACها ممکن است زمانی مهم باشد که ارزیابان در محل کور نشده باشند و خطر طبقهبندی اشتباه بالا باشد. علاوه بر این، برای بررسی تاثیر پروسیجرهای مختلف مورد استفاده برای انتخاب رویدادها برای قضاوت، انجام پژوهش لازم است.