條文本
PDF
文摘
介紹臨床試驗醫學知識的進步至關重要。然而,實驗結論的可靠性在一定程度上取決於預先計劃和報告研究結果之間的一致性。不幸的是,選擇性報告結果,結果報告發表的手稿與預先確定的研究成果,是常見的。試驗注冊如ClinicalTrials.gov有可能幫助識別和阻止選擇性報告結果在同行評審通過允許同行評議者比較結果之間的注冊表項和提交的手稿。然而,居高不下的選擇性報告中發表的臨床試驗結果表明,當前的同行評審過程最多期刊不能有效地解決問題的選擇性報告結果。
和分析方法PRE-REPORT是stepped-wedge cluster-randomised試驗將測試是否為同行評議者提供注冊的摘要,預先確定的主要試驗結果減少之間的矛盾前瞻性注冊和發表的主要結果。同行評議的手稿描述的臨床試驗結果將包括在內。合格的手稿提交給每個參與研究期間將包括每個集群》雜誌上。初始控製階段後,期刊會幹預階段過渡到以隨機的順序,然後同行評議者將郵件注冊信息包括登記的日期和主要定義的任何預期的結果。盲法評估結果將比較注冊和發布主要包括試驗結果。主PRE-REPORT結果發表主要結果的存在是符合定義的前瞻性研究的主要結果的審判注冊表。主要的結果將使用混合效果邏輯回歸模型分析比較結果之間的幹預和控製階段。
道德和傳播庫珀衛生係統機構審查委員會認為這項研究對人類主題不符合標準的研究。研究結果將發表在同行評議期刊。
試驗注冊號碼ISRCTN41225307;Pre-results。
- 臨床試驗
- 同行評審
- 試驗注冊
- Clinicaltrials.gov
這是一個開放的分布式條依照創作共用署名非商業性(4.0 CC通過數控)許可證,允許別人分發,混音,適應,建立這個工作非商業化,和許可他們的衍生產品在不同的協議,提供了最初的工作是正確地引用,給出合適的信用,任何更改表示,非商業使用。看到的:http://creativecommons.org/licenses/by-nc/4.0/。
來自Altmetric.com的統計
本研究的優點和局限性
這項研究是高度創新,它stepped-wedge設計適用於不同組之間的同行評審的研究高影響力醫學期刊。
選擇性報告結果影響的大部分生物醫學文獻發表,使識別有效的解決這一問題的當務之急。
測試幹預是簡單的、可伸縮的和可能自動或由一個編輯助理如果發現是有效的。
幹預的有效性將依靠評論家閱讀所提供的注冊信息和考慮到包括信息在評估每個手稿。
介紹
隨機試驗可以幫助確定醫療幹預對患者的影響的結果,因此形成一個至關重要的基礎的循證醫學運動已經建成。然而,臨床試驗數據的可靠性取決於預先確定試驗結果的報告一致。1 2變化之間的預先確定和報告結果常常反映出選擇性報告結果的調查或研究讚助商報告顯著治療效果有利於幹預可能來自多個假設檢驗的結果,事後假說和機會而不是實際幹預的效果。3 - 5選擇性或不完整的結果報告是廣泛分布於生物醫學文獻發表,發生在大約30%到40%的發表的臨床試驗。3 6 - 12
臨床試驗注冊中心開發,部分解決問題的選擇性報告結果。13 - 16注冊中心公開數據庫,使審判信息科學界和公眾。這些信息包括試驗合格標準和治療武器的描述,以及預先確定的定義,主要和次要的結果。自2005年以來,國際醫學期刊編輯委員會(ICMJE)規定了前瞻性臨床試驗登記作為成員期刊,出版的條件172007年,美國食品和藥物管理局修訂案前瞻性登記了ClinicalTrials.gov要求根據聯邦法律對許多美國臨床試驗。18類似的要求也被眾多其他股東和監管機構實施,包括世界醫學期刊編輯協會19世衛組織,20 21歐盟(eu)22和美國國立衛生研究院。23
盡管注冊要求的廣泛應用,大量的證據表明,選擇性報告結果仍然是常見的,6 10 12試驗中觀察到,經常在通用醫療和專業期刊上發表8 24 25和廣泛的醫療專業和資金來源。7 9 26-38因為試驗注冊表數據是公開的,有選擇性的在同行評審結果報告能被探測到。然而,這個問題的持久性表明當前的同行審查實踐最多期刊不會導致選擇性報告結果的一致的識別和修正。
一些障礙可能損害的能力標準的同行評審過程檢測和正確的選擇的結果報告。首先,一些評論家和期刊編輯還沒有完全意識到現有的注冊中心資源,或試驗注冊方麵的最佳實踐和結果報告。39 40第二,提交手稿通常不包括惟一標識符分配給每個審判的時候登記,從而迫使一個廣泛搜索多個試驗注冊中心來識別一個匹配的注冊表項。41此外,許多注冊允許調查人員隨時編輯現有的注冊數據,這意味著注冊試驗完成後試驗結果可以改變比賽結果報告在提交的手稿。這種變化發生在超過30%的注冊試驗。42 43ClinicalTrials.gov和世試驗注冊跟蹤這些變化,但訪問的審計跟蹤捕捉變化前瞻性登記結果耗時比簡單地查看更新注冊網頁。此外,一些評論家可能會猶豫是否要審查注冊網站,因為這些網站通常列出研究讚助和參與招生網站和識別的主要研究調查員。因此,直接注冊審查不兼容的同行評審。最後,對於許多期刊指南描述有不清楚是否評論者,編輯或編輯人員成員負責比較試驗手稿相關的注冊表項,當這些準則確實存在,評論者可能不會意識到它們的存在。
PRE-REPORT試驗將測試一個幹預,旨在解決這些障礙通過直接從臨床試驗注冊中心提供信息審稿人評審期間使用的手稿目前臨床試驗的結果。這種幹預包括一個全麵的第三方注冊表搜索,抽象的信息從注冊表和同行評議者提供這些信息。cluster-randomised, stepped-wedge審判將測試的影響進行幹預選擇性報告結果。本研究的目的是確定是否為評論家提供注冊信息主要試驗結果同行評審的時候提高了臨床試驗報告通過增加前瞻性登記和報告試驗結果之間的一致性。這個提交反映了研究協議截至9月25日,2018(版本2)。
和分析方法
研究設計
PRE-REPORT審判是stepped-wedge cluster-randomised試驗,將測試的影響,為同行評議者提供方便的注冊信息,以便對比注冊和發表的試驗結果。單個集群內所有合格的臨床試驗的研究將包括手稿寄給同行評審在pre -或幹預階段的個人日記。集群的設計,而不是manuscript-level隨機,有必要減少汙染的幹預,因為期刊通常使用一個有限的編輯和同行評議者的決定,一旦個體參與幹預條件下他或她可能更有可能尋求注冊中心數據在評估後續的手稿。手稿提交參與期刊在11月1日,2018年,10月31日,2019年,將包含篩查。
Stepped-wedge隨機
前2個月的試驗中,所有參與期刊將在控製階段。期刊將交叉實驗幹預階段3個月和10之間以隨機的順序,和最後三個月所有集群將得到的實驗幹預(表1)。44 45本研究設計的一個重要優勢是能夠比較預處理和幹預的結果在單獨的集群中,從而控製了潛在的混雜特性獨特的集群。46例如,參與期刊的區別在於其現有的同行評審流程,以及體積、質量和類型的個人手稿進行審查。stepped-wedge設計還允許部分(但不完全)控製的長期趨勢在同行評審過程長達一年的研究。46雖然時間改變登記、報告和同行審查實踐是可行的,我們認為這些變化是一個較小的威脅比集群之間的差異研究。
雜誌選擇:
參與雜誌的總編被發郵件確認高影響跨廣泛的醫學專業期刊來描述該研究中,衡量興趣《領導和參與評估的可行性給出每個雜誌現有的同行評審過程。為了有資格參與,期刊不可能已經實現了一個健壯的過程,以確保全麵注冊表的性能分析在臨床試驗手稿的同行評審。的決心是什麼構成了一個健壯的現有流程,是否可能會有機會,每個期刊的現有實踐關於注冊審查改進是由每個雜誌的主編接洽潛在的參與。此外,參與期刊必須定期出版手稿描述臨床試驗,我們定義為出版平均每年至少10試驗在過去三年。為了最小化任何改變的行為代表提交作者或同行評議者由於參與研究(例如,霍桑效應),的身份參與期刊的發布版本不提供協議或試驗注冊記錄。
手稿資格
手稿報告臨床試驗的結果符合條件的包容如果他們發送的同行評審研究期間的任何參與期刊。我們定義根據標準采用國際臨床試驗:任何前瞻性的研究參與者分配人類或人類一種或多種醫療幹預組評估對健康結局的影響。17我們會排除手稿描述協議計劃試驗沒有報告試驗結果。手稿顯然表明手稿並不打算報告試驗的主要結果(即手稿描述隻有二級分析,二次結果或re-analyses)也將被排除在外。最後,我們還將排除重新提交最初提交的手稿在11月1日之前,2018年,開始日期。如果任何手稿提交多個參與雜誌在研究過程中,他們將分析在第一期刊的集群中,並將不包括第二次重新提交到另一個參與雜誌。
手稿篩查程序在每個參與期刊個性化為了適應現有期刊編輯和同行評審流程,同時也讓我們的設計過程,解決具體的保密問題提出參與期刊的編輯。在某些情況下,期刊工作人員執行的初始屏幕手稿資格之前提醒PRE-REPORT調查潛在的合格的提交,並在某些情況下PRE-REPORT調查員屏幕所有提交的手稿沒有參與資格的員工》雜誌上。
控製階段
由於stepped-wedge交叉設計,每個參與雜誌最初將分配給控製條件。在控製階段,PRE-REPORT調查者將前瞻性評估提交手稿包含和將執行數據收集這些手稿會議招生標準。在此階段,將沒有改變同行評議者接收的信息作為同行評議慣例的一部分在每個參與雜誌。
幹預階段
2個月和10之間,每個雜誌將跨越到幹預階段根據隨機安排在每月的間隔由統計學家研究使用計算機生成的隨機數。為每個手稿提交同行評議在幹預階段,PRE-REPORT調查人員將評估手稿資格(圖1)。如果合格,協調器或調查員將執行一個注冊表搜索來確定一個注冊表項匹配中所描述的試驗提交的手稿。確認後提交的手稿和一個相應的注冊表項,PRE-REPORT工作人員將從注冊表信息抽象為一個注冊表數據表單(在線補充附錄1),包括以下信息:審判是否注冊,初始登記和注冊日期主要結果(s)當時報名開始學習。在一些期刊注冊信息表將同時評論者,他們接受一個邀請審查包括審判和接收訪問手稿,和在其他期刊審稿人會收到注冊信息通過電子郵件後,他們已經接受了審查任務。在這些情況下,研究小組將協調與員工在每個期刊電子郵件完成數據形成有關同行評議者;一些參與期刊的PRE-REPORT團隊將直接發送注冊信息通過手稿評論家使用電子郵件生成的跟蹤係統。在所有情況下,我們的目標是使注冊表信息提供給所有評論者在24小時內接受審查任務。如果搜索失敗研究確定一個注冊表項,沒有注冊表數據將向同行評議者報告。PRE-REPORT團隊將為評論家提供相關試驗注冊表項,但不會提供一個比較注冊結果和手稿中描述的結果考慮,不會提供關於注冊信息的使用說明。我們的目標是使同行評議者相關注冊信息,我們相信評論家的臨床試驗的關鍵職責之一是嚴格評估選擇,定義和報告的主要試驗結果。我們預計,編輯也會暴露在注冊信息包含在我們的幹預,通過訪問電子郵件向審查員提供訪問注冊表信息或通過閱讀評論者的評論這個注冊表信息寫作時考慮他們的評論。審稿人和編輯將決定是否以及如何使用提供的信息對他們從注冊表在評估審查下的手稿。
參與期刊和PRE-REPORT團隊間的信息流動。個隨機對照試驗,隨機對照試驗。
注冊表數據抽象
對於每個手稿,一名調查員有經驗的使用試驗注冊中心將審查的手稿發表試驗注冊號碼或其他試驗注冊的證據。如果沒有提供注冊信息的手稿,研究者將搜索ClinicalTrials.gov,世衛組織國際臨床試驗注冊平台搜索門戶和任何國家或地區注冊對應起源的主要調查人員的國家(如澳大利亞新西蘭臨床試驗注冊中心)的關鍵詞和標題識別匹配的注冊表項。注冊中心條目之間潛在的匹配和手稿將評估通過比較研究標題、幹預、樣本大小、報名日期和審判地點之間的注冊表和手稿。手稿將被歸類為未注冊的,如果他們不包括注冊身份證號碼和注冊表搜索不確定匹配的注冊表項。當初始注冊表搜索未能識別匹配的注冊表項,第二個調查員將執行一個額外的注冊表搜索在審判之前的問題是貼上未注冊。這個注冊表搜索策略基於注冊之前之前用於人的研究。8 9 25 27 47
數據收集
參與雜誌將供應PRE-REPORT研究小組最初手稿的副本提交同行審查。一個調查員將從這些最初手稿和收集數據為每個審判相關的注冊表項,包括主要的結果列在最初提交版本的手稿以及注冊使用,注冊日期,開始日期和注冊研究的結果。我們將按照手稿在整個編輯過程中確定最終出版的決定。接受了手稿,完成版本的手稿出版後我們將抽象的額外的數據使用一個標準化的數據收集模板從最後的手稿。數據抽象在這個階段將包括關於樣本大小的信息,描述統計計劃和發布的主要和次要結果定義。任何結果(s)中所描述的研究的作者抽象或手稿作為主要研究結果將被認為是主要的結果。如果手稿包含沒有結果是明確確定為主要的結果但樣本量計算執行,用於這個計算結果將會被認為是主要的結果公布。如果沒有明確結果的主要結果,並沒有進行樣本量的計算,發表主要結果將被認為是未定義的。數據收集將繼續,直到所有參與試驗的手稿發表出版,之後盲法評估結果將決定注冊的前瞻性和發表成果的一致性。
主要的結果
我們的主要結果是明確定義的、前瞻性登記主要試驗結果是一致的主要結果發表的手稿,由兩個獨立的評估結果。我們定義未來的注冊登記的主要結果ClinicalTrials.gov或任何主要注冊的注冊網絡(http://www.who.int/ictrp/network/primary/en/審判的)前報名的第一個參與者(或9月13日之前,2005年,試驗開始在7月1日之前,2005年,符合國際醫學試驗注冊政策)。一個明確定義的結果提供了足夠的信息以合理的允許其識別審查的研究結果,並允許一個獨立調查員設計研究測量相同的參數。一般來說,這需要登記包括一個明確定義的變量和定義的具體期限評估。為了滿足這一要求的水平結果變量問題的特殊性,在大多數情況下,它必須指定一個通用領域,特定的測量和特定的度量。例如,Zarin等在以下描述的一個例子的結果測量水平的規範:焦慮(域)、漢密爾頓焦慮量表(特定的測量),從基線(具體指標)。48而注冊的結果將理想也為每個結果變量指定聚合的方法(例如,參與者的比例減少≥50%),我們不需要這種程度的特異性,這信息是很少在前瞻性定義包括注冊表條目,它一直辯稱,聚合後可以指定數據收集的方法已經完成統計分析計劃的一部分。48一段明確定義的本質不是必需的,如果限製了研究結果的評估,一個明顯的時間框架。
我們將描述根據分類結果不一致的結果差異由陳等3由馬修和細化等(箱1)。8結果將被認為是一致的,如果在注冊表中描述每一個主要的結果是報告的主要結果手稿,手稿和每一個主要的結果報道在注冊表中被描述為一個主要的結果。當多個主要成果定義一個試驗,在注冊表中所有主要結果必須與手稿,手稿和所有主要的結果必須與注冊表的結果是一致的。兩個調查人員將獨立評估所有注冊和發表成果的一致性。兩個調查員將蒙蔽手稿是否在控製或幹預階段,手稿的內容起草發送初始同行審查和審判的日期提交。進一步,對注冊和發布結果的排序將隨機發送之前調查人員消除潛在的調查員受到知識手稿提交後試驗過程中更有可能收到了幹預。使用kappa值兩分的將可靠性評估;我們曾做過類似的分析成對陪審員之間的協議評估結果之間的一致性注冊表項和出版手稿的兩分的協議(κ= 0.87)。27任何差異將會解決通過共識後調查人員檢查手稿和注冊表的全文;持續的分歧將裁決三分之一調查員。試驗沒有前瞻性注冊將被認為不一致的結果,這些出版物將引入新的結果的定義。
分類的差異從馬修注冊和發表的主要結果等
注冊主要結果報告為次要結果發表的手稿
注冊主要結果沒有報告發表的手稿
出版的手稿包括新的主要結果
主要結果描述為二次發表在注冊表中
主要結果評估的時間變量之間不同的注冊表和手稿
二次結果
我們將為每個記錄最後的編輯決定包括審判手稿。試驗中主要的結果不一致,我們將評估是否出版手稿包括披露的變化和變化的原因的解釋。同時,通過比較主要結果在最初提交的手稿中的主要結果發布版本的手稿,我們將能夠直接測量同行審查的影響/編輯相關反饋結果的一致性。我們還將測量和報告變化的錄取率為臨床試驗在研究期間。此外,我們將分類任何觀察到的主要結果顯示不一致是否影響統計學意義(包括定義在每個手稿)發表的結果。在額外的輔助分析我們將評估包括手稿前瞻性登記之間的差異是否存在二次結果和次要結果發表,我們將描述識別的本質差異。最後,試驗中注冊的主要結果是前瞻性但不注冊,我們將決定注冊結果大致符合公布的結果。
探索性分析
兩個額外的探索性分析結果將在隨後的手稿出版後的主要研究成果。第一個探索性分析將評估幹預對二級結果的影響包括群組內的試驗,通過比較注冊和發布二級結果。這些比較將使用上述相同的方法進行初級的比較結果。雖然PRE-REPORT幹預涉及為同行評議者提供注冊信息相關的主要試驗結果,我們假設,幹預可能會增加評論家關注的問題試驗注冊,並可能導致進一步審查注冊二級結果在同行評審。另外,我們計劃進行探索性分析評估的證據霍桑效應導致基線的改變協議注冊和主要成果發表的手稿發表在參與期刊。因為合作雜誌的總編給允許參與他們的期刊和沒有失明的研究假設,可能是雜誌的行為可能已經改變了由於參與這項研究。使用上述相同的方法來評估結果之間的協議,我們計劃比較主要注冊和發表成果發表在臨床試驗前一年我們最初聯係編輯關於研究的參與。結果的差異觀察這個預研期間將與利率觀察PRE-REPORT研究過程中。
樣本大小和權力
我們使用模擬計算功率之間的比較我們的主要結果(結果不一致)幹預和控製階段。49我們使用Qaqish的家庭條件線性方法來生成2000個模擬數據集相關的二進製結果對應於上述stepped-wedge設計。50基於數據從一個係統回顧之前我們假設33%的出版手稿會有不一致的結果在控製階段,6根據2017年的數據我們假定參與雜誌接受出版,每月平均兩個試驗的手稿。我們進一步假設反應從相同的手稿雜誌在同一階段會有intra-cluster相關性不超過0.50 (ICC1),響應從手稿相同的雜誌,但不同階段會有intra-cluster至少0.05 (ICC2)的相關性。一般來說,更高水平的ICC1導致減少的能力,而高水平的ICC2導致權力。51根據這些假設,招收八期刊將提供至少80%電力檢測80%的減少使用單側檢驗結果不一致在0.05顯著性水平。包括五個額外的參與期刊,總共13參與期刊,為了適應研究的期刊輟學的可能性,並占手稿出版的低利率的可能性或較低的大小影響的幹預。我們有選擇使用單側檢驗,因為它極不可能的幹預會增加結果的頻率不一致。
分析計劃
符合一個意圖治療分析,所有的手稿都將根據研究分析階段的相關期刊提交手稿時,無論幹預是成功地分發給審稿人。為我們的主要結果的結果不一致,我們將使用混合效果邏輯回歸模型之間的比較觀察幹預和控製階段。混合模型允許不同數量的每日報》手稿,也占相關反應之間的手稿發表在同一個雜誌上。將包括固定效應模型研究階段(控製或幹預)和月,和將包括journal-specific隨機效應,允許不同級別的相關性取決於手稿了同期或在不同的幾個月。5%的單邊測試將進行比較幹預和控製階段。此外,或將估計90%可信區間(符合片麵的5%)。
病人和公眾參與
患者沒有參與這項研究的設計,和患者個體的研究不涉及招聘。完成研究後我們計劃的結果和草案版本的論文發表數BMJ病人和公眾評論員來獲取他們的見解影響,這項研究可能對病人護理。
道德和傳播
盡管我們當地倫理委員會的決定是這項研究的結果並不足以滿足人體標準研究,研究人員認識到,這項研究設計需要實施預防措施,以保護保密和知識產權的作者,他們的工作可能包括在這項研究中,與同行評議者和編輯參與包括手稿的評價。電子學習材料將存儲在一個加密的數據庫,並且不會被共享團隊以外的PRE-REPORT調查員。幾個參與期刊要求實現期刊之間的保密協議和PRE-REPORT調查者訪問提交手稿以幫助確保同行評審材料的保密;當有關這些保密協議符合歐盟要求的通用數據保護監管。此外,為了保持所有利益相關方的保密和鼓勵參與雜誌,我們不會公布任何數據集包含個人手稿數據或結果數據識別個體參與期刊的性能。我們將提交集中研究結果出版後專業生物醫學期刊上收集數據的結論。參與期刊允許通用聲明他們的評論者對他們的評論可能被包括在研究同行評審過程,但要求不透露這項研究的具體性質的評論者因為這披露的可能性會改變評論家行為獨立於我們的幹預。我們不記錄識別信息分配給評估者的手稿包括試驗。
引用
腳注
貢獻者CWJ TPM研究的構思和擔保資金。CWJ, ACA,黨衛軍,胃、DLS BSM, TPM為研究設計做出了貢獻。由胃統計規劃和分析。CWJ最初起草這個手稿和CWJ, ACA,黨衛軍,胃,DLS, BSM, TPM所有導致關鍵的修訂手稿。閱讀和批準所有的作者都最後的手稿。
資金這項工作是由美國健康和人類服務部門科研誠信辦公室授予ORIIR180039數量。
相互競爭的利益CWJ一名調查員在研究由阿斯利康,羅氏診斷Hologic Inc .,詹森,他的部門獲得研究經費。在BMJ黨衛軍是一個全職雇員,但不參與編輯決策手稿。
倫理批準試驗協議由庫珀大學醫院的機構審查委員會審查,決心不符合監管定義人類受試者的研究,因此免除進一步製度審查委員會審查。
出處和同行評議不是委托;外部同行評議。
病人同意出版不是必需的。