條文本

原始研究
工作場所綜合安全和健康(WISH)評估在一個樣本養老院使用項目反應理論(IRT)方法的驗證
  1. María Andrée López Gómez1
  2. 丹尼爾一個甘德森2
  3. 萊斯利我博登3.
  4. Glorian索倫森145
  5. Jeffrey N卡茨6
  6. 傑米·E·柯林斯6
  7. 格雷戈裏·瓦格納1
  8. 瑪麗G Vriniotis1
  9. 傑西卡AR威廉姆斯7
  1. 1工作、健康和福利中心哈佛大學陳曾衡公共衛生學院波士頓麻薩諸塞州美國
  2. 2調查和數據管理核心丹娜-法伯癌症研究所波士頓麻薩諸塞州美國
  3. 3.環境衛生beplay体育相关新闻波士頓大學公共衛生學院波士頓麻薩諸塞州美國
  4. 4社會與行為科學哈佛大學陳曾衡公共衛生學院波士頓麻薩諸塞州美國
  5. 5社區研究中心丹娜-法伯癌症研究所波士頓麻薩諸塞州美國
  6. 6整形外科手術布裏格姆婦女醫院,哈佛醫學院波士頓麻薩諸塞州美國
  7. 7衛生政策和管理堪薩斯大學醫學院堪薩斯城堪薩斯美國
  1. 對應到博士María Andrée López Gómez;malopezgomez在{}mun.ca

摘要

目標為了驗證和測試來自工作場所綜合安全和健康(WISH)評估的六個結構的維度,該評估工具用於評估組織實施綜合係統方法的程度,以保護和促進工人的健康,安全和福祉,在美國的一個療養院的樣本。

設計使用橫斷麵調查數據驗證評估量表。

設置美國三個州的醫療補助和醫療服務中心認證的養老院:俄亥俄州、加利福尼亞州和馬薩諸塞州。

參與者來自超過30張床位的成人養老院的569名護理主任參與了研究。

結果項目響應理論(IRT)模型顯示,基於模型擬合統計量的平衡解釋,6個結構中有5個是一維的——m2或C2, p值>0.05,比較擬合指數>0.95,接近90%的均方根誤差的下限CI <0.06,標準化均方根殘差<0.08。總體測量和施工可靠性從可接受到良好。類別邊界位置參數表明,在較低的潛在得分範圍內(即β),項目是最有信息的受訪者123.根據經驗和實質性的解釋,建議從今後的文書管理中刪除一些項目。

結論《維護工人健康、安全和福祉文書》有助於了解組織在何種程度上將保護和促進工人健康、安全和福祉結合起來;然而,它在得分較低的組織中提供的信息最多。

  • 保健服務組織
  • 職業與工業醫學
  • 統計與研究方法

數據可用性聲明

如有合理要求,可通過電子郵件向jwilliams13@kumc.edu索取資料。

http://creativecommons.org/licenses/by-nc/4.0/

這是一篇開放獲取的文章,按照創作共用署名非商業性(CC BY-NC 4.0)許可發布,該許可允許其他人以非商業性的方式發布、混編、改編、構建本作品,並以不同的條款授權他們的衍生作品,前提是原創作品被正確引用,給予適當的榮譽,任何更改都被注明,且使用是非商業性的。看到的:http://creativecommons.org/licenses/by-nc/4.0/

來自Altmetric.com的統計

請求的權限

如果您希望重用這篇文章的任何部分或全部,請使用下麵的鏈接,它將帶您訪問版權清除中心的RightsLink服務。您將能夠快速獲得價格和以多種不同方式重用內容的即時許可。

本研究的優勢和局限性

  • 樣本大且異質性:工作場所綜合健康與安全(WISH)評估的驗證使用了來自美國三個州(俄亥俄州、加利福尼亞州和馬薩諸塞州)569家療養院的調查數據。

  • 受訪者的知識淵博:護理部主任代表養老院回應說,以前的研究表明,他們比任何其他管理者更了解政策、實踐和項目;如果護理主任認為該設施的一名健康和安全代表對調查主題更了解,他們可以選擇將調查轉交給該設施的一名健康和安全代表。

  • 選擇項目的方法是嚴格的:該研究使用分級響應項目響應理論建模,以識別參數為基礎識別一維WISH域的項目,並沿潛在得分評估條件信度的信息曲線。

  • 該措施的普遍性受到研究樣本的限製,其中包括位於美國的至少30個床位的療養院。

背景

越來越多的證據支持將保護和促進工人的健康、安全和福祉結合起來,作為實現健康工作場所的最佳做法。1 - 3因此,美國疾病控製與預防中心下屬的專門負責工人安全和健康的國家職業健康與安全研究所製定了《工人全麵健康倡議》,其目標是通過關注"將保護免受與工作有關的安全和健康危害與促進預防受傷和疾病的努力結合起來的方案、政策和做法,以增進工人的福祉.’4了解TWH方法的範圍、實施程度以及它們與工人健康、安全和福祉之間的關係,對於雇主和職業健康與安全組織在製定幹預措施、政策和方案時確定優先事項至關重要。

哈佛大學陳曾熙學院工作、健康和福祉公共衛生中心(CWHW)的調查人員對政策、規劃和做法影響工人健康、安全和福祉結果的因果途徑進行了研究。2 3 5 6這項研究的證據為開發一個概念模型提供了依據,該模型作為框架,用於使用TWH方法進行研究和工作場所幹預。3.該概念模型強調了工作條件及其對工人(健康和福祉)和營業額和保健費用等企業成果的影響的中心作用,以及政策、方案和做法在形成這些工作條件方麵的作用。3.該概念模型、相關文獻和一個專家小組指導製定了兩項措施,以評估組織為保護和促進工人健康、安全和福祉而實施循證綜合係統方法的程度:工作場所綜合安全和健康(WISH)評估7以及其前身《一體化指標》。2

整合指標在中小企業的樣本中得到驗證8 9以及美國退伍軍人事務部(VA)行政父母的樣本,顯示出令人滿意的收斂效度和信度。8 9然而,綜合指標的主要目的是衡量健康保護和健康促進的綜合情況。該評估更加全麵,衡量影響工人安全、健康和福利的其他政策、方案和做法。7它由六個被確定為綜合保護和促進工人健康、安全和福祉的核心結構組成:領導承諾;參與;促進積極工作條件的政策、方案和做法;綜合與協作戰略;遵守聯邦和州法規和道德規範;和數據驅動的變化。該工具旨在評估各組織在何種程度上遵守了最佳做法建議,即針對保護和促進健康、安全和福祉的方案、政策和做法的綜合係統方法。

本研究旨在驗證療養院行業中WISH工具的各個領域。具體來說,我們將WISH評估工具中的每個域作為一維潛在構造進行測試,估計識別參數和位置參數,並檢查信息曲線,以沿各自的潛在得分評估每個量表的條件可靠性和效用。養老院行業是一個值得關注的行業,因為它的主要目標是為日益老齡化的人口提供高質量的病人護理。然而,在美國,該行業是由低工資的勞動力和代表性不足的少數族裔維持的,在很大程度上依賴於醫療補助和醫療保險的支付,10 11這是針對低收入人群和65歲以上人群的聯邦健康方案。來自養老院設施的研究證據表明,將工人的健康置於病人護理之上可能會增加員工流失率,從而對病人護理的質量產生有害影響。10 12衡量在養老院人群中保護和促進工人健康、安全和福祉的綜合方法的實施情況,可以幫助我們理解TWH方法如何與工人、患者和企業的結果相關聯。

方法

本研究使用了來自企業成果(EO)研究的數據,該研究是哈佛大學陳曾熙公共衛生學院的一個項目,旨在評估療養院的TWH實施情況及其與員工和企業成果的關係。該研究使用了美國三個州的療養院護理主任(don)的橫斷麵調查:俄亥俄州(OH),加利福尼亞州(CA)和馬薩諸塞州(MA)。調查包括意願評估和其他相關問題。

儀器

通過廣泛的文獻綜述和改進的德爾菲法以確保內容的有效性,並與養老院院長進行認知預測試以確保適用性、理解性、信息檢索和反應映射,開發了包含WISH結構的項目。7關於該方法的方法在其他地方有詳細介紹。7WISH評估由6個結構組成,包括4至14個項目的封閉式問題和4個順序反應量表(完全沒有、有點、大部分、完全/完全沒有、一些時候、大部分時間、所有時間)(表1).

表1

工作場所綜合安全和健康(WISH)評估的領域及其定義

調查管理

在OH、CA和MA所有2388家至少有30張床位的養老院,服務成年人,並於2018年8月23日被列入養老院比較,接受醫療保險或醫療補助,被邀請參加調查(養老院比較(https://www.medicare.gov/nursinghomecompare).OH州、CA州和MA州被選為調查對象,作為一個更大的項目的一部分,該項目將來自州工人補償局的養老院傷害數據聯係起來。最初邀請護理主任們根據先前的證據對調查進行回應,這些證據表明,養老院院長比機構中的任何其他管理人員更了解工作場所的政策、項目和實踐。10他們的知識來源於他們參與了養老院政策和程序的製定和實施13以及接觸養老院的臨床操作。14不過,按照指示,如果有必要,護理主任應征求意見,或將調查交給他們所在療養院的適當健康和安全代表。數據是通過順序混合模式調查收集的,其中網絡調查協議被執行,然後在非受訪者中進行郵件調查。最初的邀請通過電子郵件發送給每個養老院的院長。邀請函解釋了調查的目的,說明調查是自願和保密的,並說明調查打算由警監處或一名健康和安全代表完成,如果他們願意轉交調查。向非受訪者發送了多達三封提醒郵件,然後郵寄了一份紙質調查。有些教務長沒有工作電子郵件地址——這些人隻收到紙質副本。569份調查被返回,回複率為24%。低響應率可能表明無響應偏倚;然而,之前一項與醫學主任的調查研究表明,第一波29.7%的回複率的答案與第一波至第五波85%的回複率收集的答案不代表任何統計學上的顯著差異。15唯一改變的參數是精度,隨著受訪者的積累而增加。15在其他分析中(未顯示),我們使用養老院的特征,如盈利狀態,州,床位數量,醫療保險質量評級,醫療保險人員評級,醫療保險健康檢查評級,調查浪潮和農村,來預測養老院是否回應調查。16

統計分析

數據最初是通過頻率來識別分布嚴重傾斜的項目。如果少於10%的應答者選擇了一個相鄰的應答類別,我們將其與應答類別進行分解。我們分別分析了WISH的每個領域,因為它們代表不同的潛在結構。我們選擇IRT分析,因為它在幾個重要參數上描述了項目及其各自結構之間的關係——辨別性(即項目與結構的關係強度)、類別位置(即沿著結構得分的位置)以及它們的信息或可靠性(即它們對測量精度的貢獻)。

對於每個領域,我們擬合一維分級反應模型,根據經驗信息(歧視和局部依賴)和重要的是,實質性解釋來選擇項目,以確保內容有效性。如果項目相對於其領域中的其他項目具有較小的辨別參數,或顯示出局部依賴性,則標記為討論。使用G2統計,如果p值低於bonferroni校正的0.05,則標記項目。當在一對條目中識別出局部依賴時,除非另一個條目能更好地保證內容效度,否則差別較大的條目將被保留。同樣地,區別較小的項目相對於其他項目被保留,如果他們的消除損害了內容的有效性。研究小組根據工作、健康和福祉中心其他調查人員的輸入進行了實質性的解釋。17

我們檢查了測量精度——在IRT中,信息曲線的數字越大表示精確度越好,或者,等價地說,信息越多——在每個結構的潛在得分範圍內。我們還提出了經驗信度作為潛在得分的整體信度的度量。

信息擬合優度有限,χ2統計量(M2或C2取決於模型df),近似均方根誤差(RMSEA),標準化均方根殘差(SRMSR)和比較擬合指數(CFI)18用於評價每種結構的一維模型擬合性。這些擬合指標評價模型相對於飽和模型(M2和C2),相對於零模型(CFI)的改進,以及擬合的絕對度量(RMSEA和SRMSR)。我們使用Hu和Bentler(1999)的閾值建議來考慮良好的模型擬合- RMSEA (RMSEA LB)<0.06、SRMS <0.08和CFI>0.95的90% CI的下界。項目適合度用簽名χ進行評估2測試和解釋經驗情節。19使用R中的mirt包進行分析,使用通過期望最大化估計的邊際極大似然20.(R核心團隊,2019)。

患者或公眾參與

本研究無患者參與。

結果

樣本

表2描述參與計劃的療養院的特點。大部分調查由處長完成(n=480, 84.4%)%, 7.6% (n=43)報告的頭銜不是處長(13人為管理員,11人為助理/臨時處長)。根據調查方式(紙質/電子郵件),盈利和非盈利養老院之間的回複率沒有顯著差異。16OH和CA的大多數養老院有51-100個床位,MA的多數養老院有101-150個床位,所有州的大多數養老院都是營利性的。

表2

養老院的特點

表3顯示在最後的薪級表中保留的每一個願望項目按類別開列的答複分布情況。所有變量都傾向於選擇“大部分/大部分時間”和“完成/所有時間”。除兩個項目(參與q2和政策、計劃和實踐q11)外,“完全沒有”的選擇始終不到10%,因此所有變量都以“完全沒有”和“有點”或“有時間”(視情況而定)合並,形成了一個3分分析量表。在線補充附錄表1包括因歧視程度較低而被刪除的項目。

表3

工作場所綜合安全和健康評估響應分發的最後項目

表4模型擬合統計量、鑒別(α)和類別邊界定位(β))參數。領導承諾,全麵和協作戰略,依從性具有良好的擬合一維模型,表明它適合數據以及飽和模型(C2或M2),優於零模型(CFI >0.95),模型隱含相關矩陣的偏差(SRMSR <0.08)和絕對擬合(RMSEA 90% CI (RMSEA LB)的下限<0.06)。參與與零模型(CFI=0.99)擬合良好,模型隱含相關矩陣(SRMSR=0.03)和RMSEA (RMSEA=0.10, RMSEA LB=0.06)的偏差較大,但與飽和模型(M2(df=2)=14.2)的擬合存在一定偏差。政策、計劃和措施模型隱含相關矩陣(SRMSR=0.05)和RMSEA (RMSEA=0.08, RMSEA LB=0.06)擬合良好,但相對於零模型(CFI=0.93)和飽和模型(M2(df=22)=84.93擬合不足。依從性模型隱含相關矩陣、RMSEA (RMSEA=0.07, RMSEA LB=0.02)和相對於零模型(CFI=1.0)擬合良好,但相對於飽和模型(C2=6.640, df=2)存在一定的不擬合。該尺寸沒有合理的擬合模型數據驅動的改變,因此不作進一步介紹。

表4

根據領域判別和分類定位參數

所有構念的鑒別參數(α)都很大,說明每個項目對每個構念的潛在得分差異很敏感。這些鑒別參數在2.55到4.07之間領導, 2.1至3.31參與, 1.19至4.34政策、計劃和措施3.3至4.84綜合協作戰略, 2.96到5.1依從性.類別邊界定位參數(β1,β2,β3.)大多在潛在得分的負範圍內,表明大多數項目對構造得分較低的養老院最有信息。

圖1顯示每個域的測試信息曲線。這些曲線顯示了在潛在構造(位置)的不同分數的項目集合中的信息量(或測量精度)。每個域在其具有高信息的潛在特征上都有一定的範圍。信息曲線峰值在15以上政策、計劃和措施,依從性, 10歲以上領導能力和全麵與協作戰略.在各自潛在特征得分較低的療養院中,測量這些構造的項目集的信息量最大(從而提供最可靠的測量),通常在−2到0的範圍內。的範圍參與在−1到1的範圍內信息量更大,峰值為8。潛在性狀得分的經驗信度為0.81領導0.82,參與0.87,政策、計劃和措施0.82,綜合協作戰略, 0.70依從性

圖1

按工作場所綜合安全和健康(WISH)評估領域測試信息曲線。

討論

本文旨在驗證WISH評估的有效性,通過對美國三個州的療養院的院長進行的一項調查來檢驗其六個構念的維度。我們確定了一維尺度領導承諾參與政策、規劃和實踐,全麵和協作戰略,依從性,在大多數或所有適合度指標上的適合度均可接受。經驗信度表明所有結構的信度總體上可接受到良好。額外的分析(類別邊界位置和測試信息曲線)顯示,在支持安全、健康和福利的低水平工作條件的養老院中,大多數項目和量表的信息量最大。該願望可以加深我們對綜合係統方法的最佳做法的理解,以保護和促進工人的健康、安全和福祉。

WISH有幾個優點,使其非常適合不同的應用程序。由於鑒別參數較大,可以用相對較少的項目估計各自結構的可靠估計值。這使得評估特別適合於涉及願望和其他主題的研究,減少了參與時間。

有兩個領域將受益於進一步的研究。盡管所有領域都有天花板效應,依從性53%的療養院的總分最高。未來的工作依從性領域應尋求開發項目,區分和信息在高得分的療養院。此外,我們無法確定一個合理的和良好的擬合模型數據驅動的改變.目前,我們不能聲稱這些項目測量潛在的數據驅動的變化構造。然而,單個項目可能仍然對研究人員感興趣,因為它們各自的測量潛力。它們可以逐項直接解釋。例如,"關於雇員安全和健康結果的綜合數據在所有相關部門進行協調"一項可以被用作和解釋為綜合數據協調的一項措施,而不必聲稱它是數據驅動的變化的表現。事實上,這些項目(表3)都經過了徹底的預先測試。7

該研究在樣本的性質方麵存在局限性。樣本隻包括三個州至少有30個床位或更多的養老院。該調查被發送給校長;84.4%的受訪者是真正的DONs, 7.4%的人沒有報告頭銜,7.6%的人報告了不同但通常相似的頭銜。我們假設回答調查的個體具有完成任務的必要知識,特別是對於非dos的應答者。有DON應答者的療養院的答複與有不同應答者類型的療養院的答複沒有顯著差異。16在控製了營利性狀態、州、床位數量、醫療保險質量評級、醫療保險人員配置評級、醫療保險健康檢查評級、調查浪潮和鄉村性之後,我們沒有發現任何統計上顯著的預測因素,即養老院是否做出回應。16應在其他樣本中驗證WISH對地理位置和設置的魯棒性。我們的發現應該被視為這些量表的第一個版本,在未來的研究中進行擴展和修改。隨著研究主體的增長,這應該會導致在所研究的機構類型方麵具有普遍性的規模。

盡管在某些領域有天花板效應,但WISH儀器對許多研究和應用設置都有實用價值。例如,對績效較低的組織的研究依從性可以得到各自潛在分數的可靠估計。這類組織往往是試圖改善工作場所安全、健康和福利的研究人員和從業人員最關心的。因此,針對工作場所安全、健康和福祉的幹預措施仍然可以發現有意義的變化,非幹預縱向研究也同樣可以觀察到隨著時間的變化。此外,這些工具在應用工作中具有巨大的效用,可以作為篩選工具來識別需要幹預或進一步研究的低績效組織。本驗證研究的結果表明,WISH評估足以衡量組織在何種程度上堅持與保護和促進工人健康、安全和福祉的綜合係統方法相關的最佳做法。測量WISH的領域可以幫助組織和研究人員製定優先級和決策,以改善工作環境,利用資源影響表現最差的領域。在基線時使用WISH工具並進行後續評估,有可能為組織提供一種方法,以確定組織中與建議的最佳做法有關的改進或挫折。WISH工具還可以補充針對員工的調查,這些調查可以告知管理者和研究人員組織政策、實踐和項目之間的任何不一致,以及員工對這些的看法。

數據可用性聲明

如有合理要求,可通過電子郵件向jwilliams13@kumc.edu索取資料。

倫理語句

倫理批準

該研究獲得了哈佛大學陳曾熙公共衛生學院的倫理批準(IRB文件號18-1245)。

參考文獻

補充材料

  • 補充數據

    這個網絡僅文件已由BMJ出版集團從作者提供的電子文件生產(s),並沒有編輯的內容。

腳注

  • 貢獻者MALG、DAG、LIB、GS、JNK、JEC、GW、MGV和JARW參與了研究的概念化和設計。MGV、JARW和MALG組織了數據收集過程,召開了更新會議,並聽取了所有作者的建議。DAG、MALG和JARW分析了數據,並將發現提交給小組的其他成員討論。MALG, DAG, LIB, GS, JNK, JEC, GW, MGV和JARW參與了結果的解讀,並對手稿進行了嚴格的審查和編輯,批準了最終版本提交給beplay体育官方手机版

  • 資金這項研究得到了美國國家職業安全與健康研究所(U19 OH008861)為哈佛大學陳曾熙學院公共衛生工作、健康與福祉中心提供的贈款支持。資助機構在研究的設計和實施中沒有作用。

  • 相互競爭的利益沒有宣布。

  • 來源和同行評審不是委托;外部同行評議。

  • 補充材料本內容由作者提供。它沒有經過BMJ出版集團有限公司(BMJ)的審查,也可能沒有經過同行評審。討論的任何意見或建議僅僅是那些作者(s)和不被BMJ認可。BMJ放棄從放在內容上的任何依賴產生的所有責任和責任。如果內容包含任何翻譯材料,BMJ不保證翻譯的準確性和可靠性(包括但不限於當地法規、臨床指南、術語、藥品名稱和藥物劑量),並且不對翻譯和改編或其他原因引起的任何錯誤和/或遺漏負責。