Evaluating the shoulder toolkit impact on usability, workload, and confidence in novice and expert ultrasound users.

Duhig S, McKenzie A, Lakiang T, Turner D

View Original ↗
AI 導讀 technology US 重要性 4/5

導入 STK 結構化工具包後,新手滿意度與操作信心顯著提升(p<0.001),專家卻偏好傳統檢查模式。

  • STK 讓新手操作信心顯著提升(p<0.001),且在學習性、效率與實用性評價皆獲更高分數。
  • NASA-TLX 負荷指標顯示,標準化的 STK 框架顯著降低了操作者掃描時的心理需求(p<0.001)。
  • 在五分制影像品質評分中,專家仍具備絕對優勢(p<0.001),且專家群體更偏好傳統徒手檢查模式(p=0.023)。

導入結構化的肩部超音波工具包(STK)後,新手與專家的滿意度出現顯著分歧:十七名新手展現高度滿意(p = 0.002)且心理負荷大幅降低,十六名專家卻更偏好傳統徒手檢查模式(p = 0.023)。這份針對定點照護超音波(POCUS)的研究,明確量化了不同經驗值操作者在系統可用性與影像品質上的實際差異。

結構化 STK 工具包的設計初衷與 POCUS 痛點

定點照護超音波(POCUS,床邊即時超音波評估)在肌肉骨骼系統的檢查中具備高度靈活性,已被廣泛應用於常規的影像評估與初步篩檢。然而,肌肉骨骼超音波,特別是針對肩部關節的掃描,其技術門檻相對較高。操作者必須在維持患者特定擺位的同時,動態調整探頭的投射角度,以克服肌腱組織常見的異向性(anisotropy)假影。在這樣的高自由度下,缺乏實務經驗的新手往往面臨信心不足的問題,且不同操作者之間擷取出的影像一致性與重現性也難以維持。

為了解決標準化不足的技術痛點,研究團隊導入了肩部工具包(Shoulder Toolkit, STK)。這套 STK 的核心概念在於提供一個高度結構化的檢查框架,將原本極度依賴個人經驗的掃描流程,轉化為具備明確步驟的標準化協定(protocol)。透過將傳統自由度極高的超音波檢查,限縮在特定的流程規範與解剖標記指引內,STK 試圖建立一套可精準複製的掃描模式。這項研究的主要目的,便是要客觀對比這套標準化的 STK 與傳統依賴經驗的掃描方法,在不同技術層級的操作者身上,會對工作負荷與影像產出產生何種具體影響。

33名受試者與 NASA-TLX 負荷量測設定

為了取得具備統計檢定力的客觀數據,這項研究共招募了三十三名參與者,並嚴格依據其超音波操作的熟練度劃分為兩大組別:包含十七名超音波新手,以及十六名具備豐富肌肉骨骼掃描經驗的專家。這三十三位受試者被要求針對標準化的肩部超音波檢查項目進行實作演練,且每位參與者都必須分別使用傳統的經驗法則,以及導入 STK 結構化框架的模式進行完整的肩部掃描。為了避免單一主觀評價的偏差,評估指標涵蓋了多維度的人機互動與心理測量工具。

在具體的量測參數上,研究團隊選用了系統可用性量表(SUS,用於評估操作流程的友善度與直覺性)、使用者體驗評分(UXS)以及淨推薦值(NPS)。針對操作過程中的工作負荷,則導入了 NASA-TLX(NASA 任務負荷指標,量化心理與生理壓力)進行測量。而在最終的影像產出驗證上,研究採用了標準化的五分制量表(5-point scale)進行影像品質的盲測評級。所有的數據收集皆在受試者執行肩部掃描的前後分別進行,藉此精準捕捉導入 STK 流程前后的各項動態指標變化。

信心度與滿意度評估:新手與專家的 p 值分歧

從實際的操作反饋數據來看,STK 框架在新手群體中發揮了極為顯著的正面效應。與檢查前的初始狀態以及使用傳統方法相比,新手在使用 STK 進行肩部掃描時,其對於自身擺位與取像的操作信心獲得了統計上的大幅提升(p < 0.001)。這種操作信心的增長,直接反映在整體的系統滿意度上,數據明確顯示新手對於 STK 的滿意度顯著高於傳統的徒手方法(p = 0.002)。進一步細分各項使用者體驗指標,新手在學習性、執行效率、實用性與綜合滿意度等四個核心面向上,皆對 STK 表達了強烈的偏好(所有項目皆 p < 0.005)。

不僅如此,針對是否願意將此結構化工具推薦給其他同儕的淨推薦值(NPS)調查中,新手群體也給予了極高的推薦意願(p = 0.003)。然而,若將焦點轉移到專家組的統計數據,結果卻呈現截然不同的走向。對於已經具備高度肌肉骨骼超音波掃描經驗、擁有自身固定掃描習慣的專家而言,STK 的結構化步驟反而被視為一種多餘的限制,數據指出專家群體明顯更偏向使用傳統的檢查模式(p = 0.023)。這種兩極化的滿意度數據,清楚展現了標準化流程對於不同技術成熟度人員的差異化影響。

系統可用性 SUS 分數與心理需求指標變化

若深入解析系統可用性量表(SUS)的統計結果,STK 整體而言確實提升了所有受試者的可用性評分總和(p = 0.003)。其中,新手的可用性評分進步幅度最為劇烈且達到高度顯著(p < 0.001),這印證了結構化指引能夠有效降低初學者的技術進入門檻。值得注意的是,當兩組人員都使用傳統方法進行掃描時,專家給予傳統方法的可用性評分顯著高於新手(p = 0.010);但當切換到 STK 模式時,新手與專家之間的系統可用性評分差異便完全消失。這意味著 STK 成功將新手的操作體驗基線,拉抬到了與專家相近的水平。

在工作負荷的細部拆解上,NASA-TLX 量表精準揭露了操作者在認知資源消耗上的變化。數據明確顯示,導入 STK 後,操作者在掃描肩部時的心理需求(mental demand)呈現大幅度降低的趨勢(p < 0.001)。在傳統模式下,新手需要同時耗費大量腦力去回憶解剖構造、確認病患擺位並即時優化影像參數;STK 透過將複雜流程結構化拆解,有效釋放了操作過程中的認知負擔。此外,NASA-TLX 也在「自我表現」與「挫折感」這兩個細部維度上,捕捉到了新手與專家在傳統與 STK 兩種不同操作條件下的顯著量化差異。

影像品質 5-point scale 的驗證與臨床導入建議

儘管 STK 在改善新手心理負荷與提升操作信心上表現亮眼,但在最終的實體影像產出品質上,經驗值依然是難以輕易跨越的鴻溝。透過五分制量表(5-point scale)針對掃描出的肩部影像進行評級,結果顯示無論是採用傳統方法還是 STK 框架,專家組取得的影像品質得分依然具備絕對的優勢(p < 0.001)。這說明了超音波影像的高階細節呈現,包含探頭微小傾角的精準控制、假影的即時迴避以及關節動態測試的流暢度,仍需要長期的實務經驗累積,並無法單靠標準化流程就在短時間內完全弭平差距。

針對技術端的適用邊界與未來方向,這份研究明確界定了 STK 的最佳應用定位。對於肌肉骨骼超音波的初學者或非專科醫師而言,STK 提供了一個高度友善、易於學習且能有效降低操作焦慮的標準化入門途徑。作者團隊在結論中指出,這類結構化的工具包應被視為加速新手技能獲取的有效輔助手段,並強烈建議在超音波操作的早期培訓階段導入,以促進整體掃描手法與取像角度的一致性。透過大幅度降低初期的學習曲線,STK 具備了支持定點照護超音波(POCUS)在更廣泛的基層臨床環境中被標準化採用的強大潛力。

導入結構化的超音波掃描工具包能顯著降低新手的心理負荷並提升操作滿意度,是標準化 POCUS 培訓與維持影像一致性的優良輔助框架。

補充數據視覺化

STK 工具包 vs 傳統方法:不同經驗值操作者的指標差異 p 值摘要
評估指標新手群體 (STK對比傳統/初始)專家群體 (STK對比傳統)組間差異與其他關鍵數據
操作信心度顯著提升 (p < 0.001)未特別說明提升無提供具體組間 p 值
整體滿意度偏好 STK (p = 0.002)偏好傳統方法 (p = 0.023)新手在多項細部指標皆 p < 0.005
系統可用性 (SUS)顯著提升 (p < 0.001)整體受試者皆有提升傳統模式下專家 SUS 分數高於新手 (p = 0.010)
心理需求 (NASA-TLX)大幅降低 (p < 0.001)大幅降低 (合併計算 p < 0.001)挫折感與自我表現存在組間差異
影像品質 (5-point scale)得分較低得分較高專家影像品質顯著優於新手 (p < 0.001)

Abstract

Point-of-care ultrasound (POCUS) is widely used for musculoskeletal assessment, yet novice users often lack confidence and consistency. The Shoulder Toolkit (STK) was developed to provide a structured framework for shoulder ultrasound. This study compared the STK with traditional methods among novice and expert users. Thirty-three participants (17 novices, 16 experts) performed standardized shoulder examinations using both traditional methods and the STK. Outcomes included participant confidence, satisfaction, usability (System Usability Scale, SUS), user experience (UXS), net promoter score (NPS), workload (NASA-TLX), and image quality (5-point scale). Assessments were conducted pre- and post-examination. Novices demonstrated significant confidence gains with the STK compared to both pre-examination and traditional methods (p < 0.001). Novice satisfaction was higher with the STK (p = 0.002), whereas experts preferred traditional methods (p = 0.023). Usability increased for all users with the STK (p = 0.003), with novices showing marked improvements (p < 0.001). Experts rated traditional usability higher than novices (p = 0.010), though no group differences were observed for the STK. Novices expressed stronger preference for the STK across learnability, efficiency, utility, and satisfaction (all p < 0.005), with higher likelihood to recommend (p = 0.003). NASA-TLX scores indicated lower mental demand with the STK (p < 0.001), alongside performance and frustration differences between novices and experts under traditional and STK conditions. Experts achieved higher image quality scores than novices (p < 0.001). The STK enhanced novice confidence, satisfaction, usability, and reduced workload compared to traditional methods, while experts favored traditional examination. The STK offers a structured, user-friendly approach that may accelerate novice skill acquisition and promote consistency in musculoskeletal ultrasound, supporting wider adoption of POCUS in clinical practice.