能力試驗年度綜合表現評估

台美特別於 2019 年 2 月 27 日於「2019 實驗室品質管理實務分享暨台美能力試驗說明會」上舉辦國內能力試驗表現優異之傑出單位授獎典禮,您是否好奇要如何計算能力試驗的成績?如何進行成績排名?讓我們進一步瞭解能力試驗的「年度綜合表現評估方法」。

 

能力試驗結果轉化為表現統計量

參加者實驗室之能力試驗結果通常需轉化為「表現統計量」,以方便判別、解釋及與其他明確目標間相互比較。定量計畫中統計量種類繁多,台美使用 z 分數 (z score) 作為參加者表現評估的依據,z score 公式如下表示,x為參加者測試結果,xpt 為指定值,σpt 為能力評定標準差。

實驗室藉由定期參與能力試驗且獲得「通過」評價,以作為實驗室品質和水準的展現,累計參與計畫數越多,實驗室的能力試驗表現才越具「代表性」,實驗室測試結果越貼近指定值則表示其「準確性」優秀,而在多輪次的計畫中都能維持一定水準表現則是實驗室「穩定性」的展現。

為方便理解及討論各參加者實驗室於當年度之能力試驗表現狀況,我們以「打靶」為例,同一個實驗室(打靶選手) 於當年度參加之所有能力試驗結果皆會呈現在同一張靶紙上,參與計畫獲得之 z 分數即為彈孔,指定值即為紅心位置;若當年度參與能力試驗計畫獲得之結果數量越多,經統計轉換後將得到越多筆 z 分數,圖形意義則為彈孔越多,則此次比賽對於該選手越具「代表性」;若 z 分數較接近指定值,圖形意義則為彈孔越接近紅心位置,則顯示該選手具有較佳之「準確性」;若各 z 分數彼此間越接近,圖形意義則為彈孔彼此間越接近,則顯示選手表現具有優秀的「穩定性」。

 

能力試驗計分原則

為了因應各實驗室於同年度參與計畫種類多元並量化其綜合之表現水準,台美設計了後述之能力試驗表現計分規則,將分別詳細討論「代表性」、「準確性」及「穩定性」三大部份的計分原則。

 

能力試驗的代表性

  

將年度參與計畫及結果數乘以一定之常數後加總,並以 50 分作為滿分基準,若積分總和超過 50 分則以 50 分計,將總積分除以 50 再乘 100 即為代表性指標之分數,接下來我們分別以定量和定性計畫為範例來說明:

 

  • 範例一、計畫編號 SL108T02003 定性計畫
    分數計算方式:1*1.5(計畫分數)+4*0.5(結果分數)= 3.5
計畫編號計畫名稱性質分析項目
SL107T02003 藥品中金黃色葡萄球菌、
大腸桿菌、綠膿桿菌、
沙門氏桿菌
定性計畫金黃色葡萄球菌
大腸桿菌
綠膿桿菌
沙門氏桿菌
  • 範例二、計畫編號 SL107T10002 定量計畫
    分數計算方式:1*4.5(計畫分數)+5*1.5(結果分數)= 12
計畫編號計畫名稱性質分析項目
SL107T10002 食品營養素:粗蛋白質、
粗脂肪、水分、
灰分、鈉
定量計畫粗蛋白質
粗脂肪
水分
灰分

備註:

  1. 參與相同計畫 2 次(含2次)以上,計畫分數不重複計算,結果分數則照實際數量計算。
  2. 定量計畫回覆定性結果者,計畫分數以 4.5 分計算,結果分數以 0.5 分計算。

 

能力試驗的準確性

將定量及定性結果分別依公式計算得分後,乘以各自的積分佔比後進行加總。
定量結果計算公式: ( 2- | z 分數 | 之穩健平均值 )/ 2*100
定性結果計算公式: 定性結果滿意數 / 定性結果數*100

  • 範例三、O 公司參與之定量計畫

O 公司參與之定量計畫如下表所示,經計算得知定量結果積分為 5*4.5+9*1.5=36,
| z 分數 | 之穩健平均值為 0.460,則定量計畫分數為 (2-0.460)/2*100=77。

計畫編號計畫名稱分析項目z 分數| z 分數 |
SL107T00001食品中黴菌及酵母菌數黴菌及酵母菌0.480.48
SL107T00004食品中總生菌數、
大腸桿菌群及大腸桿菌
總生菌數1.081.08
大腸桿菌群0.410.41
大腸桿菌0.640.64
SL107T00008食品中金黃色葡萄球菌金黃色葡萄球菌0.920.92
SL107T00010食品中總乳酸菌數總乳酸菌0.130.13
SL107T00013食品中總生菌數、
大腸桿菌群及大腸桿菌
總生菌數0.000.00
大腸桿菌群0.470.47
大腸桿菌-0.010.01

其參與之定性計畫如下表所示,經計算得知定性結果積分為 2*1.5+2*0.5=4,且定性計畫分數為 2/2*100=100,則 O 公司於準確性指標之分數為 77*(36/(36+4))+100*(4/(36+4))=79.30。

計畫編號計畫名稱分析項目能力評定
SL107T00003食品中退伍軍人菌退伍軍人菌滿意
SL107T00014食品中沙門氏桿菌沙門氏桿菌滿意

 

能力試驗的穩定性

將定量結果以場次順序為 X 軸,z 分數為 Y 軸繪製一散佈圖,並找出各筆數據之回歸線,評估回歸線殘差之總變異數即為穩定性指標之分數。

 

能力試驗排名計算

最後將「代表性」、「準確性」及「穩定性」三大指標分別乘以 0.30、0.40 及 0.30 計算得該年度能力試驗表現總分,並依得分高低進行排序。

 

誰需要參加能力試驗?

 

2018 年度表現優異之傑出單位

榮獲受獎單位 (依筆劃順序排列)

  • 杏輝藥品工業股份有限公司
  • 佳乳食品股份有限公司
  • 佳格食品股份有限公司-大園廠品保處
  • 黑松股份有限公司-食品安全實驗室
  • 莊松榮製藥廠有限公司里港實驗室

觀看授獎典禮