13測量系統(tǒng)分析屬性33

1、測量系統(tǒng)分析屬性2022/8/271目標(biāo) 在本模塊結(jié)束時你將能夠：描述屬性測量系統(tǒng)分析定義基本的測量術(shù)語進行 屬性gage研究（測量系統(tǒng)分析）概要程序執(zhí)行測量研究2022/8/272 流程改善方法論步驟0：項目定義步驟：流程測量步驟：流程分析步驟：流程改善步驟：流程控制計劃項目，確定重要的流程輸入/輸出變量進行基本測量系統(tǒng)地測量儀器研究進行短期流程能力研究并建立控制計劃完成FMEA并評價控制計劃完成多變量研究以確定潛在的關(guān)鍵輸入變量評價數(shù)據(jù)并優(yōu)化關(guān)鍵的輸入變量用實驗設(shè)計驗證關(guān)鍵的輸入變量決定最優(yōu)化的操作窗口修正控制計劃最后完成控制計劃持續(xù)驗證流程的穩(wěn)定性和能力2022/8/273研究測量系統(tǒng)

2、我們一旦有正確的數(shù)據(jù)，我們必須確定有能力來測量它需要獲取的信息 - 測量誤差有多大？ - 測量誤差的來源 是什么？ - 測量系統(tǒng)隨時間變化依然是穩(wěn)定 的嗎？ - 對于研究有 足夠能力 嗎？ - 我們?nèi)绾?改善 測量系統(tǒng)？2022/8/274計數(shù)型數(shù)據(jù) MSA 如果很多人評估同一事物，他們需要達成一致： - 相互之間 - 他們自己之間計數(shù)型數(shù)據(jù)比計量型數(shù)據(jù)包括更少的信息，但往往只有它是所能得到的 - 所以我們必須對完整的屬性測量進行持續(xù)不斷的研究問題是 - 我能夠相信我的測量系統(tǒng)得到的數(shù)據(jù)嗎？2022/8/275屬性 MSA目標(biāo) 確定： - 與整體一致的% - 與評價者一致的%（重復(fù)性） - 與

3、評價者之間一致的%（再現(xiàn)性） - 與已知標(biāo)準(zhǔn)一致的%（準(zhǔn)確性） - Kappa（究竟測量系統(tǒng)比隨機偶然性好多少）2022/8/276 Kappa技術(shù)非參數(shù)方式提供了一些處理主觀計數(shù)數(shù)據(jù)的工具Kappa技術(shù)可以用于屬性（計數(shù)型）/分類數(shù)據(jù)的分級當(dāng)質(zhì)量標(biāo)準(zhǔn)難于或不可能定義時使用幾個單位必需分類為由超過一個評價者測量一次以上組成 - 如果基本上是一致的，存在評價正確的可能性 - 如果一致性差，評價是 非常有限的2022/8/277屬性測量研究：方法2022/8/278 屬性測量研究-方法 挑選2-3個經(jīng)常評估的人隨機的向一個人提供樣本（不告訴哪個樣本是哪個）并讓這個人評估每一項一旦第一個人完成對所有

4、項目的評估，讓其他的幾個人重復(fù)這個工作一旦每個人都已經(jīng)評估了每一項，再重復(fù)一遍上面的實驗注意：所有評估人、項目及“實驗”的組合可能應(yīng)該 - 每個評估人必須檢測所有項目 - 每個評估人必須檢測同樣次數(shù)的項目（實驗）2022/8/279屬性MSA范例：投標(biāo)接受 這個范例源于一家公司評估合同報價.關(guān)注于當(dāng)可能應(yīng)該被接受卻可能拒絕的合同，對該部門進行研究，如何測定評價員評價的一致性.選取了50個樣本 一些是明確可以接受的，一些是明確不能接受的，還有一些考慮為處于“邊界線”之間。四個評估員和一個專家記錄了他們的評價結(jié)果 - 拒絕 或 接受合同2022/8/2710屬性MSA范例：投標(biāo)接受 結(jié)果顯示出明確

5、的問題 （顯示了50個樣本中的20個結(jié)果）在50個樣本中 ， 檢驗者實際上只對一個“拒收”的樣本全體一致通過他們對于29個“接受”樣本全體一致通過%的不一致產(chǎn)品 = 20/50=40%SampleABCD1RRRA2AARA3AAAA4AAAA5AAAA6AAAA7AAAA8AAAA9AAAA10ARRR11RAAR12AAAA13RAAR14ARAA15AAAA16AAAA17AAAA18AAAA19AAAA20AAAA檢驗之間是否達成一致？2022/8/2711屬性 MSA 范例：投標(biāo)報價 %不好的接受 %好的絕收A 9/13 = 69% 4/37 = 11%B 9/13 = 69% 4/

6、37 = 11%C 9/13 = 69% 4/37 = 11%D 8/13 = 62% 3/37 = 11% 整體正確判斷的% = 150/200 = 75% 檢驗者 與 專家的結(jié)果SampleABCD1RRRA2AARA3AAAA4AAAA5AAAA6AAAA7AAAA8AAAA9AAAA10ARRR11RAAR12AAAA13RAAR14ARAA15AAAA16AAAA17AAAA18AAAA19AAAA20AAAA5AAAR10ARRR12AAAR13RAAR與專家是否一致？2022/8/2712 Kappa技術(shù)在屬性MSA研究過程中，Kappa被用來總結(jié)在去除偶然 一致性后在評估人之間

7、的一致程度 - 如果存在實質(zhì)性的一致，那就存在級別準(zhǔn)確的 可能性 - 如果不能達成一致，分級的有效性就 非常有限了使用需求： - 測量的 單位是彼此獨立的 - 評估人的檢驗及分類是獨立的分類級別相互排斥及徹底的Minitab計算Kappa值作為屬性一致性分析輸出的一部分2022/8/2713 Kappa2022/8/2714 Kappa技術(shù) Kappa將在-1及+1之間Kappa值為+1的代表完全一致一般規(guī)則：如果K0.70，就需要注意測量系統(tǒng)！-1 to 0.0隨機一致最低限度 需要較大努力好 改善保證優(yōu)秀的Kappa值建議的解釋2022/8/2715 Kappa技術(shù)Kappa可以用于有多個

8、評價者和具有多個分類的情況客戶返品案例： - 一個綠帶有一個減少客戶返品的項目。由一位客戶服務(wù)代表（CSR）給 每一個客戶返品標(biāo)識一個代碼。大家會擔(dān)心 CSR 們標(biāo)識代碼時不能 夠始終一致。 - 三個評價者被要求為30個返品標(biāo)識原因代碼。每個評價者評價兩次（ 在兩個 不同時間各做一次）。 - 綠帶同時要求一個部門專家來評價返品情況2022/8/2716 Minitab 屬性一致性分析項目：TR MSA ATT .MPJ工作表：Customer Returns.MTW設(shè)計： - 3 CSRs （評價者） - 2天 - 30次退貨 （樣本）代碼在Category列中專家值在Expert列中2022

9、/8/2717 Minitab 屬性一致性分析使用屬性一致性分析來分析屬性測量系統(tǒng)的結(jié)果2022/8/2718 Minitab 屬性一致性分析首先填寫適當(dāng)?shù)牧行畔▽＜以u級確保在窗口Results中的Kappa選項被選中2022/8/2719 圖表分析評價者之間的一致性就象重復(fù)性這里CSR 1她自己有90%的時間是一致的。CSR 2有86.7%的時間是內(nèi)在性的一致，而CSR 3對于返回有96.7%的時間是一致的圖上顯示了95% C1一致性的%這個圖顯示了在CSRs與專家觀點之間一致性的%注意：這兩個圖有不同的測量刻度！2022/8/2720 數(shù)字輸出：在評價者范圍內(nèi)與左圖類似的信息（看前面的

10、幻燈片）增加特定的匹配及檢驗數(shù)量在評價者范圍內(nèi)評價一致性評價者 # 檢驗的 # 匹配的 # 比例（%）95.0% CIA 30 27 90.0 ( 73.5, 97.9 )B 30 26 86.7 ( 69.3, 96.2 )C 30 29 96.7 ( 82.8, 99.9 )匹配的# ：評價者在實驗過程中是一致的。2022/8/2721數(shù)字輸出評價者與專家這顯示了評價者被給予“正確”答案的頻率r每個評價者與標(biāo)準(zhǔn)評價一致性評價者 # 檢驗的 # 匹配的 # 比例（%）95.0% CIA 30 23 76.7 ( 57.7, 90.1 )B 30 20 66.7 ( 47.2, 82.7 )C

11、 30 22 73.3 ( 54.1, 87.7 )匹配的# ：評價者的評估在實驗過程中是與標(biāo)準(zhǔn)一致的。我們希望90%或更好的一致性2022/8/2722 數(shù)字輸出評價者之間的一致性與再現(xiàn)性相似：評價者之間 評價一致性檢驗的# 匹配的# 比例 （%） 95.0% CI 30 17 56.7（37.4 ，74.5）匹配# ：所有評價者之間的評估是一致的。 所用評價者與標(biāo)準(zhǔn)給出了檢驗標(biāo)準(zhǔn)有效性的指標(biāo)：所有評價者與標(biāo)準(zhǔn)評價一致性 檢驗的# 匹配的# 比例 （%） 95.0% CI 30 15 50.0（31.3，68.7）匹配的# ：所有評價者的評價與標(biāo)準(zhǔn)一致的數(shù)量。2022/8/2723 數(shù)字輸出

12、-Kappa為評價者之間提供每一類缺陷的Kappa及Kappa值（及其它部分）我們能夠識別缺陷類型到什么程度？2022/8/2724 Kappa 技術(shù)對于這個例子，下面的Kappa值被計算為 - 評價者自己單個類別的Kappa代表每個評價者多次評價同一個樣本的一致性每個評價者的總體Kappa代表評價者對于所有分類的一致性- 在評價者之間單個類別的Kappa代表所有評價者對于那個分類樣本的一致性總體Kappa代表整個研究范圍的一致性（涵蓋所有評價者和分類）2022/8/2725 Kappa 技術(shù)解釋結(jié)果 - 范圍從0.19到0.94的獨立Kappa值，意味著在評價者中的一 致性是：對于Damag

13、ed的檢查能力是優(yōu)秀的Administrative(管理）及Quantity（數(shù)量）的測量系統(tǒng)不可接受的低；Planned Adju（計劃調(diào)整）及Pricing（定價）的測量系統(tǒng)處于邊緣狀態(tài)Incorrect Pr(不正確的生產(chǎn)）、Overstock（過量庫存）及Quality（質(zhì)量）的測量系統(tǒng)可用 - 總體Kappa是0.7106，指示系統(tǒng)可以使用一些改善方法要改善這個測量系統(tǒng)就很可能需要改變每個缺陷類型的操作定義或再次訓(xùn)練評價者，或二者都需要2022/8/2726 改善屬性測量系統(tǒng)感受增效器（改善人類感覺的裝置）面具/模板（封閉不重要的信息）檢查清單自動化重組工作區(qū)域最為重要的是：評價標(biāo)準(zhǔn)

14、 2022/8/2727 測量系統(tǒng)-要問的問題你挑選了正確的測量系統(tǒng)了嗎？這個測量系統(tǒng)與關(guān)鍵輸出相關(guān)聯(lián)嗎？精確性、準(zhǔn)確性及穩(wěn)定性看起來像什么？變異的來源是什么，及測量誤差是什么？ 要改善這個系統(tǒng)需要做什么？我們是否向合適的人通知了我們的結(jié)果？這個系統(tǒng)是否在適當(dāng)?shù)牟课挥锌刂朴媱?？培?xùn)頻率是多少？頻率足夠嗎？相同的系統(tǒng)匹配嗎？2022/8/2728案例研究：屬性 MSA步驟1：數(shù)據(jù)完整性研究是對任何現(xiàn)有數(shù)據(jù)采集都要執(zhí)行 - 成本：完整性好步驟2：執(zhí)行 屬性 測量系統(tǒng)分析 確定是否可以準(zhǔn)確的測量發(fā)票錯誤 - 結(jié)論：評價者內(nèi)部還算一致（大約94%），但能夠使用微小改進評價者與專家和評價者間的準(zhǔn)確性是很

15、遭的（大約68%），并且繼續(xù)前應(yīng)該改善 - 所作的改進：建立判斷錯誤的一致性的操作詳細說明進行培訓(xùn) - 第二次MSA結(jié)果評價者內(nèi)部：100%評價者VS專家：95%在評價者之間：97%2022/8/2729案例研究：初始屬性 MSA評價者個人內(nèi)部重復(fù)性情況這里評價者1當(dāng)時與自己一致性是90%.評價者2當(dāng)時內(nèi)部的穩(wěn)定性是86.7%，并且評價者3重復(fù)時與自己匹配的是96.7%圖表顯示在95%置信區(qū)間條件下，一致性的%圖表顯示評價者和專家意見一致性的%注釋：這兩個圖表有不同的標(biāo)準(zhǔn)！2022/8/2730練習(xí)：糖果檢驗?zāi)繕?biāo)：評價M&M檢驗工具： - 3個檢驗員 - 一袋M&MS程序： - 在開袋前，定義計算你們關(guān)注的缺陷條件 - 讓你們的檢驗員評價糖果樣本的材料 - 評價測量系統(tǒng) - 報告任何建議的改進活動時間：45分鐘2022/8/2731如何進行：屬性MSA1. 設(shè)計研究總共30-50個樣本2-3評價者，至少重復(fù)測量一次 - 每個評價者必須檢驗所有數(shù)據(jù)項（樣本） - 每個評價者在每一輪試驗，必須檢驗這些相同的樣本（各輪試驗）理想的情況，也有“專家”評價2. 建立數(shù)據(jù)采集矩陣表3. 讓操作者1 按隨機順序測量所有樣本一次4. 讓操作者2按隨機順序測量所有樣本一次5. 繼續(xù)，直到所有操作者測量了樣本一次（這是Trial 1試驗1）6. 重復(fù)步驟3-5完