1、量量測(cè)測(cè)系系統(tǒng)統(tǒng)分析分析(Measurement Systems Analysis) Analysis)製作: Lotus 2013/06/06 審核: Charles 2013/06/06 Measurement System Analysis量測(cè)系統(tǒng)分析量測(cè)系統(tǒng)分析 ISO/TS16949 要求必須對(duì)要求必須對(duì)管管制計(jì)制計(jì)劃劃（Control Plan）中指示的所有檢驗(yàn)、中指示的所有檢驗(yàn)、測(cè)量和試驗(yàn)裝置進(jìn)行量測(cè)系統(tǒng)分析。測(cè)量和試驗(yàn)裝置進(jìn)行量測(cè)系統(tǒng)分析。 Measurement System Analysis 什麼是量測(cè)系統(tǒng)分析l 在測(cè)量過(guò)程中所得到的“測(cè)量值”，決不是“真實(shí)值”，為所得到的

2、“測(cè)量值”包含了“真實(shí)值”以及“變異值l 量測(cè)系統(tǒng)分析 (MSA)提供一種系統(tǒng)性的方法，以鑑別出整體的製程變異中，有多少是來(lái)自於量測(cè)系統(tǒng)的變異 觀察值 = 實(shí)際值 + 量測(cè)誤差量測(cè)系統(tǒng)包含以下要素:量測(cè)系統(tǒng)1.量具.設(shè)備(軟.硬體)2.操作(人員.過(guò)程)3.測(cè)試環(huán)境4.待測(cè)試件Measurement System Analysis量測(cè)系統(tǒng)誤差 x x x x x x x x x x x x x x xxxxxxxx xxxxxxxxxx準(zhǔn)確但不精確精確但不準(zhǔn)確準(zhǔn)確而且精確不準(zhǔn)確而且不精確 x x x x x x x x x x x x x ABCDMeasurement System Anal

3、ysis案例說(shuō)明：原始製程能力原始製程能力製程分佈：)5 . 1,15(NX產(chǎn)品界限(規(guī)格)：1812 X該生產(chǎn)製程所生產(chǎn)的產(chǎn)品會(huì)有4.55%的不良率。 量測(cè)結(jié)果量測(cè)結(jié)果製程分佈：)5 . 2,16(NY產(chǎn)品的不良率為26.67%。量測(cè)儀器或測(cè)試設(shè)備的誤判率量測(cè)儀器或測(cè)試設(shè)備的誤判率在最差情況下(worst case)，有26.67%的良品會(huì)因量測(cè)或測(cè)試錯(cuò)誤而誤判為不良品。在最差情況下(worst case)，有4.55%的不良品會(huì)因量測(cè)或測(cè)試錯(cuò)誤而誤判為良品。Probability Density Functiony=normal(x,16,2.5)0.000.040.080.120.160

4、.208910 11 12 13 14 15 16 17 18 19 20 21 22Probability Density Functiony=normal(x,15,1.5)0.000.040.080.120.160.200.240.288910 11 12 13 14 15 16 17 18 19 20 21 22Measurement System Analysis為什麼要進(jìn)行量測(cè)系統(tǒng)分析 確認(rèn)目前的量測(cè)系統(tǒng)是否可接受 獲得精確的量測(cè)資料 找出量測(cè)系統(tǒng)的變異源 確認(rèn)改善量測(cè)系統(tǒng)的方向透過(guò)量測(cè)系統(tǒng)收集流程中所有的資訊，同時(shí)也依據(jù)它作為系統(tǒng)修正的依據(jù)Measurement System A

5、nalysis如何得知量測(cè)儀器或測(cè)試設(shè)備的量測(cè)或測(cè)試能力(measurement capability)呢？(一)、良好的準(zhǔn)確度(accuracy)，即偏差(bias)越小越好。(二)、良好的精確度(precision)，即量測(cè)的變異(variation) 越小越好。Measurement System Analysis 量測(cè)系統(tǒng)的誤差可分為兩大類： 準(zhǔn)確性(Accuracy)及精確性(precision)。準(zhǔn)確性是用來(lái)描述量測(cè)值與物件真實(shí)值之間的差異。 精確性是用來(lái)描述當(dāng)使用相同量具，量測(cè)相同物件多次所產(chǎn)生的變異。Measurement System Analysis量測(cè)系統(tǒng)的統(tǒng)計(jì)特性欲獲得

6、高品質(zhì)的量測(cè)值，量測(cè)系統(tǒng)需具備以下特性量測(cè)系統(tǒng)在穩(wěn)定的管制狀態(tài)下, under repeatable condition, no special cause量測(cè)系統(tǒng)的變異需相對(duì)小於製程的變異, why?system used to monitor process variation量測(cè)系統(tǒng)的變異需相對(duì)小於產(chǎn)品規(guī)格, why?system used to classify OK/ NG量測(cè)系統(tǒng)的分辨力不超過(guò)製程變異與產(chǎn)品規(guī)格的1/10Measurement System Analysis評(píng)估量測(cè)系統(tǒng)的三個(gè)重點(diǎn)測(cè)量系統(tǒng)必須顯示足夠的靈敏性。(解析能力) 1.首先，儀器(和標(biāo)準(zhǔn))是否有足夠得分辨力?

7、 2.測(cè)量系統(tǒng)是否證明具有有效的解析度? 測(cè)量系統(tǒng)必須是穩(wěn)定的。(再生及再現(xiàn))統(tǒng)計(jì)特性（誤差）在預(yù)期的範(fàn)圍內(nèi)一致，並足以滿足測(cè)量的目的（產(chǎn)品控制或程序控制）。(線性)Measurement System Analysis分辨力Discrimination 分辨力是儀器可以偵測(cè)並實(shí)際顯示出被測(cè)特性微小變化量的能力 通常是指某個(gè)量測(cè)儀器上最小刻度的值 亦被稱為“解析度(resolution)”或”可讀性(readability)” 分辨力不足將無(wú)法察覺(jué)製程中特殊原因的變異Measurement System Analysis分辨力:量測(cè)系統(tǒng)發(fā)現(xiàn)並真實(shí)地表示被測(cè)特性很小 變化的能力如最小量測(cè)刻度太大

8、無(wú)法辨別被測(cè)特性很小變化稱為分辨力不足,分辨力不足可以在R-Chart上顯現(xiàn)出來(lái).圖1圖21.量測(cè)系統(tǒng)分辨力不足,導(dǎo)致只有13個(gè)值落在管制界限內(nèi)或1/4 R=0 如圖1所示.2.量測(cè)系統(tǒng)分辨力足夠,所有的值落在管制界限內(nèi).Measurement System Analysis量測(cè)系統(tǒng)評(píng)估的準(zhǔn)備 評(píng)估計(jì)劃決定其統(tǒng)計(jì)特性，如電子儀表不需評(píng)估其重複性。 決定量測(cè)者，被測(cè)物與重複量測(cè)的數(shù)量。考慮的因素如關(guān)鍵尺寸與產(chǎn)品型態(tài)。 量測(cè)者必須是現(xiàn)場(chǎng)的實(shí)際的操作員。 選擇的被測(cè)物必須涵蓋產(chǎn)品的製程變異。 量測(cè)系統(tǒng)的分辨力不超過(guò)製程變異的1/10 確定與遵行量測(cè)程序。Measurement System Anal

9、ysis量測(cè)的穩(wěn)定性(stability)： v 穩(wěn)定性（或漂移）是指測(cè)量系統(tǒng)經(jīng)過(guò)一段長(zhǎng)時(shí)間下段長(zhǎng)時(shí)間下，測(cè)量同一參考值或零件的同一特性時(shí)獲得的測(cè)量總變異。v 換句話說(shuō)，穩(wěn)定性是偏倚偏倚隨時(shí)間的變化。v 對(duì)未達(dá)穩(wěn)定狀態(tài)的量測(cè)系統(tǒng)進(jìn)行再現(xiàn)性 / 再生性分析 (Gage R & R)，結(jié)果可能敝多於利Measurement System Analysis量測(cè)的穩(wěn)定性(stability)：?jiǎn)栴}一、量測(cè)的穩(wěn)定性(stability)如何得知？步驟1. 取標(biāo)準(zhǔn)產(chǎn)品於標(biāo)準(zhǔn)量測(cè)儀器或測(cè)試設(shè)備上由訓(xùn)練合格的作業(yè)人員進(jìn)行10次之反覆量測(cè)或測(cè)試。步驟2.選取一量測(cè)週期，於定期每隔一段時(shí)間(每小時(shí),每天或每週)量

10、測(cè)基準(zhǔn)件3-5次,且至少量測(cè)2025次,並記錄之 步驟3. 將上述所得平均值以管制圖方式呈現(xiàn)。問(wèn)題二、量測(cè)的穩(wěn)定性(stability)如何判別？依管制圖的判別準(zhǔn)則，即可判斷該量測(cè)儀器或測(cè)試設(shè)備是否具有量測(cè)的穩(wěn)定性(stability)。Measurement System Analysis量測(cè)的準(zhǔn)確度(accuracy)與偏差(bias) 量測(cè)的準(zhǔn)確度(accuracy)：指觀察樣本量測(cè)所得平均值與真值的接近程度。量測(cè)的偏差(bias)：真值與量測(cè)平均值的差異。即以偏差(bias)來(lái)衡量準(zhǔn)確度(accuracy)Standard ValueAverageObserved ValueBIASM

11、easurement System Analysis準(zhǔn)確度(accuracy)：以偏差(bias)表示問(wèn)題一、量測(cè)偏差(bias)為何？步驟1.取標(biāo)準(zhǔn)產(chǎn)品於標(biāo)準(zhǔn)量測(cè)儀器或測(cè)試設(shè)備上進(jìn)行10次之反覆量測(cè)或測(cè)試。得該標(biāo)準(zhǔn)產(chǎn)品之品質(zhì)特性值的量測(cè)平均值；以 表之。步驟2. 取同樣的標(biāo)準(zhǔn)產(chǎn)品於預(yù)使用的量測(cè)儀器或測(cè)試設(shè)備上進(jìn)行15次之反覆量測(cè)或測(cè)試。得該標(biāo)準(zhǔn)產(chǎn)品之品質(zhì)特性值的量測(cè)平均值；以 表之。 步驟3. 求取量測(cè)偏差， 。計(jì)算 Bias = (repeatability) / g 算 t 統(tǒng)計(jì)量 並進(jìn)行檢定 t = Bias / Bias 若 t t (v, 1-/2) 則表示有顯著偏差註(1). 所

12、謂標(biāo)準(zhǔn)產(chǎn)品是指該產(chǎn)品具有高度的穩(wěn)定性。(2). 所謂標(biāo)準(zhǔn)量測(cè)儀器或測(cè)試設(shè)備是指該儀器或設(shè)備已具有良好的測(cè)試能力。xy|yxbias問(wèn)題二、量測(cè)偏差(bias)的可接受條件為何？若0落在偏倚值附近的1-(95%)信賴區(qū)間內(nèi),是可被接受的 Measurement System Analysis1) 參考值的取得有錯(cuò)誤2) 儀器磨損3) 儀器製作對(duì)象尺寸不對(duì)4) 儀器量錯(cuò)了特性5) 儀器未校驗(yàn)妥當(dāng)6) 檢驗(yàn)員未能妥當(dāng)使用儀器7) 儀器修正計(jì)算錯(cuò)誤Measurement System Analysisv 線性:在測(cè)量設(shè)備預(yù)期的工作(測(cè)量)範(fàn)圍內(nèi)，偏倚值的差異。觀測(cè)平均值有偏倚無(wú)偏倚參考值量測(cè)的線性(l

13、inearity)：Measurement System Analysis量測(cè)的線性(linearity)：?jiǎn)栴}一、量測(cè)的線性(linear)關(guān)係如何得知？步驟1.選取至少五顆標(biāo)準(zhǔn)產(chǎn)品，該五顆產(chǎn)品的特性值要能涵蓋欲量測(cè)的作業(yè)涵蓋欲量測(cè)的作業(yè)範(fàn)圍範(fàn)圍。(說(shuō)明：假設(shè)我們期望量測(cè)設(shè)備能量測(cè)特性值的範(fàn)圍為1020，則五顆產(chǎn)品中應(yīng)具有特性值為10,15及20的產(chǎn)品；如此才能涵蓋預(yù)量測(cè)的作業(yè)範(fàn)圍)步驟2.由訓(xùn)練合格的作業(yè)人員於預(yù)使用的量測(cè)設(shè)備上對(duì)每顆產(chǎn)品進(jìn)行10次之反覆量測(cè)或測(cè)試。步驟3.計(jì)算每顆產(chǎn)品10次之反覆量測(cè)或測(cè)試的平均值(記之為x )。並與其真值比較求取偏差(bias)(記之為y)。 Measu

14、rement System Analysis步驟4.計(jì)算零件每次測(cè)量的偏倚及零件偏倚的平均值。步驟5.在線性圖上畫出參考值的每個(gè)偏倚和偏倚平均值步驟6.求取最能吻合這些點(diǎn)的線性回歸線並計(jì)算吻合度 (R2) 線性回歸線程式為程式為 y = ax + by = ax + b x = x = 參考值參考值 y = y = 偏差偏差 a = a = 斜率斜率 b = b = 截距截距 線性率 (Linearity) = 斜率 x製程變異（或公差） 線性率百分比 (% Linearity) = 100 (線性率 /製程變異（或公差） ) =斜率 x 100參考值Measurement System An

15、alysis問(wèn)題二、量測(cè)的線性(stability)準(zhǔn)則如何判別？1.畫出“偏倚=0”線，評(píng)審該圖指出是否存在特殊原因和線性的可接受性2.線性判定基準(zhǔn)：線性百分比在10%時(shí)量測(cè)系統(tǒng)可接受。 註：1.為使測(cè)量系統(tǒng)線性可被接受，“偏倚=0”線必須位 於該線的自信度區(qū)間 2.量測(cè)系統(tǒng)線性特性的關(guān)鍵是斜率而不是吻合度 R2； 斜率越小越好Measurement System Analysis再現(xiàn)性再現(xiàn)性(Repeatability)l 再現(xiàn)性又稱為量具變異,是指相同的測(cè)量人員、使用相同設(shè)備、在相同校驗(yàn)期間、相同實(shí)驗(yàn)室、採(cǎi)用相同的方法，在較短的時(shí)間內(nèi)，對(duì)相同零件的相同特性測(cè)量的結(jié)果，所得到的的測(cè)量變異主

16、值主值良好重復(fù)性良好重復(fù)性不良重復(fù)性不良重復(fù)性主值主值Measurement System Analysis再生性再生性(Reproducibility)u 不同的測(cè)量人員、使用相同設(shè)備、相同實(shí)驗(yàn)室、採(cǎi)用相同的方法，對(duì)相同零件的相同特性測(cè)量的結(jié)果，其量測(cè)平均值之變異。ReproducibilityOperator AOperator B檢查員檢查員 B檢查員檢查員C檢查員檢查員 A檢查員檢查員 B檢查員檢查員 C檢查員檢查員 A主值主值Operator CMeasurement System Analysis零件間變異X-Chart圖分析:圖1圖2若測(cè)量平均值全部落在管制界限內(nèi),則零件變異隱藏

17、在再現(xiàn)性之內(nèi),且量測(cè)變異支配制程變異-如圖1反之若測(cè)量平均值過(guò)半落在管制界限外,則此量測(cè)系統(tǒng)適用-如圖2 Measurement System Analysis GRR: Gauge Repeatability and Reproducibility 量具的再現(xiàn)性與再生性 目的: 評(píng)估一個(gè)量測(cè)系統(tǒng)的量測(cè)能力,並以此統(tǒng)計(jì)分析結(jié)果作為對(duì)操作者.量測(cè)設(shè)備變異狀況之改善參考什麼叫GRRMeasurement System Analysis1.本法以3個(gè)作業(yè)者.10個(gè)零件各量測(cè)3次,以3次量測(cè)誤差的平均值和作業(yè)者間平均值的量測(cè)誤差作再現(xiàn)性(量具變異)和再生性(操作者變異)分析2.本法可區(qū)分量測(cè)系統(tǒng)的再現(xiàn)

18、性和再生性,但無(wú)法判定作業(yè)者與量具的交互作用3.本法對(duì)操作者.量具及樣品等實(shí)驗(yàn)要求同上GRR(量具的再現(xiàn)性與再生性)步驟Measurement System Analysis2 22+=2222=+測(cè)量系統(tǒng)產(chǎn)品產(chǎn)品總量總量產(chǎn)品總量產(chǎn)品變異性（實(shí)際變異性）測(cè)量變異性總體變異性（觀察到的變異性）重復(fù)性再現(xiàn)性GRR統(tǒng)計(jì)意義Measurement System Analysis結(jié)果結(jié)果數(shù)值分析數(shù)值分析 一.量具再現(xiàn)性和再生性的“數(shù)據(jù)表”和“報(bào)告表”的功能1.提供了數(shù)據(jù)的數(shù)值分析方法 1.評(píng)定變異及各種變異佔(zhàn) 整個(gè)測(cè)量系統(tǒng)的過(guò)程變異 2.再現(xiàn)性變異3.再生性變異 4.零件間變異2.上述變異與圖表分析結(jié)果

19、做比較並對(duì)此作補(bǔ)充。Measurement System Analysis 1.再現(xiàn)性或設(shè)備變異（EV） EV=RK1 2.再現(xiàn)性或評(píng)價(jià)人變異（AV） AV= Xdiffk22-（EV） 2 （nr）式中:Xdiff評(píng)價(jià)人的最大平均值差 K2 n零件數(shù) r試驗(yàn)次數(shù) 註：如果根號(hào)下計(jì)算值為負(fù)數(shù)，則評(píng)價(jià)人變異（AV） 會(huì)為零。 二.對(duì)變異數(shù)值得分析Measurement System Analysis3.再現(xiàn)性&再生性變異（R&R） GR&R= （EV）2+（AV）2 4.零件間變異（PV） PV= Rp K3 式中：Rp零件平均值的全距5.總變異（TV） TV= （GR&R）2+（PV）2Mea

20、surement System Analysis6.各變異與總變異(TV)的比較。 一但研究中每個(gè)因素的變異確定後，便可與總變異 進(jìn)行比較。1） 設(shè)備變異佔(zhàn)總變異的百分率（%EV） %EV=100EV/TV2）評(píng)價(jià)人變異佔(zhàn)總變異的百分率（%AV） %AV=100AV/TV3）再現(xiàn)性與再生性變異佔(zhàn)總變異的百分率（% R&R） % R&R=100GR&R/TV4）零件間變異佔(zhàn)總變異的百分率（%PV） %PV=100PV/TVMeasurement System Analysis量測(cè)系統(tǒng)分析作業(yè)程序量測(cè)系統(tǒng)分析作業(yè)程序(QAD014)10%10%GR&RGR&R 判定量具合格判定量具合格 ，並訂定，

21、並訂定GR&RGR&R實(shí)施週期為每年一次。實(shí)施週期為每年一次。30%30%GR&RGR&R10% 10% 判定量具可能被接受，並訂定判定量具可能被接受，並訂定GR&RGR&R實(shí)施週期為每半年一次。實(shí)施週期為每半年一次。 GR&RGR&R30% 30% 判定為量具系統(tǒng)須加以改進(jìn)，該量測(cè)系統(tǒng)（設(shè)備）判定不判定為量具系統(tǒng)須加以改進(jìn)，該量測(cè)系統(tǒng)（設(shè)備）判定不 可接受，並檢討原因，採(cǎi)適當(dāng)處理方式可接受，並檢討原因，採(cǎi)適當(dāng)處理方式: : 若若EV%AV%EV%AV%：則表示設(shè)備的變異大於人為的變異，因此需針對(duì)量測(cè)系統(tǒng)：則表示設(shè)備的變異大於人為的變異，因此需針對(duì)量測(cè)系統(tǒng) 做適當(dāng)之處置，如：設(shè)備維修、調(diào)整或報(bào)

22、廢或降級(jí)使用。做適當(dāng)之處置，如：設(shè)備維修、調(diào)整或報(bào)廢或降級(jí)使用。 若若AV%EV%AV%EV%：則表示人為的變異大於設(shè)備的變異，因此需針對(duì)人員做：則表示人為的變異大於設(shè)備的變異，因此需針對(duì)人員做 適當(dāng)之處置，如：人員重新教育訓(xùn)練；改善檢測(cè)方式適當(dāng)之處置，如：人員重新教育訓(xùn)練；改善檢測(cè)方式等。等。Measurement System Analysis何謂計(jì)數(shù)性測(cè)量系統(tǒng)何謂計(jì)數(shù)性測(cè)量系統(tǒng) 計(jì)數(shù)型測(cè)量系統(tǒng)屬於系統(tǒng)中的一類，其測(cè)量值是一種有限的分級(jí)數(shù)，與結(jié)果是連續(xù)值的測(cè)量系統(tǒng)不同。 最常見(jiàn)的是Go/NG的量具，只可能有兩種結(jié)果。其他計(jì)數(shù)型測(cè)量系統(tǒng)，例如可視標(biāo)準(zhǔn)，結(jié)果可形成57個(gè)不同的分級(jí)。這些要用計(jì)數(shù)

23、型方法進(jìn)行分析。 因?yàn)槿魏螠y(cè)量系統(tǒng)都存在可量化的風(fēng)險(xiǎn)，由於最大的風(fēng)險(xiǎn)來(lái)自於區(qū)分的邊界，最適當(dāng)?shù)姆轿鍪怯昧烤咝阅芮€將測(cè)量系統(tǒng)變異量化。Measurement System Analysis計(jì)數(shù)性測(cè)量系統(tǒng)計(jì)數(shù)性測(cè)量系統(tǒng)-目的目的v 製程評(píng)估 評(píng)估你的檢查標(biāo)準(zhǔn)或工作質(zhì)量標(biāo)準(zhǔn)與客戶要求的一致性 確定所有班次, 機(jī)器等的檢查人員是否使用相同標(biāo)準(zhǔn)來(lái)決定合格與不合格 量化檢查人員準(zhǔn)確重復(fù)其檢驗(yàn)結(jié)果的能力 確定檢查人員與“已知標(biāo)準(zhǔn)”的一致性及傾向於消費(fèi)者變異還是生産者變異v 製程改善 發(fā)現(xiàn)是否需要培訓(xùn), 缺少程序或缺乏標(biāo)準(zhǔn)Measurement System Analysis計(jì)數(shù)性測(cè)量系統(tǒng)分析計(jì)數(shù)性測(cè)量系統(tǒng)

24、分析 準(zhǔn)備 從製程中挑選30個(gè)零件, 50%合格, 50%不合格. 可能的話, 挑選近乎於合格和不合格的樣本. 挑選檢查人員 受過(guò)完全培訓(xùn)的和有資格的. 實(shí)施 要求每一個(gè)檢查人員隨機(jī)地檢查零件, 決定合格與不合格並重覆此檢查. 分析 將資料登錄到資料表中來(lái)確定測(cè)量系統(tǒng)的有效性. 評(píng)估 將結(jié)果載入文件. 如果必要, 採(cǎi)取適當(dāng)?shù)拇胧┱{(diào)整測(cè)量製程. 重做 R&R 試驗(yàn), 核實(shí)調(diào)整後的有效性Measurement System Analysis計(jì)數(shù)性測(cè)量系統(tǒng)判定計(jì)數(shù)性測(cè)量系統(tǒng)判定 % 檢驗(yàn)員分?jǐn)?shù) (% Appraiser Score ) 如果大多數(shù)員工都是100%, 則培訓(xùn)作用極為有限 如果所有員工分

25、數(shù)都很低, 則可能需要改變測(cè)量系統(tǒng) . 篩選 % 有效分?jǐn)?shù) (Screen % Effective Score) 如果員工本身前後一致但是相互間不一致, 則重新培訓(xùn)可幫助減少錯(cuò)誤. 檢驗(yàn)有效性的目標(biāo)永遠(yuǎn)是100%, 但實(shí)務(wù)上以80%為下限(改善起點(diǎn)).我們發(fā)現(xiàn)各行業(yè)都難以把有檢驗(yàn)效性維持在80%以上. 造成這個(gè)問(wèn)題的原因可能是照明條件差, 檢查人員的視力有問(wèn)題, 缺乏外觀標(biāo)準(zhǔn)件, 缺乏定期培訓(xùn), 檢查人員流失, 産品變更, 客戶規(guī)格修改, 等等. 標(biāo)準(zhǔn)化分?jǐn)?shù) (Score vs. Attribute) 如果員工時(shí)常與標(biāo)準(zhǔn)不一致, 則需要改變測(cè)量系統(tǒng)(或局部標(biāo)準(zhǔn)/例子). Measurement System Analysis計(jì)數(shù)性測(cè)量系統(tǒng)計(jì)數(shù)性測(cè)量系統(tǒng)-範(fàn)例範(fàn)例Known PopulationY/NY/NSample # AttributeTry #1Try #2Try #1Try #2Try #1Try #2AgreeAgree1passpasspasspasspassfailfailNN2passpasspasspasspassfailfailNN3failfailfailfailpassfailfailNN4failfailf