第四章 人員素質(zhì)測評工具的評價與選擇1

第四章人員素質(zhì)測評工具

的評價與選擇1第一節(jié)人員素質(zhì)測評工具

的測量學特征2一、信度信度是指測驗結(jié)果的可靠性、穩(wěn)定性，即測驗手段和結(jié)果不受隨機誤差干擾的程度。1、再測信度

也稱穩(wěn)定性系數(shù)，指同一測評對象在不同時間用同一測評工具測量兩次（間隔一定時間），兩次測評所得結(jié)果的（分數(shù)）之間的相關(guān)系數(shù)（差異程度），表示測評工具在時間上的穩(wěn)定性。

通過積差相關(guān)系數(shù)來計算，驗證測評的科學性與可靠性。32、復(fù)本信度又稱等值系數(shù)，反映的是兩個相等的（等值的）復(fù)份測驗之間的一致性，是兩個平行測驗分數(shù)的相關(guān)性。優(yōu)點：①避免再測信度的記憶效果和練習效應(yīng)；②適用于長期追蹤研究或調(diào)查某些干涉變量對檢測結(jié)果的影響③減少作弊的可能性缺點：①不能消除練習效應(yīng)；②副本與正本之間仍有遷移作用③副本及其難度難以把握43、內(nèi)部一致性信度又稱內(nèi)在一致性系數(shù)，反映測評工具（項目）內(nèi)部之間的同質(zhì)性，考察一個測評工具中想要測量相同內(nèi)容或特質(zhì)的各個項目是否真正測量了相同的內(nèi)容或特質(zhì)。分析方法：（1）項目折半分析

rt=2r/1+rr：奇數(shù)項與偶數(shù)項分數(shù)的相關(guān)系數(shù)5（2）ａ系數(shù)分析rt=(n/n-1)×(s2t-∑v2i)/s2tn：測評工具包含的項目數(shù)S2t：測評結(jié)果總分的方差V2i：第i個項目得分的方差例P31264、評分者一致性信度指的是不同的評分者使用同一測評工具時所評分數(shù)間一致性。主要反映測評者主觀上的誤差。分析方法：肯得爾和諧系數(shù)

W=[∑R2i﹣

(∑Ri)2]/(1/12)n2(m3﹣m)

n：測評者人數(shù)

m:測評項目個數(shù)

R:第i個項目所有被測者的等級之和或（分數(shù)之和）例P31375、影響信度的因素被測試者測評者（主試）測評內(nèi)容分數(shù)的分布情況意外干擾因素8二、效度測評工具的有效性就叫效度，指測量的正確性與準確程度。反映測量的結(jié)果是否與實際的結(jié)果相符合。9（一）效度與信度的關(guān)系1、二者所考慮的誤差性質(zhì)不同信度評估的是隨機誤差效度評估的是系統(tǒng)誤差2、高信度是高效度的必要條件，而不是充分條件10二、效度的種類1、內(nèi)容效度即測評工具的內(nèi)容能否有效代表測評所要求的內(nèi)容范圍。①內(nèi)容效度最適合于評估教育和職業(yè)成就測試；②適合于某些用于選拔和分類的人事測評；③內(nèi)容效度一般不適用于能力傾向測試和人格測試11內(nèi)容效度應(yīng)用中應(yīng)注意1、內(nèi)容效度背后的假設(shè)是，將來被聘用的人在被聘用是已經(jīng)具備了一定的知識、技術(shù)和能力；2、由于主觀判斷在內(nèi)容效度中所取的作用很大，因而將判斷過程中的推測成分降到最小顯得非常關(guān)鍵。122、構(gòu)想效度人員素質(zhì)測評所關(guān)心的心理特征往往具有一定的理論構(gòu)想，例如關(guān)于能力結(jié)構(gòu)、人格結(jié)構(gòu)的假設(shè)。那么，從測評的理論依據(jù)來說，測驗實際所得的結(jié)果應(yīng)該符合測驗的理論構(gòu)想或假設(shè)，即測評的構(gòu)想效度。確定構(gòu)想效度的步驟：①建立理論框架，以解釋被試者在測試上的表現(xiàn)②依據(jù)理論框架，推演出有關(guān)各種測試成績的假設(shè)；③以邏輯或?qū)嵶C的方法來驗證假設(shè)。133、實證效度就是指測評工具對處于特定環(huán)境中的個體行為進行預(yù)測時的有效性，即測評工具對于我們所感興趣的行為能夠預(yù)測得怎么樣。14（三）影響效度的因素被測試者測試的長度測試題目的質(zhì)量實施測試時的干擾因素15三、難度和區(qū)分度1、項目難度P=R/NP：難度指數(shù)R：答對人數(shù)N：參與測試總?cè)藬?shù)一般測試試題難度指數(shù)應(yīng)在0.3—0.7之間；整份測試試卷的平均難度指數(shù)在0.5是理想的。應(yīng)注意避免“天花板效應(yīng)”和“地板效應(yīng)”。162、項目區(qū)分度D=（H-L）/ND：區(qū)分度指數(shù)H：高分組答對題的人數(shù)L：低分組答對題的人數(shù)N：參與測試總?cè)藬?shù)例P317

區(qū)分度與難度是密切相關(guān)的。也就是對被測試者的水平有良好的鑒別能力，能將高水平的受測者與低水平的受測者很好的區(qū)分開來。17三、標準化標準化是指測驗編制、實施、記分和對分數(shù)的解釋必須遵循嚴格的統(tǒng)一的科學程序，保證對所有被測者來說，施測的內(nèi)容、條件、記分過程、解釋系統(tǒng)都相同。它包括：①測驗題目的標準化；②實施過程和記分的標準化；③選用有代表性的常模。18第二節(jié)人員素質(zhì)測評的常用工具19一、標準化紙筆測驗標準化紙筆測驗就是只用筆和紙就能進行的測驗，但它要求測驗全過程（包括題目、回答方式、測驗時間、評分及分數(shù)解釋等的標準化。

常用的標準化紙筆測驗有：人格測驗、成就測驗、能力測驗等。20標準化紙筆測驗的優(yōu)缺點優(yōu)點方便性經(jīng)濟性客觀性缺點無法測驗被測者的行為表現(xiàn)；測驗實施程序較為正式化；無法避免考試技巧和猜測因素的影響。21二、投射測驗1、投射測驗的含義要求被試對一些模棱兩可或模糊不清、結(jié)構(gòu)不明確的刺激做出描述和反映，據(jù)此來分析和推斷被試的內(nèi)在心里特征。投射測驗主要用于人格、動機等內(nèi)容的測驗。2、投射測驗的特點非結(jié)構(gòu)性隱蔽性整體性223、投射測驗的分類聯(lián)想法投射測驗構(gòu)造法投射測驗完成法投射測驗表露法投射測驗選擇或排列法投射測驗4、投射測驗的局限計分和解釋缺乏客觀標準；難以體現(xiàn)公平難以避免防御反映的干擾耗費的時間精力大，對主試要求高23三、行為模擬與觀察類測驗它是通過安排一定的情境，在其中觀察特定的個體或群體的特定行為，從中分析需要考察對象的內(nèi)在素質(zhì)或特征，它的技術(shù)核心是行為觀察。具體又分為：自然觀察設(shè)計觀察自我觀察24行為模擬與觀察類測驗的優(yōu)缺點優(yōu)點真實預(yù)測效果好可獲取較多信息缺點操作較為困難；測驗成本高；分析較復(fù)雜。25四、基于工作情景的綜合類測驗公文筐測驗：即讓被測試者在所安排的假想的情境中扮演某一管理者的角色，進行一系列的公文處理，對其處理的方式方法以及結(jié)果等進行評價的一種方法。這類測驗主要有：面試：即考官針對與工作有關(guān)的內(nèi)容，與被試進行面對面的交談，達到了解，評價的目的。調(diào)查：即對員工的某些意愿、態(tài)度、觀點或感受等認知性或情感性心里狀態(tài)或行為傾向進行信息搜集，并做出分析評價。26第三節(jié)人員素質(zhì)測評工具設(shè)計27一、素質(zhì)測評工具設(shè)計和編制的一般程序明確測驗?zāi)康闹贫ň庮}計劃編輯題目題目的測試與分析組合成測驗將測驗標準化對測驗進行鑒定編寫測驗說明書28（一）測量目標的分析1、預(yù)測性測驗2、顯示性測驗3、特殊心理品質(zhì)或特質(zhì)測驗29（二）制定編題計劃1、指標范圍、權(quán)重和內(nèi)容2、題目類型與數(shù)量3、編題記分方法30（三）編輯題目1、搜集有關(guān)資料2、