人員測評理論與技術在職研究生班專用2010孫健敏博士中國人民大學教授.1人員測評理論與技術在職研究生班專用.1教學目的與要求:通過本課程的學習，你應該了解測評的基本理論與原理；理解和領會測評的基本概念；熟悉和掌握測評的基本技術；弄清楚測評的必要性、重要性和局限性；能夠把基本理論和技術應用于實際環(huán)境中；能夠判斷測評手段的信度和效度并知道如何證明其有效性；學會用人員測評的觀點看待問題、分析問題和解決問題。.2教學目的與要求:通過本課程的學習，你應該.2目的與要求本課程將以講授為主，輔助以案例分析、模擬演練、個人作業(yè)。通過互動式的教學，旨在引導學生掌握基本的概念、理論和方法，學會分析問題和解決問題的角度和思路，特別是實際操作能力。.3目的與要求本課程將以講授為主，.3指定教材必讀教材：孫健敏主編《人員測評理論與技術》，湖南師范大學出版社，2008年.4指定教材必讀教材：孫健敏主編《人員測評理論與技術》，湖南師范引導案例請思考并回答下面的問題：你看了上海世博會開幕式嗎？有什么感受？如何評價？你選擇讀勞人院的在職研究生是否后悔？理由是什么？2一個合格的大學教師應具備什么條件（請列出5條最重要的）？.5引導案例請思考并回答下面的問題：.5討論題1這三個問題的回答難度一樣嗎？為什么？2如何衡量一個概念？3測評要解決什么問題？.6討論題1這三個問題的回答難度一樣嗎？為什么？.6第一章測評的一般原理一為什么要測評？二測評什么？三測評的含義與特性四測評的一般原則五測評的主要類型六測評的尺度與量表.7第一章測評的一般原理一為什么要測評？.7為什么要測評工作特性個人特點（個性差異）人與工作的匹配是否需要測評（效用）？.8為什么要測評工作特性.8測評什么素質行為心理.9測評什么素質.9素質分析心理素質身體素質文化素質個性素質（品德素質）.10素質分析心理素質.10行為分析行為的特點行為分析的維度.11行為分析行為的特點.11行為的特點人的行為是動態(tài)的人的行為是可控制的、可改變的人的行為是多樣的人的行為是有原因（動機）的人的行為受環(huán)境的制約B=F（P，E）.12行為的特點人的行為是動態(tài)的.12行為的分析維度發(fā)生的頻率反應的強度持續(xù)的時間發(fā)生的數(shù)目意義或影響可改變程度.13行為的分析維度發(fā)生的頻率.13測評的含義與特性測評是測量與評價的簡稱測量是用數(shù)字或符號對人的特點進行描述，而不論其價值的大小評價是依據定量描述或直覺經驗來確定某種特點的價值。測量和評價都要依賴某種法則.14測評的含義與特性測評是測量與評價的簡稱.14測量測量的三個要素：法則（參照點與單位）；數(shù)字或符號；事物物質測量——直接測量人員測量——間接測量（對抽象概念的測量）測量與測驗.15測量測量的三個要素：法則（參照點與單位）；數(shù)字或符號；事物.評價（評定）評價是一種價值判斷評價的三個要素：定量描述；加權；價值判斷.16評價（評定）評價是一種價值判斷.16測評的原理刺激-反應，投射，典型反應——難度反應心理反應——行為反應情境反應——慣常反應內在反應——外在反應.17測評的原理刺激-反應，.17測評原理的實用性是否能夠測評？是否有預測價值？Predictor的含義效用如何？（產出/投入）.18測評原理的實用性是否能夠測評？.18測評的主要類型選拔型測評（差異性）配置型測評（合適性）診斷型測評（準確性）預測型測評（有效性）開發(fā)型測評（實用性）考核型測評（公正性）.19測評的主要類型選拔型測評（差異性）.19第二章測評的基本概念測量尺度誤差信度與效度項目分析常模與樣本效用測量理論簡介.20第二章測評的基本概念測量尺度.20測評的尺度與量表名義尺度（Nominalscale）順序尺度(Ordinalscale)間距尺度（Intervalscale）比率尺度(Ratioscale).21測評的尺度與量表名義尺度（Nominalscale）.2名義（類別）尺度歸類時用要求：一個集合中所有成員都應分派到相同的數(shù)字，且沒有兩個集合被分派到相同的數(shù)字；標準必須明確。適用的統(tǒng)計方法：分布次數(shù)檢驗；百分比；列聯(lián)相關；X檢驗.22名義（類別）尺度歸類時用.22順序（等級）尺度對一個集合中的成員排列順序沒有相等的單位，沒有絕對零點不提供等級間的距離或差距統(tǒng)計分析：中位數(shù)；百分位數(shù)；等級相關系數(shù).23順序（等級）尺度對一個集合中的成員排列順序.23間距（區(qū)間）尺度有相等的單位，但無絕對零點只能做加減運算，不能做乘除運算統(tǒng)計分析：平均數(shù)、標準差、積差相關、F檢驗；T檢驗；方差分析；方差分析等.24間距（區(qū)間）尺度有相等的單位，但無絕對零點.24比率（等比）尺度有絕對零點，是最高級別的測量尺度具有所有其他尺度的特征統(tǒng)計分析：全部適用.25比率（等比）尺度有絕對零點，是最高級別的測量尺度.25什么是誤差誤差是在測量中與目的無關的變量（原因）所產生的不準確或不一致效應。任何測量都不是絕對準確的，不準確的數(shù)據就是誤差。.26什么是誤差誤差是在測量中與目的無關的變量（原因）所產生的不準誤差的兩層含義由與測量目的無關的變因引起是不準確或不一致的測量結果.27誤差的兩層含義由與測量目的無關的變因引起.27準確性與一致性的關系不準，不一致不準，一致準，一致.28準確性與一致性的關系.28隨機誤差（可變誤差）又與測量目的無關的偶然因素引起，又不易控制，使多次測量產生了不一致的結果。例如：稱重量的時候，不同人對秤桿高度的掌握不同。.29隨機誤差（可變誤差）又與測量目的無關的偶然因素引起，又不易控系統(tǒng)誤差（恒定誤差）由與測量無關的變量引起的一重恒定而有規(guī)律的誤差，穩(wěn)定地存在于每一次測量中，測值一致，但不準。在秤砣上搞鬼，就形成了系統(tǒng)誤差。.30系統(tǒng)誤差（恒定誤差）由與測量無關的變量引起的一重恒定而有規(guī)律不同誤差的影響系統(tǒng)誤差只影響測值的準確性，與效度有關隨機誤差既影響準確性，又影響一致性。與效度和信度都有關。.31不同誤差的影響系統(tǒng)誤差只影響測值的準確性，與效度有關.31真分數(shù)定義：一個測量工具在測量沒有誤差時所得到的純正值。操作定義：經過無數(shù)次測量所得到的平均值。真分數(shù)是構想出來的一個概念，實際上得不到。.32真分數(shù)定義：一個測量工具在測量沒有誤差時所得到的純正值。.3真分數(shù)的意義一個人在某測驗上的分數(shù)，是其真分數(shù)和誤差之和。X=T+E這里的誤差指隨機誤差，因為系統(tǒng)誤差不影響分數(shù)的改變。.33真分數(shù)的意義一個人在某測驗上的分數(shù)，是其真分數(shù)和誤差之和。.關于誤差的假設如果對一個人接受無數(shù)次測量，其平均誤差為零。真分數(shù)和測量誤差是相互獨立的。誤差分數(shù)和實得分數(shù)的相關為零。當測量團體足夠大時，誤差會相互抵消。.34關于誤差的假設如果對一個人接受無數(shù)次測量，其平均誤差為零。.誤差的來源測驗內部（測量工具本身）引起的誤差實測過程引起的誤差抽樣誤差被試本身引起的誤差.35誤差的來源測驗內部（測量工具本身）引起的誤差.35測量的效度效度的含義效度的特性效度的種類.36測量的效度效度的含義.36效度的含義效度是指測量的正確性，即一個測量能夠測出所要測的東西的程度。能夠回答：一個工具測評什么東西？對于所要測評的東西測得有多準？.37效度的含義效度是指測量的正確性，即一個測量能夠測出所要測的東效度的操作定義在一系列測量中，與測量目的有關的真實變異數(shù)（與測量目的有關的有效變異）與總變異數(shù)（實得變異數(shù)）的比率一組測驗分數(shù)的總變異包括：真實的、與測量目的有關的變異；真實的、出自無關來源的變異；隨機誤差的變異.38效度的操作定義在一系列測量中，與測量目的有關的真實變異數(shù)（與效度的特性相對性：只對一定的樣本有效，不是全或無的關系。目的性：只對一定的目的有效.39效度的特性相對性：只對一定的樣本有效，不是全或無的關系。.3效度的類型內容效度構想效度效標關聯(lián)效度聚合效度辨別效度.40效度的類型內容效度.40效標效度一個測驗對處于特定情境中的個體行為進行預測時的有效性（準確性）。被預測的行為是檢驗測驗效度的標準，就是效標。實證（效標）效度強調的是效標行為，因此，測驗內容是次要的，測驗題目不需要與效標有明顯關系，只要測驗分數(shù)能預測效標行為。.41效標效度一個測驗對處于特定情境中的個體行為進行預測時的有效性效標效度的種類同時效度與預測效度區(qū)分的標準不是時間，而是測驗目的效標與效標測量：參照標準及其測量.42效標效度的種類同時效度與預測效度.42效標的特性多樣性復雜性特殊性時間性.43效標的特性多樣性.43確定實證效度的方法相關法（積差相關）。問題：相關系數(shù)的平方表示什么？區(qū)分度：預測源分數(shù)是否能區(qū)分由效標測量所定義的群體。命中率：根據測驗所做的正確決定的比率。.44確定實證效度的方法相關法（積差相關）。問題：相關系數(shù)的平方表命中率的含義效標成績失敗成功測驗預測成功失誤A命中B失敗命中C失誤D.45命中率的含義效標成績失敗成命中率種類總命中率B+CA+B+C+DB正命中率A+B.46命中率種類總命中率B+C.46測驗效果分析錄取線工作錯誤拒絕

正確錄取成成功績合格線

正確拒絕

錯誤錄取失敗測驗分數(shù).47測驗效果分析錄聚合效度與辨別效度相同的特質用不同的方法實測所得結果的相關程度。不同特質用相同方法實測所得結果的相關程度。MTMM（Multi-trait-multi-methods）.48聚合效度與辨別效度相同的特質用不同的方法實測所得結果的相關程信度的含義測量結果的一致性程度能夠回答：測量工具是否穩(wěn)定；測量結果是否可以推論（概化能力），即從一次測量來推論總體的正確程度。信度只受隨機誤差的影響.49信度的含義測量結果的一致性程度.49操作定義在測量理論中，信度是指一組測驗分數(shù)的真變異數(shù)與總變異數(shù)的比率。在實際應用中，通常以同一樣本所得的兩組資料的相關作為測量一致性的指標.50操作定義在測量理論中，信度是指一組測驗分數(shù)的真變異數(shù)與總變異信度系數(shù)同一被試樣本所得的兩組資料的相關信度系數(shù)表示真分數(shù)與實得分數(shù)之間的決定系數(shù)，可以解釋為在實得分數(shù)的變異數(shù)中有多大比例是又真分數(shù)的變異引起的。.51信度系數(shù)同一被試樣本所得的兩組資料的相關.51信度系數(shù)的意義一般能力和學績測驗0.9個性、價值觀.75-.85<.7時，不能用測驗來對個人做評價，也不能在團體間做比較。>.75時，可用于團體間的比較。>.85時，可用于鑒別個人。.52信度系數(shù)的意義一般能力和學績測驗0.9.52信度的種類再測信度（穩(wěn)定性系數(shù)）復本信度（等值性系數(shù)）分半信度（內部一致性系數(shù)）同質性信度（同質性系數(shù)）評分者信度（肯德爾和諧系數(shù)）.53信度的種類再測信度（穩(wěn)定性系數(shù)）.53問題：什么是構想效度？如何確定構想效度？內容效度容易與什么效度混淆？什么是效標關聯(lián)效度？副本信度與分半信度有什么差異？.54問題：什么是構想效度？如何確定構想效度？.54項目分析難度：通過（答對）某個題目的人數(shù)占總人數(shù)的百分比。區(qū)分度.55項目分析難度：通過（答對）某個題目的人數(shù)占總人數(shù)的百分比。.常模與樣本標準參照與常模參照樣本的重要性常模的含義.56常模與樣本標準參照與常模參照.56常模群體群體的構成必須明確界定常模群體必須是所要測量的群體的一個代表性取樣取樣的過程必須詳盡地描述樣本的大小要適當注意常模的時間性將一般常模與特殊常模結合起來.57常模群體群體的構成必須明確界定.57測驗分數(shù)的解釋原始分數(shù)轉換分數(shù)標準分數(shù)T，Z百分等級數(shù).58測驗分數(shù)的解釋原始分數(shù).58人員測評理論與技術在職研究生班專用2010孫健敏博士中國人民大學教授.59人員測評理論與技術在職研究生班專用.1教學目的與要求:通過本課程的學習，你應該了解測評的基本理論與原理；理解和領會測評的基本概念；熟悉和掌握測評的基本技術；弄清楚測評的必要性、重要性和局限性；能夠把基本理論和技術應用于實際環(huán)境中；能夠判斷測評手段的信度和效度并知道如何證明其有效性；學會用人員測評的觀點看待問題、分析問題和解決問題。.60教學目的與要求:通過本課程的學習，你應該.2目的與要求本課程將以講授為主，輔助以案例分析、模擬演練、個人作業(yè)。通過互動式的教學，旨在引導學生掌握基本的概念、理論和方法，學會分析問題和解決問題的角度和思路，特別是實際操作能力。.61目的與要求本課程將以講授為主，.3指定教材必讀教材：孫健敏主編《人員測評理論與技術》，湖南師范大學出版社，2008年.62指定教材必讀教材：孫健敏主編《人員測評理論與技術》，湖南師范引導案例請思考并回答下面的問題：你看了上海世博會開幕式嗎？有什么感受？如何評價？你選擇讀勞人院的在職研究生是否后悔？理由是什么？2一個合格的大學教師應具備什么條件（請列出5條最重要的）？.63引導案例請思考并回答下面的問題：.5討論題1這三個問題的回答難度一樣嗎？為什么？2如何衡量一個概念？3測評要解決什么問題？.64討論題1這三個問題的回答難度一樣嗎？為什么？.6第一章測評的一般原理一為什么要測評？二測評什么？三測評的含義與特性四測評的一般原則五測評的主要類型六測評的尺度與量表.65第一章測評的一般原理一為什么要測評？.7為什么要測評工作特性個人特點（個性差異）人與工作的匹配是否需要測評（效用）？.66為什么要測評工作特性.8測評什么素質行為心理.67測評什么素質.9素質分析心理素質身體素質文化素質個性素質（品德素質）.68素質分析心理素質.10行為分析行為的特點行為分析的維度.69行為分析行為的特點.11行為的特點人的行為是動態(tài)的人的行為是可控制的、可改變的人的行為是多樣的人的行為是有原因（動機）的人的行為受環(huán)境的制約B=F（P，E）.70行為的特點人的行為是動態(tài)的.12行為的分析維度發(fā)生的頻率反應的強度持續(xù)的時間發(fā)生的數(shù)目意義或影響可改變程度.71行為的分析維度發(fā)生的頻率.13測評的含義與特性測評是測量與評價的簡稱測量是用數(shù)字或符號對人的特點進行描述，而不論其價值的大小評價是依據定量描述或直覺經驗來確定某種特點的價值。測量和評價都要依賴某種法則.72測評的含義與特性測評是測量與評價的簡稱.14測量測量的三個要素：法則（參照點與單位）；數(shù)字或符號；事物物質測量——直接測量人員測量——間接測量（對抽象概念的測量）測量與測驗.73測量測量的三個要素：法則（參照點與單位）；數(shù)字或符號；事物.評價（評定）評價是一種價值判斷評價的三個要素：定量描述；加權；價值判斷.74評價（評定）評價是一種價值判斷.16測評的原理刺激-反應，投射，典型反應——難度反應心理反應——行為反應情境反應——慣常反應內在反應——外在反應.75測評的原理刺激-反應，.17測評原理的實用性是否能夠測評？是否有預測價值？Predictor的含義效用如何？（產出/投入）.76測評原理的實用性是否能夠測評？.18測評的主要類型選拔型測評（差異性）配置型測評（合適性）診斷型測評（準確性）預測型測評（有效性）開發(fā)型測評（實用性）考核型測評（公正性）.77測評的主要類型選拔型測評（差異性）.19第二章測評的基本概念測量尺度誤差信度與效度項目分析常模與樣本效用測量理論簡介.78第二章測評的基本概念測量尺度.20測評的尺度與量表名義尺度（Nominalscale）順序尺度(Ordinalscale)間距尺度（Intervalscale）比率尺度(Ratioscale).79測評的尺度與量表名義尺度（Nominalscale）.2名義（類別）尺度歸類時用要求：一個集合中所有成員都應分派到相同的數(shù)字，且沒有兩個集合被分派到相同的數(shù)字；標準必須明確。適用的統(tǒng)計方法：分布次數(shù)檢驗；百分比；列聯(lián)相關；X檢驗.80名義（類別）尺度歸類時用.22順序（等級）尺度對一個集合中的成員排列順序沒有相等的單位，沒有絕對零點不提供等級間的距離或差距統(tǒng)計分析：中位數(shù)；百分位數(shù)；等級相關系數(shù).81順序（等級）尺度對一個集合中的成員排列順序.23間距（區(qū)間）尺度有相等的單位，但無絕對零點只能做加減運算，不能做乘除運算統(tǒng)計分析：平均數(shù)、標準差、積差相關、F檢驗；T檢驗；方差分析；方差分析等.82間距（區(qū)間）尺度有相等的單位，但無絕對零點.24比率（等比）尺度有絕對零點，是最高級別的測量尺度具有所有其他尺度的特征統(tǒng)計分析：全部適用.83比率（等比）尺度有絕對零點，是最高級別的測量尺度.25什么是誤差誤差是在測量中與目的無關的變量（原因）所產生的不準確或不一致效應。任何測量都不是絕對準確的，不準確的數(shù)據就是誤差。.84什么是誤差誤差是在測量中與目的無關的變量（原因）所產生的不準誤差的兩層含義由與測量目的無關的變因引起是不準確或不一致的測量結果.85誤差的兩層含義由與測量目的無關的變因引起.27準確性與一致性的關系不準，不一致不準，一致準，一致.86準確性與一致性的關系.28隨機誤差（可變誤差）又與測量目的無關的偶然因素引起，又不易控制，使多次測量產生了不一致的結果。例如：稱重量的時候，不同人對秤桿高度的掌握不同。.87隨機誤差（可變誤差）又與測量目的無關的偶然因素引起，又不易控系統(tǒng)誤差（恒定誤差）由與測量無關的變量引起的一重恒定而有規(guī)律的誤差，穩(wěn)定地存在于每一次測量中，測值一致，但不準。在秤砣上搞鬼，就形成了系統(tǒng)誤差。.88系統(tǒng)誤差（恒定誤差）由與測量無關的變量引起的一重恒定而有規(guī)律不同誤差的影響系統(tǒng)誤差只影響測值的準確性，與效度有關隨機誤差既影響準確性，又影響一致性。與效度和信度都有關。.89不同誤差的影響系統(tǒng)誤差只影響測值的準確性，與效度有關.31真分數(shù)定義：一個測量工具在測量沒有誤差時所得到的純正值。操作定義：經過無數(shù)次測量所得到的平均值。真分數(shù)是構想出來的一個概念，實際上得不到。.90真分數(shù)定義：一個測量工具在測量沒有誤差時所得到的純正值。.3真分數(shù)的意義一個人在某測驗上的分數(shù)，是其真分數(shù)和誤差之和。X=T+E這里的誤差指隨機誤差，因為系統(tǒng)誤差不影響分數(shù)的改變。.91真分數(shù)的意義一個人在某測驗上的分數(shù)，是其真分數(shù)和誤差之和。.關于誤差的假設如果對一個人接受無數(shù)次測量，其平均誤差為零。真分數(shù)和測量誤差是相互獨立的。誤差分數(shù)和實得分數(shù)的相關為零。當測量團體足夠大時，誤差會相互抵消。.92關于誤差的假設如果對一個人接受無數(shù)次測量，其平均誤差為零。.誤差的來源測驗內部（測量工具本身）引起的誤差實測過程引起的誤差抽樣誤差被試本身引起的誤差.93誤差的來源測驗內部（測量工具本身）引起的誤差.35測量的效度效度的含義效度的特性效度的種類.94測量的效度效度的含義.36效度的含義效度是指測量的正確性，即一個測量能夠測出所要測的東西的程度。能夠回答：一個工具測評什么東西？對于所要測評的東西測得有多準？.95效度的含義效度是指測量的正確性，即一個測量能夠測出所要測的東效度的操作定義在一系列測量中，與測量目的有關的真實變異數(shù)（與測量目的有關的有效變異）與總變異數(shù)（實得變異數(shù)）的比率一組測驗分數(shù)的總變異包括：真實的、與測量目的有關的變異；真實的、出自無關來源的變異；隨機誤差的變異.96效度的操作定義在一系列測量中，與測量目的有關的真實變異數(shù)（與效度的特性相對性：只對一定的樣本有效，不是全或無的關系。目的性：只對一定的目的有效.97效度的特性相對性：只對一定的樣本有效，不是全或無的關系。.3效度的類型內容效度構想效度效標關聯(lián)效度聚合效度辨別效度.98效度的類型內容效度.40效標效度一個測驗對處于特定情境中的個體行為進行預測時的有效性（準確性）。被預測的行為是檢驗測驗效度的標準，就是效標。實證（效標）效度強調的是效標行為，因此，測驗內容是次要的，測驗題目不需要與效標有明顯關系，只要測驗分數(shù)能預測效標行為。.99效標效度一個測驗對處于特定情境中的個體行為進行預測時的有效性效標效度的種類同時效度與預測效度區(qū)分的標準不是時間，而是測驗目的效標與效標測量：參照標準及其測量.100效標效度的種類同時效度與預測效度.42效標的特性多樣性復雜性特殊性時間性.101效標的特性多樣性.43確定實證效度的方法相關法（積差相關）。問題：相關系數(shù)的平方表示什么？區(qū)分度：預測源分數(shù)是否能區(qū)分由效標測量所定義的群體。命中率：根據測驗所做的正確決定的比率。.102確定實證效度的方法相關法（積差相關）。問題：相關系數(shù)的平方表命中率的含義效標成績失敗成功測驗預測成功失誤A命中B失敗命中C失誤D.103命中率的含義效標成績失敗成命中率種類總命中率B+CA+B+C+DB正命中率A+B.104命中率種類總命中率B+C.46測驗效果分析錄取線工作錯誤拒絕

正確錄取成成功績合格線

正確拒絕

錯誤錄取失敗