07年自考“人事測量”串講資料（5）

　　三、測試題的預(yù)測試和分析

　　◎預(yù)備測試題：測試題編排完成并不意味著這項(xiàng)測量工具的編制就此完成。前面對題目的選取只是依靠編寫者的主觀經(jīng)驗(yàn)，題目的效果如何還需要進(jìn)行定量的客觀分析。這時(shí)的測試題還只能叫做預(yù)備測試題，還需要獲取被試對這些題目的反應(yīng)的材料，為進(jìn)一步篩選題目和為編排測量工具提供客觀依據(jù)。

　　◎預(yù)測試：必須將預(yù)備測試題對一定規(guī)模的小樣本被試進(jìn)行施測，獲得數(shù)據(jù)以進(jìn)行校驗(yàn)、修訂。這一過程稱為測試題的預(yù)測試。

　　◎題目分析：測驗(yàn)數(shù)據(jù)收集上來之后，應(yīng)該利用這些數(shù)據(jù)對題目進(jìn)行分析，刪除不好的題目或?qū)︻}目進(jìn)行修改，這個(gè)過程稱為題目分析。具體內(nèi)容包括對題目的項(xiàng)目分析和對測驗(yàn)信度、效度指標(biāo)的檢查。

　　對測試題的預(yù)測試應(yīng)注意以下問題：⑴預(yù)測試對象必須和將來正式測試的對象相似；⑵預(yù)測試的實(shí)施過程與情境應(yīng)力求與將來正式測量工具實(shí)施時(shí)的情境相似；⑶預(yù)測試的時(shí)限可稍寬些，最好使每個(gè)被試都能將題目答完，以便搜集充分的反應(yīng)資料，使統(tǒng)計(jì)分析的結(jié)果更為可靠；⑷在預(yù)測試過程中，應(yīng)將被試的各種反映情況隨時(shí)加以記錄。如，記錄在不同時(shí)限內(nèi)一般被試所完成的題目數(shù)、題意不清之處、被試的態(tài)度等，以便在在修改測驗(yàn)時(shí)作為參考。

　　預(yù)測試完成后，可以根據(jù)預(yù)測結(jié)果進(jìn)行題目分析，對每個(gè)題目的具體分析稱為項(xiàng)目分析，主要是指根據(jù)題目的難度、區(qū)分度、備選答案的合適度等數(shù)量指標(biāo)來對題目進(jìn)行分析。

　　2.☆被試特點(diǎn)對測量結(jié)果的影響：

　?、艤y驗(yàn)的技巧與練習(xí)因素?！蚓毩?xí)效應(yīng)：有不少研究發(fā)現(xiàn)，應(yīng)試者參加相同或重復(fù)的測驗(yàn)，會(huì)由于練習(xí)效應(yīng)而使測驗(yàn)成績提高。

　?、平箲]和動(dòng)機(jī)因素。①應(yīng)試動(dòng)機(jī)；②測驗(yàn)焦慮。◎焦慮是一種不愉快的、表現(xiàn)為焦急、恐懼和緊張的情緒體驗(yàn)，它主要是由于對可能出現(xiàn)的結(jié)果的擔(dān)心或?qū)?yīng)付這一結(jié)果的能力的擔(dān)心而造成。大多數(shù)人都在測驗(yàn)前和測驗(yàn)中感到焦慮，故又稱測驗(yàn)焦慮或考試焦慮。

　?、欠磻?yīng)定勢?！蚍磻?yīng)定勢也成為反應(yīng)的方式或反應(yīng)風(fēng)格，簡單地說，就是每個(gè)人回答問題的習(xí)慣方式。

　　☆影響測量結(jié)果的反應(yīng)定勢主要有以下幾種：①求“快”與求“精確”的反應(yīng)定勢。②偏好正面敘述的反應(yīng)定勢，又成為肯定反應(yīng)定勢，克倫巴赫發(fā)現(xiàn)。③偏好特殊位置的反應(yīng)定勢。吉爾福特認(rèn)為，被試如果完全不知道選擇題的正確答案，則不會(huì)以完全隨機(jī)的方式來決定該選擇哪一個(gè)選項(xiàng)，而有偏好某一個(gè)位置的選項(xiàng)的傾向，而有些測驗(yàn)編制者也存在偏好某個(gè)位置的反應(yīng)定勢，這些現(xiàn)象稱為位置定勢。④偏好較長選項(xiàng)的反應(yīng)定勢。⑤猜測的反應(yīng)定勢。

　　四、猜測的校正

　　1.★猜測修正的公式：S=R-W/（n-1），其中，S是正確分?jǐn)?shù)；R為被試答對的題目數(shù)；W為被試答錯(cuò)的題目數(shù)；n為選項(xiàng)數(shù)目。

　　2.☆猜測修正的優(yōu)缺點(diǎn)。優(yōu)點(diǎn)：⑴修正公式可避免減低測驗(yàn)的信度。⑵修正公式可以反映被試真正的能力和水平。⑶使用修正公式對那些不能答完全部試題的被試來說比較公平。

　　缺點(diǎn)：⑴公式假設(shè)不成立，因?yàn)楸辉嚧疱e(cuò)試題，并非完全瞎猜。⑵猜測修正無實(shí)質(zhì)作用。⑶未采用猜測修正對信度并無重大影響。⑷完全不許猜測與實(shí)際生活不符。

　　第二節(jié)實(shí)施測量計(jì)分的要領(lǐng)與誤差控制

　　檢驗(yàn)客觀與否，可以以兩個(gè)或兩個(gè)以上受過訓(xùn)練的合格評分者所評結(jié)果之間的一致性作為指標(biāo)。一般情況下，受過訓(xùn)練的評分者之間的平均一致性達(dá)到90%以上，我們就認(rèn)為計(jì)分是客觀的。

　　一、計(jì)分的一般程序

　　1.◆☆計(jì)分的基本步驟：⑴記錄反應(yīng)。及時(shí)和清楚地記錄被試的反應(yīng)。⑵檢索標(biāo)準(zhǔn)答案。標(biāo)準(zhǔn)答案有時(shí)又稱計(jì)分鍵。⑶反應(yīng)和標(biāo)準(zhǔn)答案的比較。

　　2.◇問答題的主要缺點(diǎn)是評分不夠客觀，也就是說問答題的計(jì)分經(jīng)常受到評分者的情感、態(tài)度的影響。問答題中常見的誤差有：寬容定勢和暈輪效應(yīng)。

　　3.◎?qū)捜荻▌荩褐钢髟嚨挠?jì)分過于寬松，即使沒有回答出題目所要求的答案，評分者也給予較高的分?jǐn)?shù)。

　　4.◎暈輪效應(yīng)：指給予被試某道題較高分?jǐn)?shù)僅僅是由于被試在另外一些試題上獲得了高分，也就是說對被試的一般印象影響到具體某個(gè)問題的評價(jià)。

　　5.◎整體計(jì)分：就是評分者根據(jù)總體印象給答案評一個(gè)總分。整體計(jì)分在實(shí)際中應(yīng)用較為普遍。

　　6.◎分析計(jì)分：是給問答題的不同部分分派不同的權(quán)數(shù)，按照各部分的要求對答案中所包括的信息和技能評分，最后將各部分的權(quán)數(shù)和得分組合起來得到該問答題的分?jǐn)?shù)。

　　比較整體計(jì)分和分析計(jì)分？（回答上面的名詞，再加以說明）

　　7.◇客觀題的一個(gè)主要優(yōu)點(diǎn)就是計(jì)分簡單、客觀。

　　8.不同的反應(yīng)依據(jù)主試認(rèn)為的重要性不同也可以給予不同的權(quán)數(shù)，我們還可以根據(jù)被試回答問題時(shí)的確定程度給予不同的權(quán)數(shù)，這叫做“信心權(quán)數(shù)”◎。

　　第六章 人事測量結(jié)果的解釋

　　人事測量的解釋不同于測量實(shí)施本身，它們是測量中兩個(gè)不同的、相對獨(dú)立的成分。測量的解釋是一個(gè)相當(dāng)復(fù)雜的系統(tǒng)程序。