心理測(cè)量學(xué)課件6第四章項(xiàng)目分析.ppt

《心理測(cè)量學(xué)課件6第四章項(xiàng)目分析.ppt》由會(huì)員分享，可在線閱讀，更多相關(guān)《心理測(cè)量學(xué)課件6第四章項(xiàng)目分析.ppt（49頁(yè)珍藏版）》請(qǐng)?jiān)谘b配圖網(wǎng)上搜索。

1、第四章項(xiàng)目分析測(cè)驗(yàn)分?jǐn)?shù)的解釋與應(yīng)用,,第八章測(cè)驗(yàn)的項(xiàng)目分析項(xiàng)目分析包括定性分析和定量分析。定性分析包括考慮內(nèi)容效度、題目編寫的恰當(dāng)性和有效性等；定量分析主要是指題目難度和區(qū)分度的測(cè)量。對(duì)項(xiàng)目進(jìn)行篩選和修訂，可以提高測(cè)驗(yàn)的信度和效度。無論是何種類型的測(cè)驗(yàn)，都需要進(jìn)行分析。在對(duì)結(jié)果進(jìn)行分析時(shí)需要解答如下問題：設(shè)定的測(cè)試時(shí)間長(zhǎng)度是否適當(dāng)？受測(cè)者是否理解指導(dǎo)語？施測(cè)條件是否適當(dāng)？緊急意外事件的處理是否恰當(dāng)？……….,,下面所列的問卷，是受測(cè)者完成成就測(cè)驗(yàn)后填寫的，其目的是提供關(guān)于測(cè)驗(yàn)公平性的信息：測(cè)驗(yàn)評(píng)價(jià)表指導(dǎo)語：請(qǐng)?jiān)谕瓿蓽y(cè)驗(yàn)后填寫這份表格，請(qǐng)您對(duì)每個(gè)項(xiàng)目的反應(yīng)上畫圓圈，并將您認(rèn)為恰當(dāng)?shù)睦碛商顚懺诳崭?/p>

2、處。1、YN測(cè)試環(huán)境（座位、溫度、通風(fēng)、噪音水平等）您是否滿意？2、YN在測(cè)試之前您是否已仔細(xì)閱讀了指導(dǎo)語？3、YN測(cè)驗(yàn)指導(dǎo)語是否清晰？,,4、YN測(cè)驗(yàn)的格式（項(xiàng)目類型、項(xiàng)目編排、答題卡等）您是否滿意？5、YN測(cè)驗(yàn)是否充分涵蓋了考試指定材料？6、YN測(cè)驗(yàn)問題的難度是否適宜？7、YN您對(duì)參加該測(cè)試是否做了充分的準(zhǔn)備？8、YN您是否學(xué)習(xí)了合適的材料？9、YN您認(rèn)為是否答錯(cuò)了某些測(cè)驗(yàn)問題？具體是哪些？10、YN您是否對(duì)測(cè)驗(yàn)回答進(jìn)行了猜測(cè)？猜測(cè)的問題有多少？具體是哪些問題？11、YN您是否有沒作答的問題？具體是哪些問題？,,12、YN您是否有足夠的時(shí)間答完測(cè)驗(yàn)？13、YN您在完成測(cè)驗(yàn)后是否檢查了作答的

3、答案？14、YN在測(cè)驗(yàn)的過程中您是否有焦慮或情緒上的厭煩？15、YN測(cè)驗(yàn)是否公正？16、YN總的來說，這是否是一份好的測(cè)驗(yàn)？17、YN您是否觀察到測(cè)試中有欺詐行為？18、YN您期望在此測(cè)驗(yàn)上獲得哪個(gè)等級(jí)的成績(jī)？,,分析受測(cè)者在某個(gè)項(xiàng)目上的反應(yīng)，功能是：1、進(jìn)行項(xiàng)目分析的主要目的是提供測(cè)驗(yàn)質(zhì)量或刪除無效的項(xiàng)目。2、對(duì)于成就測(cè)驗(yàn)而言，是提供受測(cè)者掌握知識(shí)與否的診斷信息，看受測(cè)者是否對(duì)測(cè)驗(yàn)有充分的準(zhǔn)備，是否能滿足他們的期望等等。,,第一節(jié)測(cè)驗(yàn)的難度一、難度（difficulty）的意義難度，指項(xiàng)目的難易程度。在能力測(cè)驗(yàn)中，稱為“難度”，而在非能力測(cè)驗(yàn)中（如人格），則指“通俗性”。兩者都是指在總體中，

4、能夠正確或確切回答某項(xiàng)目的人數(shù)。,,二、難度的計(jì)算（一）二分法記分項(xiàng)目的難度1．通過率P=R/N100%P代表項(xiàng)目的通過率，N為全體受測(cè)人數(shù)，R為通過或答對(duì)該項(xiàng)目的人數(shù)。以通過率來表示項(xiàng)目的難度，P越大，項(xiàng)目越容易，難度越低。,,2．極端分組法（上下27%）P=（PH+PL）/2P代表難度，PH和PL分布代表高分組和低分組通過率，此公式還可轉(zhuǎn)換為P=(RH+RL)/2N100%RH和RL分別代表高分組和低分組通過該題的人數(shù)，N代表每個(gè)組的人數(shù)。,,例如：在100名被試中，選為高分組和低分組的被試各有27人，其中高分組有20人答對(duì)第一題，低分組有10人答對(duì)第一題，則第一題的難度為：(1)PH=2

5、0/27100%=74.1%PL=10/27100%=37%P=(74.1%+37%)/2=55.6%(2)P=(20+10)/227=55.6%,,練習(xí)：一個(gè)測(cè)驗(yàn)項(xiàng)目向75名受測(cè)者施測(cè)，高水平組（測(cè)驗(yàn)總分中最高27％）中有18名答對(duì)此項(xiàng)目，低水平（27％）中有12名受測(cè)者答對(duì)此題目，那么此項(xiàng)目的難度是多少？,,3、選擇題的難度校正公式：,CP為校正后的通過率，P為實(shí)際得到的通過率，K為備選項(xiàng)目的數(shù)目。,例如：假定某題有75％的被試通過，如果該題有5個(gè)備選項(xiàng)目，則校正后通過率實(shí)為：,（二）非二分法記分項(xiàng)目的難度，測(cè)試題為問答題或其他不能用二分法記分的形式時(shí)，常常對(duì)部分正確的反應(yīng)也給一定分?jǐn)?shù)，在

6、這樣情況下，可以先人為的確定通過每一題的分?jǐn)?shù)線，再按公式計(jì)算難度：x100％為所有被試在該項(xiàng)目上的平均得分，Xmax為該項(xiàng)目的滿分。,,例如：一個(gè)數(shù)學(xué)題的滿分為20分，全體考生在試題上所得的平均分?jǐn)?shù)為15分，其難度為：P=15/20＝0.75,三、測(cè)驗(yàn)難度水平的確定效標(biāo)參照測(cè)驗(yàn)、掌握測(cè)驗(yàn)：不考慮難度；選拔測(cè)驗(yàn)：難度=錄取率；對(duì)于選擇題來說，難度一般應(yīng)大于猜測(cè)概率；無論是速度測(cè)驗(yàn)，還是難度測(cè)驗(yàn)，一般都應(yīng)防止被試得滿分，因?yàn)闈M分的意義是不明確的。大體而言，難度為0.50時(shí)最理想，此時(shí)項(xiàng)目具有最大的鑒別力。但在實(shí)際操作中，讓所有項(xiàng)目難度都到達(dá)0.50困難很大，而且也不必要，一般只需使項(xiàng)目的平均難度接

7、近0.50，而各個(gè)項(xiàng)目的難度在0.500.20之間變化。,四、難度的等距變換根據(jù)正態(tài)分布表，將難度P作為正態(tài)曲線下的面積，轉(zhuǎn)換成相應(yīng)的Z分?jǐn)?shù)，這就是等距量表。PY0Z,美國(guó)教育服務(wù)中心以Δ作為難度指標(biāo)：Δ=13+4ZP=.0013Z=+3Δ=25P=.16Z=+1Δ=17P=.50Z=0Δ=13P=.84Z=-1Δ=9P=.9987Z=-3Δ=1,五、難度對(duì)測(cè)驗(yàn)的影響（一）測(cè)驗(yàn)難度影響測(cè)驗(yàn)分?jǐn)?shù)的分布形態(tài)難度大，正偏態(tài)難度低，負(fù)偏態(tài),（二）測(cè)驗(yàn)難度影響測(cè)驗(yàn)分?jǐn)?shù)的離散程度測(cè)驗(yàn)過難或過易，分?jǐn)?shù)全距縮小，信度降低。P=0.50時(shí)最佳,第二節(jié)測(cè)驗(yàn)的區(qū)分度一、區(qū)分度的意義區(qū)分度（discriminatio

8、n）是指測(cè)驗(yàn)項(xiàng)目對(duì)被試心理品質(zhì)水平差異的區(qū)分能力或鑒別能力。項(xiàng)目的區(qū)分度是測(cè)驗(yàn)是否有效的“指示器”。鑒別力分析的設(shè)想基礎(chǔ)：如果單個(gè)項(xiàng)目與測(cè)驗(yàn)測(cè)的是同11、一特性，那么我們可以預(yù)期在測(cè)驗(yàn)上得高分的人正確回答這一問題的概率大，而在測(cè)驗(yàn)上得低分的人正確回答這一問題的概率低。鑒別力分析就是在這一設(shè)想的基礎(chǔ)上進(jìn)行的。項(xiàng)目的鑒別力就是其對(duì)于所測(cè)量的心理特性的區(qū)分能力。鑒別力分析的一般方法：鑒別力指數(shù)、項(xiàng)目-總分相關(guān)、項(xiàng)目間相關(guān)。,,二、區(qū)分度的計(jì)算（一）項(xiàng)目鑒別指數(shù)法1．鑒別指數(shù)（indexofdiscrimination，D）的計(jì)算D=PH-PL取值范圍：-1~+1D為鑒別指數(shù)，PH為高分組在某個(gè)項(xiàng)目上

9、的通過率，PL為低分組在該項(xiàng)目上的通過率。,,例如：某小學(xué)數(shù)學(xué)測(cè)驗(yàn)，受測(cè)者共18人，高分組和低分組若各取總?cè)藬?shù)的27％，則兩組各為5人，第8題高分組5人全部答對(duì)，低分組1人答對(duì)，則第8題的鑒別指數(shù)為：D＝5/5-1/5=0.8D值是鑒別項(xiàng)目測(cè)量效標(biāo)有效性的指標(biāo)，D越高，項(xiàng)目的區(qū)分度就越高，項(xiàng)目就越有效。如果測(cè)驗(yàn)只是用來考查學(xué)生對(duì)一些基本知識(shí)和技能是否掌握，則不用考慮區(qū)分度。,,一個(gè)測(cè)驗(yàn)項(xiàng)目向75名受測(cè)者施測(cè)，高水平組（測(cè)驗(yàn)總分中最高27％）中有18名答對(duì)此項(xiàng)目，低水平（27％）中有12名受測(cè)者答對(duì)此題目，那么此項(xiàng)目的區(qū)分度是多少？,2．極端組的劃分27%規(guī)則一般情況下，取上下25%~33%均可

10、。樣本少時(shí)，可以取50%注意：由于計(jì)算機(jī)的方便使用，可以上下50%作為劃分高低組的標(biāo)準(zhǔn)，或者多分幾組，對(duì)區(qū)分度和難度作詳細(xì)分析。因?yàn)橹蝗∩舷聝啥?，只利用了一部分資料，浪費(fèi)了很多信息，有可能得出錯(cuò)誤結(jié)論。,,（二）相關(guān)法（項(xiàng)目-總分相關(guān)）1．點(diǎn)二列相關(guān),,是受測(cè)者總量,是答對(duì)該項(xiàng)目的受測(cè)者量,是通過該項(xiàng)目的受測(cè)者效標(biāo)分?jǐn)?shù)的平均數(shù),是所有效標(biāo)分?jǐn)?shù)的平均數(shù),是所有效標(biāo)分?jǐn)?shù)的標(biāo)準(zhǔn)差,,例如：假定有30人，他們測(cè)驗(yàn)總分的平均數(shù)和標(biāo)準(zhǔn)差分別是75和10，如果有17名受測(cè)者答對(duì)某個(gè)項(xiàng)目，他們測(cè)驗(yàn)總分的平均分?jǐn)?shù)是80，那么項(xiàng)目的效度是多少？,,,,一個(gè)測(cè)驗(yàn)的項(xiàng)目答對(duì)的記1分，答錯(cuò)的記0分，這時(shí)項(xiàng)目的分?jǐn)?shù)就是一

11、個(gè)二分變量，而測(cè)驗(yàn)的總分則為連續(xù)變量，如果要計(jì)算該項(xiàng)目的區(qū)分度，就可用點(diǎn)二列相關(guān)公式：,,,通過該項(xiàng)目的受測(cè)者總分的平均值,未通過該項(xiàng)目的受測(cè)者的總分平均值,所有值的標(biāo)準(zhǔn)差,,方差的計(jì)算：,,例題：下表是某學(xué)校的15名學(xué)生的總分和某項(xiàng)目的解答情況，計(jì)算該項(xiàng)目與總分的相關(guān)系數(shù)。,（三）項(xiàng)目特征曲線（itemcharacteristiccurve,ICC）項(xiàng)目特征曲線描述了效標(biāo)分?jǐn)?shù)不同的被試在該項(xiàng)目上的通過率。曲線坡度越陡，鑒別力越好，預(yù)測(cè)的誤差越小。,,,,率概的目項(xiàng)答回確正,1.00,0.00,0.50,低中高能力,鑒別力較好,低中高能力,鑒別力為負(fù),鑒別力較低,,難度不同的3個(gè)項(xiàng)目的ICC,

12、,項(xiàng)目特征曲線：運(yùn)用圖象直觀地顯示了隨著測(cè)驗(yàn)者某種心理特征水平的變化，正確回答某個(gè)項(xiàng)目的概率是如何變化的。項(xiàng)目特征曲線是現(xiàn)代心理測(cè)量學(xué)最有影響的理論之一-項(xiàng)目反應(yīng)理論或稱潛特征理論的基礎(chǔ)。ICC歸納了項(xiàng)目分析的信息，顯示了心理能力水平與項(xiàng)目反應(yīng)之間的關(guān)系。當(dāng)項(xiàng)目-總體相關(guān)為正時(shí)，ICC的斜率也是正的；當(dāng)相關(guān)接近0時(shí)，ICC斜率也接近于0；當(dāng)相關(guān)為負(fù)時(shí)，ICC斜率為負(fù)。,多項(xiàng)選擇中每個(gè)選項(xiàng)的ICC,三、區(qū)分度與難度的關(guān)系,難度和區(qū)分度都是針對(duì)一定團(tuán)體而言的。一般來說，較難的項(xiàng)目對(duì)高水平被試區(qū)分度高，較易的項(xiàng)目對(duì)低水平被試的區(qū)分度高。,四、區(qū)分度的相對(duì)性（一）不同的計(jì)算方法，所得區(qū)分值不同區(qū)分度有

13、幾種計(jì)算方法？（二）樣本容量大小影響相關(guān)法區(qū)分度值的大小樣本越大，區(qū)分度越……（三）分組標(biāo)準(zhǔn)影響鑒別指數(shù)分組越極端，區(qū)分度越……（四）被試樣本的同質(zhì)性程度影響區(qū)分度值的大小樣本越同質(zhì)，區(qū)分度越……,第三節(jié)項(xiàng)目分析的特殊問題一、多重選擇題的項(xiàng)目分析（誘答分析）對(duì)于多重選擇題，除了分析難度和區(qū)分度外，還要對(duì)每個(gè)選項(xiàng)進(jìn)行分析。下列哪一個(gè)最有可能是偏執(zhí)型精神分裂癥患者的次級(jí)癥狀：A幻聽B癱瘓C記憶喪失D厭食,如果所有被試都選擇某一正確的選項(xiàng)，說明該選項(xiàng)……如果沒有一個(gè)被試選擇某個(gè)錯(cuò)誤選項(xiàng)，說明該選項(xiàng)……如果所有被試都選擇某個(gè)錯(cuò)誤選項(xiàng)，說明該選項(xiàng)……如果高分組被試的選擇集中在兩個(gè)選項(xiàng)上，說明該選項(xiàng)……如

14、果高分組和低分組對(duì)正確選項(xiàng)的選擇沒有區(qū)別，說明該選項(xiàng)……如果所有被試都未回答某個(gè)題目，說明該題……如果選擇各個(gè)選項(xiàng)的人數(shù)幾乎相等，說明該題……,二、速度測(cè)驗(yàn)的項(xiàng)目分析對(duì)前面部分的測(cè)驗(yàn)項(xiàng)目，難度和區(qū)分度都……對(duì)后面部分的測(cè)驗(yàn)項(xiàng)目，難度和區(qū)分度都……三、標(biāo)準(zhǔn)參照測(cè)驗(yàn)的項(xiàng)目分析在標(biāo)準(zhǔn)參照測(cè)驗(yàn)中，無須考慮項(xiàng)目的難度和區(qū)分度，只要項(xiàng)目的內(nèi)容很重要就行。也可以通過比較教學(xué)或訓(xùn)練的前測(cè)和后測(cè)結(jié)果來進(jìn)行項(xiàng)目分析，用來說明教學(xué)或訓(xùn)練的效果以及項(xiàng)目編制是否適當(dāng)。,四、項(xiàng)目-團(tuán)體的相互作用具有不同性質(zhì)（性別、種族、職業(yè)等）的團(tuán)體，在測(cè)驗(yàn)得分上也存在差異，即同樣的項(xiàng)目可能有不同的難度。如果測(cè)驗(yàn)要求對(duì)所有個(gè)體都相對(duì)“公

15、平”，那么，就應(yīng)該排除那些有利于或不利于不同性質(zhì)的亞團(tuán)體的項(xiàng)目；如果測(cè)驗(yàn)的目的就是為了考察不同亞團(tuán)體的差異，那么，就應(yīng)選擇使團(tuán)體差異盡可能大的題目。,五、有效性與可靠性的矛盾同質(zhì)性信度要求項(xiàng)目之間有高相關(guān)，各項(xiàng)目的難度均等；對(duì)于預(yù)測(cè)效度來說，因?yàn)樾?biāo)的變異范圍較大，如果項(xiàng)目越同質(zhì)，那么效標(biāo)關(guān)聯(lián)效度則低；因此，效標(biāo)關(guān)聯(lián)效度要求各項(xiàng)目之間要有一定的差異，即項(xiàng)目之間相關(guān)低，這樣才能保證測(cè)驗(yàn)得分與效標(biāo)之間有高相關(guān)，即高的效標(biāo)關(guān)聯(lián)效度。因此，對(duì)于多數(shù)心理測(cè)驗(yàn)來說，項(xiàng)目之間中等程度的相關(guān)，可使二者調(diào)和，獲得較為滿意的（同質(zhì)性）信度和（效標(biāo)關(guān)聯(lián)）效度。,,練習(xí)：選取一名同學(xué)作為你的觀察對(duì)象，要求最好是觀察你

16、不了解的同學(xué)，或者你對(duì)他既無好感也沒有不好的印象。在三次或四次以上的班會(huì)或其他活動(dòng)中觀察他，在不引起別人注意的情況下記錄他的言行。你的觀察應(yīng)盡量客觀，觀察時(shí)要對(duì)固定的和典型的行為進(jìn)行觀察，同時(shí)還要記錄那些不常出現(xiàn)的行為。,,體貌特征：衣著打扮、身體描述（魅力、不尋常的特征等）行為：態(tài)度和情緒（合作、開朗或保守、友好或有敵意、防御等）運(yùn)動(dòng)行為：積極的和消極的、身體姿勢(shì)、步態(tài)、舉止）,,在觀察結(jié)束階段，寫一份2－3頁(yè)的觀察報(bào)告，在這份報(bào)告中，不要對(duì)觀察對(duì)象有任何評(píng)價(jià)（如其他同學(xué)是如何談?wù)撍?，他在大學(xué)做得如何好等之類的），你將如何描繪他的個(gè)性和特征呢？最后，檢查你的觀察報(bào)告，找出與那些了解被觀察者也對(duì)被觀察者進(jìn)行觀察的人同的信息。在體驗(yàn)過用時(shí)間取樣技術(shù)進(jìn)行近距離觀察之后，你對(duì)客觀觀察作為評(píng)估人格的方法有何看法？它是否可信？是否有效？是否有用？,Clicktoeditcompanyslogan.,,ThankYou!,