中學(xué)多重成就測(cè)驗(yàn)的設(shè)計(jì)與實(shí)施

中學(xué)多重成就測(cè)驗(yàn)的設(shè)計(jì)與實(shí)施

成就是指通過學(xué)習(xí)和培訓(xùn)獲得的知識(shí)和技能。成就測(cè)驗(yàn)對(duì)經(jīng)過學(xué)習(xí)和訓(xùn)練后所獲得的知識(shí)和技能進(jìn)行測(cè)驗(yàn),以認(rèn)定學(xué)習(xí)和訓(xùn)練的成效。它有明確的、相對(duì)限定的范圍。通常用于測(cè)量受試者對(duì)某項(xiàng)學(xué)科或某組學(xué)科經(jīng)過學(xué)習(xí)和訓(xùn)練所獲得的知識(shí)和技能。成就測(cè)驗(yàn)通常分為教育成就測(cè)驗(yàn)和診斷性成就測(cè)驗(yàn),分別適用于教育情景下和對(duì)學(xué)習(xí)成就有關(guān)問題的臨床診斷中。我國(guó)近些年來在發(fā)展心理方面,關(guān)于Cattell和Horn所提出的流體—晶體智力理論在實(shí)際當(dāng)中的研究較多。研究認(rèn)為,在人的一生中,總的發(fā)展趨勢(shì)是:隨著年齡的增長(zhǎng),流體智力越來越少,作用也越來越小;而晶體智力則逐漸變大,所起作用也越來越大。晶體智力主要代表需要經(jīng)過教育培養(yǎng)而獲得的能力,其受文化、教育和環(huán)境的影響較大。在學(xué)校情景下的晶體智力的增長(zhǎng)和變化情況,可通過標(biāo)準(zhǔn)化的成就測(cè)驗(yàn)以及其他形式的成就測(cè)驗(yàn)而獲得,但還需可適用于不同年齡段的成就測(cè)驗(yàn)以研究人們晶體智力的變化情況。增齡(aging)問題是近些年來相關(guān)學(xué)科研究的熱點(diǎn)問題。人類壽命的不斷延長(zhǎng)和出生率下降,使世界各國(guó)的人口結(jié)構(gòu)逐漸老化。人口老化帶來了養(yǎng)老、看護(hù)等一系列社會(huì)福利問題,同時(shí)也使老年病的發(fā)病率增加。如老年性癡呆的發(fā)病率在60～69歲為1‰左右,70～79歲為5～16‰,80～90歲為10～20‰。老年性癡呆的心理障礙主要是認(rèn)知功能受損,早期以記憶障礙最為明顯,并且從近記憶發(fā)展到遠(yuǎn)記憶。近記憶由于與現(xiàn)在的日常生活緊密相連,有無障礙易于發(fā)現(xiàn);而遠(yuǎn)記憶真實(shí)與否很難核實(shí),其鑒定、測(cè)量都較難,尤其是采用自傳法,需要完整和清晰的證明材料,所以研究遠(yuǎn)不如近記憶的進(jìn)展迅速。成就測(cè)驗(yàn)則可以以易于核對(duì)的學(xué)科知識(shí)為材料,測(cè)量老年人的記憶變化情況。其它神經(jīng)心理測(cè)驗(yàn)在臨床上使用的頻率很高,而神經(jīng)心理測(cè)驗(yàn)通常還要結(jié)合記憶、智力和成就測(cè)驗(yàn)。而我國(guó)還沒有合適的可結(jié)合的成就測(cè)驗(yàn)。隨著科技的發(fā)展,社會(huì)的進(jìn)步,社會(huì)對(duì)人才的需要越來越緊迫,這就要通過成就測(cè)驗(yàn)來測(cè)定、評(píng)估、選拔人才;同時(shí),個(gè)人也需要通過成就測(cè)驗(yàn)來表現(xiàn)自己知識(shí)和技能的程度,以求不同層次、級(jí)別以及各種專門學(xué)校的培養(yǎng)和社會(huì)各個(gè)不同部門的接納。教育的研究和發(fā)展最先增長(zhǎng)了測(cè)驗(yàn)的指導(dǎo)價(jià)值,也正如Haney(1985)所說,“使測(cè)驗(yàn)更富教育性”。國(guó)外的教育成就測(cè)驗(yàn)在整個(gè)測(cè)驗(yàn)領(lǐng)域中一直占有很重要的地位。在測(cè)驗(yàn)的標(biāo)準(zhǔn)化方面,教育成就測(cè)驗(yàn)也是做得最好的一種測(cè)驗(yàn)。而使用頻率上,在英國(guó),成就測(cè)驗(yàn)是所有測(cè)驗(yàn)中應(yīng)用最為廣泛的測(cè)驗(yàn)。據(jù)估計(jì),公立學(xué)校的每個(gè)學(xué)生每年平均要進(jìn)行2.5個(gè)測(cè)驗(yàn),其中主要是成就測(cè)驗(yàn)。我國(guó)自20世紀(jì)七十年代末期開始的高考,是國(guó)家主辦的、每年都要投入大量的人、財(cái)、物力的一項(xiàng)規(guī)模巨大、政策性、技術(shù)性都很強(qiáng)的國(guó)家考試,為高校選拔幾十萬新生,也屬于一種教育成就測(cè)驗(yàn)。但是,在一般學(xué)校里一直使用的是教師自編測(cè)驗(yàn)。教師自編測(cè)驗(yàn)雖然有其優(yōu)點(diǎn),但絕大部分教師未受過教育心理方面的專業(yè)訓(xùn)練,不懂測(cè)驗(yàn)學(xué)的理論和技術(shù),所編測(cè)驗(yàn)的質(zhì)量不能令人滿意,且多為單科測(cè)驗(yàn)。也就是說學(xué)校教育中,也無真正標(biāo)準(zhǔn)化的成就測(cè)驗(yàn),無論是綜合還是單科的都缺乏。由于上述發(fā)展心理、臨床應(yīng)用、人才選拔以及教育方面的需要,而目前國(guó)內(nèi)未見此類合適的測(cè)驗(yàn),所以我們?cè)O(shè)計(jì)并編制了本測(cè)驗(yàn)。目的是測(cè)量晶體智力(能力)在不同年齡、不同教育水平的發(fā)展?fàn)顩r;在臨床上,用于診斷智力損害的狀況;人事上,用于人才的選拔;教育上,可用于學(xué)科成績(jī)的估計(jì)。本測(cè)驗(yàn)的編制策略是根據(jù)教材,但又不完全拘泥于教材,而是根據(jù)編制測(cè)驗(yàn)的目的,以國(guó)家統(tǒng)編中學(xué)教材做效標(biāo)(國(guó)家標(biāo)準(zhǔn)的效標(biāo))與(中學(xué)?？平處熀臀覀兊?經(jīng)驗(yàn)相結(jié)合的策略。本研究是用MATs預(yù)試本在山西省太原市和太原市附近城市的一個(gè)有代表性的樣本(1448人)中所做的進(jìn)一步測(cè)試,本文是這一工作的初步總結(jié)。1方法1.1量表的配置1.1.1多重成就測(cè)驗(yàn)根據(jù)測(cè)驗(yàn)編制的目的,確定測(cè)驗(yàn)的性質(zhì)為多學(xué)科、多年級(jí)適用的成就測(cè)驗(yàn),即多重成就測(cè)驗(yàn)。全量表分為五大部分,也就是五個(gè)分量表:語文、化學(xué)、物理、歷史和數(shù)學(xué)。1.1.2分布式任務(wù)2包括確定條目形式和條目編制二方面:(1)條目的形式:根據(jù)測(cè)驗(yàn)的內(nèi)容和團(tuán)體測(cè)驗(yàn)的要求,在題型方面主要采用是非題、選擇題(分單項(xiàng)選擇和多項(xiàng)選擇)和填空題等幾種便于紙筆測(cè)驗(yàn)的題型。語文內(nèi)容豐富,形式多樣,在MATs中,也努力反映語文的特點(diǎn):還采取了注音填空,句中改錯(cuò)別字,斷句加標(biāo)點(diǎn)等形式。(2)條目的收集:首先,請(qǐng)有關(guān)課程的具有豐富經(jīng)驗(yàn)和十分熟悉不同時(shí)期教材內(nèi)容變化的中學(xué)?？评蠋?按照編者的要求,根據(jù)中學(xué)的教材內(nèi)容和經(jīng)驗(yàn)收集條目。其中,語文根據(jù)中學(xué)教師收集的條目,做出條目范圍的確定和題型設(shè)計(jì)的參考,我們還增加了現(xiàn)代文章和雜志中的常用詞語、知識(shí)和閱讀材料。歷史的內(nèi)容主要根據(jù)中國(guó)通史和初、高中歷史教材,盡量編制能反映重大歷史事件和重要文史資料的內(nèi)容。1.1.3化學(xué)、化學(xué)、環(huán)保、文化通過以上的工作,基本確定了測(cè)驗(yàn)的內(nèi)容和結(jié)構(gòu)?，F(xiàn)將各分量表、分測(cè)驗(yàn)所測(cè)內(nèi)容簡(jiǎn)要介紹如下:(1)語文分量表,包括五個(gè)分測(cè)驗(yàn):(1)名人名著、名句出處和詞語解釋。(2)漢語拼音注音。(3)改錯(cuò)別字。(4)閱讀理解。(5)斷句和加標(biāo)點(diǎn)。(2)化學(xué)分量表,包括四個(gè)分測(cè)驗(yàn):(1)基本概念和理論:a.物質(zhì)的組成和表示;b.周期表和周期律;c.物質(zhì)的分類;d.物質(zhì)的變化和表示;e.物質(zhì)的化學(xué)量;f.關(guān)于溶液、膠體和電離理論;g.化學(xué)反應(yīng)速度及化學(xué)平衡。(2)常見元素及重要的化合物:a.非金屬元素及單質(zhì);b.金屬元素及單質(zhì);c.氧化物;d.氫化物;e.酸;f.堿;g.鹽。(3)有機(jī)化學(xué):a.有機(jī)化學(xué)的基本概念;b.重要的有機(jī)物。(4)化學(xué)實(shí)驗(yàn):a.物質(zhì)的制備;b.物質(zhì)的檢驗(yàn)。(3)物理分量表,包括五個(gè)分測(cè)驗(yàn):(1)力學(xué):a.運(yùn)動(dòng)學(xué);b.靜力學(xué);c.運(yùn)動(dòng)定律;d.沖量和動(dòng)量;e.功和能;f.萬有引力;g.機(jī)械振動(dòng)和機(jī)械波(包括聲學(xué))。(2)熱學(xué):a.分子運(yùn)動(dòng)論基礎(chǔ);b.熱和功;c.氣體的性質(zhì);d.固體和液體的性質(zhì);f.物態(tài)變化。(3)電學(xué):a.靜電場(chǎng);b.穩(wěn)恒電流;c.交流電。(4)光學(xué):a.幾何光學(xué);b.光的本質(zhì)。(5)原子和原子核:a.原子;b.原子核。(4)歷史分量表,包括兩個(gè)分測(cè)驗(yàn):(1)中國(guó)歷史部分:a.中國(guó)重大歷史事件;b.重要文史資料。(2)世界歷史部分a.世界重大歷史事件;b.重要文史資。(5)數(shù)學(xué)分量表,包括兩個(gè)分測(cè)驗(yàn):(1)代數(shù):a.數(shù);b.代數(shù)式;c.方程和方程組;d.不等式;e.集合和函數(shù);f.三角函數(shù);g.數(shù)列和數(shù)學(xué)歸納法;h.排列、組合、二項(xiàng)式定理。(2)幾何:a.平面幾何;b.立體幾何;c.平面解析幾何。語文、歷史和數(shù)學(xué)分量表用于初一至大一年級(jí),物理分量表用于初二以上年級(jí),化學(xué)分量表用于初三以上年級(jí)。1.1.4第一次預(yù)測(cè)驗(yàn)算經(jīng)以上工作,將所有符合要求的題目集成一個(gè)整套題本。根據(jù)條目?jī)?nèi)容,兼顧其形式又分成甲、乙兩套,在山西省太原市附近的陽泉市的兩所中學(xué)進(jìn)行了第一次預(yù)測(cè)驗(yàn)。甲乙兩套隨機(jī)抽取各100名學(xué)生的答卷進(jìn)行了難度計(jì)算。根據(jù)計(jì)算結(jié)果,將題目按難度進(jìn)行排列,刪除少部分形式欠佳的題目,并確定了分量表時(shí)限。1.2測(cè)量樣本2結(jié)果2.1各學(xué)期的原始分類各年級(jí)的原始分見表1。結(jié)果表明,各年級(jí)的各分量表分、學(xué)科分和總分都隨年級(jí)的升高而升高。2.2項(xiàng)目分析2.2.1按分測(cè)驗(yàn)平均難度計(jì)算在這里是以通過率來表示難度。通過率是每一條目回答正確的比率。即難度(P)等于正確回答人數(shù)(R)除以作答總?cè)藬?shù)(N),P=/。用公式:P=X/Xmax,X代表被試在某一條目上的平均得分,Xmax為該項(xiàng)目的滿分。先計(jì)算出每一條目的難度,再計(jì)算其分測(cè)驗(yàn)和分量表的平均難度。按分測(cè)驗(yàn)平均難度計(jì)算的結(jié)果見表2。表2表明,絕大多數(shù)分測(cè)驗(yàn)的平均難度值都在.20～.80之間。只有乙套物理分量表中的原子和原子核分測(cè)驗(yàn)的難度過大以外,甲乙共36個(gè)分測(cè)驗(yàn)中,35個(gè)符合測(cè)驗(yàn)學(xué)的要求。2.2.2區(qū)分度測(cè)定區(qū)分度是指測(cè)驗(yàn)條目的區(qū)分能力。即某一條目在總測(cè)驗(yàn)中得高分的受試者通過此條目的人數(shù)比率也高;相反,總測(cè)驗(yàn)得分低的人中,通過此條目的人數(shù)比例也很低,這便說明此條目的區(qū)分度高,區(qū)分度指數(shù)用d表示。計(jì)算d的方法因答題方法而不同。我們用計(jì)算測(cè)驗(yàn)各個(gè)條目與該測(cè)驗(yàn)總分相關(guān)的方法計(jì)算了各條目的區(qū)分度。同時(shí)又仿照Ebel(1972)提出的試題區(qū)分度指數(shù)的評(píng)價(jià)標(biāo)準(zhǔn),將區(qū)分度d<.20的條目數(shù)也列于表2中。表2表明,所有分測(cè)驗(yàn)的區(qū)分度都在.20以上,但甲套的化學(xué)較乙套的稍低,而歷史和數(shù)學(xué)又較高。3討論3.1對(duì)傳統(tǒng)測(cè)驗(yàn)理論和方法的考察成就測(cè)驗(yàn)的內(nèi)容要能代表學(xué)科的主要內(nèi)容,同時(shí)也要結(jié)合測(cè)驗(yàn)的目的和實(shí)施方法而定。本測(cè)驗(yàn)的目的是用中學(xué)主要課程的知識(shí)、以團(tuán)體測(cè)驗(yàn)的方法測(cè)量中學(xué)生對(duì)課程知識(shí)的記憶和成人晶體能力的發(fā)展趨勢(shì)。因此將量表內(nèi)容確定為:語文、歷史、化學(xué)、物理和數(shù)學(xué),條目則是這些學(xué)科內(nèi)的重要知識(shí)點(diǎn)。條目的收集主要依據(jù)國(guó)家統(tǒng)編中學(xué)教材,以及資深中學(xué)教師和我們的經(jīng)驗(yàn);測(cè)驗(yàn)條目的形式是根據(jù)團(tuán)體測(cè)驗(yàn)的要求確定的。我們的測(cè)驗(yàn)有別于一般教育成就測(cè)驗(yàn),不是完全根據(jù)教學(xué)大綱測(cè)量學(xué)生對(duì)教材內(nèi)容的掌握情況的,因而我們的條目與一般成就測(cè)驗(yàn)條目所考察的學(xué)科內(nèi)容是有差異的。如語文,中學(xué)教學(xué)要求學(xué)生通過語文學(xué)習(xí),掌握語文基礎(chǔ)知識(shí)和養(yǎng)成作文能力,而作文能力的養(yǎng)成,有知識(shí)記憶的作用,但更重要的是一種思維、想象甚至是創(chuàng)造的過程,并且無法用團(tuán)體測(cè)驗(yàn)的形式進(jìn)行測(cè)量,因而我們的量表中無此內(nèi)容;中外歷史的內(nèi)容浩如煙海,十分豐富,但測(cè)驗(yàn)時(shí)間有限,學(xué)生學(xué)習(xí)歷史的時(shí)間也較短(高二理科班就已不學(xué)歷史),所學(xué)的歷史知識(shí)也不系統(tǒng),所以只能測(cè)驗(yàn)一般認(rèn)為是重大的歷史事件、重要的文化史料等;數(shù)學(xué)當(dāng)中有大量的計(jì)算和作圖等,我們只選擇了其中主要的定義、定理、公式以及用來證明這些定義、定理和公式的簡(jiǎn)單計(jì)算條目;理、化當(dāng)中更有許多操作方面的內(nèi)容,如化學(xué)中的有機(jī)化學(xué)實(shí)驗(yàn)、化學(xué)儀器,物理中的磁場(chǎng)、電磁感應(yīng)等,我們的測(cè)驗(yàn)都未涉及。另外,在條目多少的分布上,也考慮到比例問題,如化學(xué)中的基本概念和理論、常見元素和重要化合物的條目較多,而有機(jī)化學(xué)和化學(xué)實(shí)驗(yàn)較少,物理中的力學(xué)和電學(xué)較多,原子和原子核部分卻很少,這一方面是基于各部分在教材中所占比例;另一方面則是根據(jù)我們的測(cè)驗(yàn)?zāi)康暮头椒紤]的。將測(cè)驗(yàn)分為甲乙套,在施測(cè)過程中,可避免舞弊和相互干擾。甲乙套從總體上講,測(cè)量的是同一種心理品質(zhì),條目數(shù)相同,形式相同,內(nèi)容相近。此次測(cè)驗(yàn)則是在同時(shí)、同地、同校和同班當(dāng)中進(jìn)行的,所以甲乙套可作為相互的替代本,為以后的追蹤研究服務(wù)。3.2條目的區(qū)分度難度通常以難度P值的大小來衡量。P值越大,難度越小:P值越小,則難度越大。理論上認(rèn)為,項(xiàng)目難度指數(shù)值以0.50為宜,難度分布以窄一點(diǎn)為好,各題難度不要小于0.20和大于0.80。本測(cè)驗(yàn)的難度計(jì)算結(jié)果,分測(cè)驗(yàn)的平均難度除了乙套的原子物理分測(cè)驗(yàn)難度稍大以外(0.13),其它分測(cè)驗(yàn)的難度值都在0.20～0.80之間,基本符合以上要求。在整個(gè)測(cè)驗(yàn)的難度上,難的條目隨著年齡的增長(zhǎng)而后移,前面較易的條目對(duì)低年級(jí)學(xué)生有鑒別意義,但對(duì)高年級(jí)學(xué)生來說,卻通過率很高;相反地,后面難的條目對(duì)高年級(jí)學(xué)生較適合而對(duì)低年級(jí)學(xué)生無意義。在每一個(gè)階段里,都體現(xiàn)出通過率隨年級(jí)增長(zhǎng)而提高的趨勢(shì),但后一階段的起始不一定比前一階段結(jié)束時(shí)的通過率更高,換句話說,高一的通過率不一定比初三的高,大一的通過率不一定比高二的通過率高,這一點(diǎn)甲套比乙套表現(xiàn)得明確。原因可能是現(xiàn)行教育對(duì)于不同年級(jí)的學(xué)生重視程度不同;也可能是因?yàn)榈胤浇逃咧袑W(xué)生過早分成文理科班,對(duì)不同學(xué)科學(xué)生的不同科目重視程度不同(如高二文科班不學(xué)物理和化學(xué),理科班不學(xué)歷史和地理)而造成的。測(cè)驗(yàn)條目不僅要有好的難度指數(shù),還要有好的區(qū)分度指數(shù)。具有良好區(qū)分度的條目,能將不同水平的被試區(qū)分開來,所以測(cè)驗(yàn)專家們把條目的區(qū)分度稱為測(cè)驗(yàn)是否具有效度的“指示器”,并作為評(píng)價(jià)條目質(zhì)量,篩選條目的主要指標(biāo)和依據(jù)。區(qū)分度的計(jì)算方法因測(cè)驗(yàn)的計(jì)分方法不同而有異。根據(jù)本測(cè)驗(yàn)的條目計(jì)分方法,我們采取相關(guān)法計(jì)算了條目的區(qū)分度。Ebel認(rèn)為,區(qū)分度指數(shù)d在0.20以上的條目即達(dá)到可接受水平,0.30～0.39為良好,修改后會(huì)更好,0.40以上為很好;而Aken則認(rèn)為區(qū)分度指數(shù)在0.30以上的條目較為理想,但對(duì)偏離平均難度較大的條目,稍低于0.30也可接受。本測(cè)驗(yàn)的各分測(cè)驗(yàn)區(qū)分度指數(shù)均在0.20以上,基本符合要求。在甲乙套化學(xué)分量表的有機(jī)化學(xué)、化學(xué)實(shí)驗(yàn),物理分量表中的熱學(xué)、光學(xué)和甲套物理中的電學(xué)等分測(cè)驗(yàn)區(qū)分度指數(shù)在0.30以下,在甲乙套總和的36個(gè)分測(cè)驗(yàn)中,有9個(gè),占總數(shù)的25%。余下的28個(gè)分測(cè)驗(yàn),占75%,達(dá)到了很好的水平。3.3試驗(yàn)的可靠性和效率1.1.5測(cè)量量和信效度是測(cè)定測(cè)試的一個(gè)重要方法之一,對(duì)于難點(diǎn)第二試測(cè)題本是在第一次預(yù)測(cè)的基礎(chǔ)上修改重排而成的。兩套測(cè)題各包括5個(gè)分量表18個(gè)分測(cè)驗(yàn)265道(乙套263道)測(cè)題。在山西省的太原市和太原市附近的忻州市,采用分層按比例整群抽樣的方法,即按照學(xué)校為一類(重點(diǎn)中學(xué))、二類(普通中學(xué))、三類(較差中學(xué)),根據(jù)其所在類別抽出一定比例的班級(jí);還注意學(xué)生的家庭背景和父母的受教育程度以及家庭經(jīng)濟(jì)狀況等因素要具有一定的代表性等原則,在兩市共抽取8所中學(xué)21個(gè)班,其中一類和三類各兩所,二類四所。剔除無效問卷后,余有效問卷1196份,其中甲套610份,乙套586份;還