COMET職業(yè)能力測(cè)評(píng)國(guó)際聯(lián)盟 德國(guó)不來(lái)梅大學(xué) Felix Rauner 教授為首的,由中國(guó)、南非、瑞士、挪威等國(guó)科研人員組成的研究團(tuán)隊(duì),開(kāi)發(fā)建立了 COMET 職業(yè)能力模型(見(jiàn)圖 1-1),并在我國(guó)北京、四川和廣州等地進(jìn)行了測(cè)評(píng)技術(shù)的驗(yàn)證。并在金磚國(guó)家和國(guó)內(nèi)競(jìng)賽中多次應(yīng)用。
COMET 職業(yè)能力模型由三個(gè)維度構(gòu)成,分別是職業(yè)的“內(nèi)容維度”、“要求維度”和 “行動(dòng)維度”:
?內(nèi)容維度:包括“職業(yè)定向性的任務(wù)”、“程序化的任務(wù)”、“蘊(yùn)含問(wèn)題的特殊任務(wù)” 和“不可預(yù)見(jiàn)的未知任務(wù)”四個(gè)職業(yè)工作范圍,對(duì)應(yīng)四個(gè)學(xué)習(xí)范圍,即“定向和 概括性知識(shí)”、“關(guān)聯(lián)性知識(shí)”、“具體與功能性知識(shí)”和“學(xué)科系統(tǒng)化的深入知識(shí)”。
?能力要求維度:包括 4 個(gè)能力級(jí)別,即名義能力、功能性能力、過(guò)程性能力和整 體化的設(shè)計(jì)能力。
?行動(dòng)維度:包括獲取信息、制定計(jì)劃、做出決策、實(shí)施計(jì)劃、控制和評(píng)價(jià)六個(gè)階段。
COMET 職業(yè)能力模型建立在一系列現(xiàn)代職業(yè)教育的理論基礎(chǔ)之上,如情境學(xué)習(xí)和行動(dòng)導(dǎo)向的學(xué)習(xí)理論、多元智能和發(fā)展性任務(wù)的心理學(xué)理論、設(shè)計(jì)導(dǎo)向的職業(yè)教育指導(dǎo) 思想、從“初學(xué)者到專家”(from novice to expert)職業(yè)成長(zhǎng)邏輯規(guī)律的專家智能理論以 及工作過(guò)程知識(shí)的工業(yè)社會(huì)學(xué)理論等(詳見(jiàn)本手冊(cè)所列參考文獻(xiàn)):
? 設(shè)計(jì)導(dǎo)向(Gestaltungsorientierung)思想:上世紀(jì) 80 年代由勞耐爾(F. Rauner) 提出并在德國(guó)發(fā)展起來(lái)的人文主義職業(yè)教育思想,其核心理念是:人不僅要有適 應(yīng)能力,更重要的是有能力本著對(duì)社會(huì)、經(jīng)濟(jì)和環(huán)境負(fù)責(zé)人的態(tài)度,參與設(shè)計(jì)未 來(lái)工作世界的發(fā)展。
行動(dòng)導(dǎo)向教學(xué)(Handlungsorientierung):指師生共同確定行動(dòng)產(chǎn)品來(lái)引導(dǎo)的教學(xué)組 織過(guò)程,學(xué)生通過(guò)主動(dòng)和全面的學(xué)習(xí),達(dá)到腦力勞動(dòng)和體力勞動(dòng)相統(tǒng)一的學(xué)習(xí)形 式。這里的行動(dòng)不僅僅是日常生活中的行動(dòng)、活動(dòng)或勞動(dòng),而且還是為了達(dá)到學(xué) 習(xí)目標(biāo)而進(jìn)行的有意識(shí)的行為。
職業(yè)能力發(fā)展的邏輯規(guī)律(Development logic):心理學(xué)家德萊福斯兄弟(H. L. Dreyfus 和 S. E. Dreyfus)在人工智能研究中提出,專業(yè)人員在“從初學(xué)者到專家” 的職業(yè)能力發(fā)展過(guò)程中分為初學(xué)者、高級(jí)初學(xué)者、有能力者、熟練者和專家五個(gè) 階段,每一個(gè)階段的知識(shí)都有特殊的形態(tài),從一個(gè)階段到另一個(gè)階段需要完成特 定的發(fā)展性任務(wù)(Developmental task)。
工作過(guò)程知識(shí):由社會(huì)學(xué)者克魯瑟(W. Kruse)提出、由勞耐爾(F. Rauner)和費(fèi) 舍爾(M. Fisher)等發(fā)展起來(lái)的職業(yè)教育理論,工作過(guò)程知識(shí)指有豐富經(jīng)驗(yàn)的技術(shù) 工人所特有的、與生產(chǎn)勞動(dòng)過(guò)程相關(guān)的知識(shí)。它不僅是在工作過(guò)程中直接需要的。
區(qū)別于學(xué)科系統(tǒng)化的知識(shí)),而且是需要在工作過(guò)程中自我獲得的,特別需要 通過(guò)經(jīng)驗(yàn)性學(xué)習(xí)后,在工作經(jīng)驗(yàn)與理論反思間的特定關(guān)系中產(chǎn)生。
職業(yè)能力測(cè)評(píng)按照專業(yè)類別,以筆試形式進(jìn)行,目的是評(píng)價(jià)被試的職業(yè)(認(rèn)知)能力,即“完成和處理一組任務(wù)時(shí)所需要的主觀能力的潛力”。測(cè)試中,每位被試共 完成 3 項(xiàng)任務(wù):測(cè)試任務(wù)卷、背景情況調(diào)查問(wèn)卷和測(cè)試動(dòng)機(jī)問(wèn)卷。監(jiān)考老師需完成教師 關(guān)于學(xué)生測(cè)試動(dòng)機(jī)的問(wèn)卷,即考場(chǎng)情況問(wèn)卷。
測(cè)試任務(wù)卷是 COMET 測(cè)評(píng)的主要測(cè)試工具,為一道開(kāi)放性的測(cè)試題目。測(cè)試題目 因職業(yè)的不同而異,具體案例見(jiàn)附錄 1。它的基礎(chǔ)是職業(yè)的典型工作任務(wù),通過(guò)一個(gè)職業(yè) 及其職業(yè)描述而定,且符合職業(yè)教育培養(yǎng)目標(biāo)的要求。測(cè)試題目具有足夠的復(fù)雜性和綜 合性,能體現(xiàn)以典型工作任務(wù)的職業(yè)工作和學(xué)習(xí)內(nèi)容。能力測(cè)評(píng)考查的是“冰凍三尺非一日之寒”的能力,考生無(wú)需準(zhǔn)備。每個(gè)專業(yè)的測(cè)試任務(wù)卷分為 A 卷、B 卷、C 卷和 D 卷,由監(jiān)考教師隨機(jī)選擇發(fā)給考生,被試需要提出完成任務(wù)的解決方案,并用易于理解 的方式解釋采取該方案的理由。在解決方案中,可以利用草圖、文字描述、表格和清單 等技術(shù)語(yǔ)言說(shuō)明,并向客戶詳細(xì)闡述其理由。測(cè)試任務(wù)是開(kāi)放性的,允許學(xué)生給出不同 的答案。
參加測(cè)評(píng)的被試需填寫(xiě)一份背景情況調(diào)查問(wèn)卷,用于搜集和確定職業(yè)能力發(fā)展的背景條件,包括被試的背景特征、職業(yè)學(xué)校和實(shí)習(xí)實(shí)訓(xùn)企業(yè)狀況(見(jiàn)表 1-1 所示)。背景問(wèn) 卷還包括用于測(cè)量職業(yè)認(rèn)同感的題項(xiàng),對(duì)職業(yè)認(rèn)同感的發(fā)展以及在此基礎(chǔ)上建立的職業(yè) 承諾進(jìn)行評(píng)價(jià)。
測(cè)試動(dòng)機(jī)問(wèn)卷用于了解被測(cè)的測(cè)試動(dòng)機(jī),涉及完成測(cè)評(píng)任務(wù)的時(shí)間、對(duì)測(cè)試任務(wù)的興趣和認(rèn)識(shí),以及付出努力的程度。
測(cè)試監(jiān)考教師也要填寫(xiě)一份考場(chǎng)情況問(wèn)卷,用于了解該班級(jí)被試的測(cè)試動(dòng)機(jī)和測(cè)試氛圍。
為了解釋和評(píng)價(jià)被試提供的任務(wù)解決方案,我們建立了針對(duì) 4 個(gè)能力級(jí)別的由 8 個(gè) 力指標(biāo)(見(jiàn)圖 1-2)組成的指標(biāo)體系,這 8 個(gè)指標(biāo)分別是:“直觀性/展示”、“功能性”、“使 用價(jià)值導(dǎo)向”、“經(jīng)濟(jì)性”、“企業(yè)生產(chǎn)流程和工作過(guò)程導(dǎo)向”、”社會(huì)接受度”、”環(huán)保性”和 “創(chuàng)造性”。
?
為了使上面的 8 項(xiàng)指標(biāo)具有可操作性,我們?yōu)槊宽?xiàng)指標(biāo)設(shè)置了 5 個(gè)觀測(cè)評(píng)分點(diǎn),共40 個(gè),這些指標(biāo)都是經(jīng)過(guò)心理測(cè)評(píng)技術(shù)的信度和效度驗(yàn)證。如:對(duì)“直觀性展示”設(shè)置的觀測(cè)評(píng)分點(diǎn)為:
1)、對(duì)委托方來(lái)說(shuō),解決方案的表述是否容易理解?
2)、對(duì)專業(yè)人員來(lái)說(shuō),是否恰當(dāng)?shù)孛枋隽私鉀Q方案?
3)、是否直觀形象地說(shuō)明了任務(wù)的解決方案?(如:用圖表/用圖畫(huà))?
4)、解決方案的層次結(jié)構(gòu)是否分明? 描述解決方案的條理是否清晰?
5)、解決方案是否與專業(yè)規(guī)范或技術(shù)標(biāo)準(zhǔn)相符合?(從理論、實(shí)踐、制圖、 數(shù)學(xué)和語(yǔ)言)
評(píng)分者按照觀測(cè)評(píng)分點(diǎn)給學(xué)生的測(cè)評(píng)解決方案打分。每個(gè)觀測(cè)評(píng)分點(diǎn)設(shè)有“完全不符合”、“基本不符合”、“基本符合”和“完全符合”四個(gè)檔次,對(duì)應(yīng)的得分為 0、1、2、 3 分。一般來(lái)說(shuō),如果解決方案里沒(méi)有提及該評(píng)分點(diǎn)的相關(guān)內(nèi)容,則判定為“完全不符合”(即 0 分),簡(jiǎn)單提及但沒(méi)有說(shuō)明的判定為“基本不符合”(即 1 分),提及并說(shuō)明怎么做的判定為“基本符合”(即 2 分),明確提及且解釋理由的則評(píng)定為“完全符合”(即 3 分)。
問(wèn)題解決空間:為了確保評(píng)分能夠達(dá)到足夠高的評(píng)分者信度,評(píng)分者常常希望得到一份試題的“標(biāo) 準(zhǔn)答案”幫助其進(jìn)行評(píng)分。但是由于 COMET 測(cè)評(píng)采用的是開(kāi)放性題目,不可能存在這 樣一份唯一的“標(biāo)準(zhǔn)答案”,于是項(xiàng)目為每道試題設(shè)計(jì)了一個(gè)“問(wèn)題解決空間”。 問(wèn)題解決空間描述了開(kāi)放性測(cè)試題目可能出現(xiàn)的各種解決方案,它可以提示評(píng)分者,在 按照 8 個(gè)能力指標(biāo)進(jìn)行評(píng)分時(shí)應(yīng)重點(diǎn)考慮哪些方面。
呈現(xiàn)給每位被試的測(cè)評(píng)結(jié)果:測(cè)試完成后,每位被試不但可以得到一個(gè)能力總分和自己所處的能力級(jí)別,而且還 可以得到一份描述其職業(yè)能力特點(diǎn)的輪廓圖(見(jiàn)圖 1-3)。輪廓圖不僅展示了三個(gè)能力級(jí) 別,而且還包含了八項(xiàng)能力指標(biāo),顯示了能力模型的多維特征。這可以使被試清楚地了 解自己的優(yōu)點(diǎn)和缺陷,從而明確未來(lái)的努力方向。
呈現(xiàn)給學(xué)校的測(cè)評(píng)結(jié)果:通過(guò)測(cè)評(píng),學(xué)??梢粤私獾阶约涸谒袇⒓訙y(cè)評(píng)的職業(yè)院校中的人才培養(yǎng)水平(見(jiàn) 圖 1-4),了解自己學(xué)生的職業(yè)能力總體狀況(見(jiàn)圖 1-5),了解不同班級(jí)學(xué)生職業(yè)能力水 平的差異和課程改革的效果(見(jiàn)圖 1-6)。