私立大專院校經營困境與因應策略Bloom2001年版在國語文標準化成就測驗質化分析上的應用鄭圓鈴 國立臺灣科技大學人文學科副教授摘要本論文利用Bloom2001年版的理論架構,建立高職國語文質化分析雙向細目表,用以檢核四技二專標準化成就測驗的試題內容,並據以檢討缺失;再根據缺失,重作規劃,使試題內容所含括的教育內容、評量指標與認知歷程更周全完整。如是可使試題分析在量化分析的基礎上,進一步以質化分析診斷試題,並以標準化的質化分析雙向細目表,使質化分析更客觀周延。關鍵詞:國語文測驗質化分析、國語文標準化成就測驗、雙向細目表91人文社會學報2005‧3‧1期,91-122前言所謂標準化成就測驗,即指依據測驗原理與原則所編製的成就測驗,如:經由雙向細目表,確定測驗的測量內容;依測量內容編寫試題;由預試結果,進行難度與鑑別度的分析,並選取難易適中、高鑑別度的試題;由信度與效度分析,評估測驗品質;經由正式施測,建立常模,做為解釋測驗分數的依據。1而試題分析可分為質化分析(qualitativeanalysis)與量化分析(quantitativeanalysis)兩部分;前者就試題的內容和形式,從取材的適切性(relevance)與編擬試題的技術方面加以評鑑;後者則就預試的結果,分析其難度(itemdifficulty)、鑑別度(itemdiscrimination)與選項誘答力(distraction)2。量化分析中有關試題難度、鑑別度與選項誘答力的分析,可藉由電腦對考生答題紀錄的統計,提供正確客觀的數據,作為判斷試題優劣的標準。而在質化分析方面,如何對取材的適切性做出正確而客觀的分析,亦需藉助客觀的輔助工具。由於Bloom2001版在知識與認知歷程兩個向度所提供的分類架構,有助於規劃建立測驗的雙向細目表3,因此亦可利用Bloom2001版的理論,建立質化分析雙向細目表,使試題內容檢核,更具客觀性與方便性。壹、Bloom2001年版理論架構Bloom2001版是Bloom1956版的修正版本。Bloom1956版由BenjaminS.Bloom主編,MaxD.Engelhart,EdwardJ.Furst,WalkerH.Hill及DavidR.Krathwohl等人撰寫,正式名稱為《Taxonomyofeducationalobjectives:Theclassificationofeducationalgoals,HandbookⅠ:Cognitivedomain》,並於1956年在美國紐約出版。該手冊是第一本以分類學架構,為教育目標提供一套完整分類系統的著作。它的分類及說明,均富參考價值,因此對當時美國的課程設計與測驗編寫產生極大的影響。台灣在過去的聯考時代,亦根據其理論,建立雙向細目表,檢核測驗內容。但Bloom1956版經多年使用,其不足處逐漸彰顯4,而近年教育領域相關學術研究成果,亦不斷累積。經過多年討論,2001年美國終於有修訂版問世,即Anderson,W.&Krathwohl,D.R.(Eds.)(2001)所編寫的《Ataxonomyforlearningteaching,andassessing:ArevisionofBlooms’educationalobjectives》,NewYork,NY:Longman,我們簡稱為Bloom2001年版。Bloom2001年版最主要的理論架構是將認知領域教育目標分為知識內容與認知歷程兩個向1周文欽等,《心理與教育測驗》(台北市:心理出版社,民國86年10月,初版三刷),頁12-132王文中等《教育測驗與評量》(台北市:心理出版社,民國91年3月7,初版五刷),頁286-2953鄭圓鈴《高職國語文標準化成就測驗的編製》(台北市:心理出版社,民國93年7月,初版一刷),頁424參考Anderson,L.W.,&Sosniak,L.A.,Bloom’staxonomy:Aforty–yearretrospective.Chicago,IL:TheNationalSocietyfortheStudyofEducation,1994.92私立大專院校經營困境與因應策略度。知識內容分為四項主類目,及十一項次類目5,茲分別說明如後:一、事實知識:術語知識、特定整體和元素知識。二、概念知識:分類和類別知識、原則和通則化知識、理論/模式/結構知識。三、程序知識:特定學科技能和演算知識、特定學科技術和方法知識、運用規準知識。四、後設認知知識:策略知識、認知任務(特有脈絡和狀態)知識、自我知識。而認知歷程向度,則分六項主類目,及十九項次類目,茲分別說明如後:一、記憶:確認、回憶。二、理解:說明、舉例、分類、摘要、推論、比較、解釋。三、應用:執行、實行。四、分析:區辨、組織、歸因。五、評鑑:檢查、批判。六、創造:產生、計劃、製作。對上述知識內容向度與認知歷程向度有關主類目與次類目的定義及說明,Bloom2001年版也建立一套結構完整的說明體例,即先說明類目定義,次例舉相關的教育目標,最後則說明試題範例。為方便說明,筆者將Bloom2001年版二個向度的內容,以簡表說明如後:5參考Anderson,W.,&Krathwohl,D.R.,Ataxonomyforlearningteaching,andassessing:ArevisionofBlooms'educationalobjectives.NewYork,NY:Longman,Green,2001,p.46.葉連祺、林淑萍,〈布魯姆認知領域教育目標分類修訂版之探討〉,《教育研究月刊》,105期(民國92年1月),頁94-106。李坤崇,〈修訂Bloom認知分類及命題實例〉,《教育研究月刊》,122期(民國93年6月),頁98-127。鄭圓鈴,《高職國語文標準化成就測驗的編製》(台北市:心理出版社,民國93年7月,初版一刷),頁35-4293人文社會學報2005‧3‧1期,91-122表1Bloom2001年版知識向度分類簡表主類別/次類別定義/說明A.事實知識(factualknowledge)認識學習科目後和解決問題時應知道之基本要素知識AA.術語知識(knowledgeofterminology)特定語文或非語文形式的標題和符號AB.特定整體和元素知識(knowledgeofspecificdetailsandelements)有關事件、位置、人、資料、資訊來源等知識,可包括具精確性、特定性或約略性的資訊B.概念知識(conceptualknowledge)存於較大型結構中,能共聚產生功能的各基本要素之相互關係BA.分類和類別知識(knowledgeofclassificationsandcategories)確定不同事物的類別、等級、劃分和排列情形BB.原則和通則化知識(knowledgeofprinciplesandgeneralizations)觀察現象加以總結摘要,可用描述、預測、解釋、決定最適切的行動BC.理論/模式/結構知識(knowledgeoftheories,models,andstructures)對複雜現象、問題和事物,提出清楚、完整、系統性觀點的觀點C.程序知識(proceduralknowledge)認識如何完成某事的流程、探究方法及使用技巧、演算、技術和方法的規準CA.特定學科技能和演算知識(knowledgeofsubject-specificskillsandalgorithms)具有固定最終結果或具固定順序、步驟的知識CB.特定學科技術和方法知識(knowledgeofsubject-specifictechniquesandmethods)學者、專家共同協調,用以思考和解決問題方式的知識CC.運用規準知識(knowledgeofcriteriafordeterminingwhentouseappropriateprocedures)知道何時使用程序和過去使用該程序的知識D.後設認知知識(meta-cognitiveknowledge)認知和知覺的知識及對自己認知的知識DA.策略知識(strategicknowledge)會使用各種學習、思考和解決問題策略的知識,會因工作和學科性質而異DB.認知任務知識(特有脈絡和狀態)(knowledgeaboutcognitivetasks,includingappropriatecontextualandconditionalknowledge)了解何時使用和為何使用某知識的策略,與當時情境、社會、傳統和文化規範有關DC.自我知識(self-knowledge)了解自己認知、學習之優劣與動機信念強弱的知識94私立大專院校經營困境與因應策略表2Bloom2001年版認知歷程向度分類簡表主類別/次類別定義1.記憶(remember)從長期記憶中提取相關知識1.1確認(recognizing)尋找長期記憶中和現有事實一致的知識1.2回憶(recalling)提示出現時,能從長期記憶取回相關的知識2.了解(understand)從口述、書寫和圖表等教學訊息中建構意義2.1說明(interpreting)由一種溝通形式轉換成另一種溝通形式2.2舉例(exemplifying)用例子說明概念或原則2.3分類(classifying)指出某物隸屬於某一特定類目2.4摘要(summarizing)提出主題或要點。2.5推論(inferring)從現有資訊提出具邏輯性的結論2.6比較(comparing)檢示兩個觀點、事物或其他類似物間的一致性2.7解釋(explaining)建立一個系統的因果模式3.應用(apply)對某情境執行或使用一個程序3.1執行(executing)應用一個程式於已熟悉的工作3.2實行(implementing)應用一個程式於陌生的工作4.分析(analyze)將整體分成許多部分,並指出部分間及部分與整體間結構的關聯4.1區辨(differentiating)從材料中,區辨出相關、不相關,重要與不重要的部分4.2組織(organizing)確定要素在結構中的適切性和功能4.3歸因(attributing)指出材料隱含的觀點、偏見、價值、意圖。5.評鑑(evaluate)根據規準和標準作判斷5.1檢查(checking)檢視過程或產品,內部的不一致性,如論點是否矛盾5.2批判(critiquing)檢視過程或產品與外在規準的不一致性6.創造(create)集合要素以組成一個具協調性或功能性的整體6.1產生(generating)根據規準,提出假設6.2計劃(planning)設計程序,完成某些工作6.3製作(producing)發明新產品95人文社會學報2005‧3‧1期,91-122貳、Bloom2001年版在國語文標準化成就測驗質化分析上的應用-以93年四技二專統一入學測驗為例為說明Bloom2001年版的理論架構,如何應用於國語文標準化成就測驗的質化分析,茲以93年四技二專統一入學測驗為例,說明如後:一、93年四技二專統一入學測驗的特質技專校院入學測驗中心於民國91年1月起,委託國立台灣科技大學人文學科,進行為期三年的四技二專標準化成就測驗試題題庫建置計畫6,並於93年四月正式利用題庫試題,組成四技二專統一入學測驗題本。93年四技二專統一入學測驗題本的製作過程為:1.製訂雙向細目表,確定測驗的測量內容。2.依測量內容編寫試題。3.由預試結果,進行難度與鑑別度與選項誘答力分析,並選取難易適中、高鑑別度、選項具誘答力的試題,組成測驗題本。4.由信度與效度分析,確保測驗品質。5.建立常模,做為解釋測驗分數的依據。由於該題本的製作符合標準化成就測驗編製的定義,故取為本論文說明樣本。二、高職國語文質化分析雙向細目表為建立國語文質化分析雙向細目表,以為分析93年四技二專統一入學測驗試題內容的依據,筆者根據Bloom2001年版的理論架構,參考拙作《高職國語文標準化成就測驗的編製》中所擬定的高職國語文雙向細目表(乙)7,並分析