| 網(wǎng)上學(xué)習環(huán)境評價(jià)模型、指標體系及測評量表的設計與開(kāi)發(fā) 張偉遠 香港公開(kāi)大學(xué) 【摘要】本研究旨在構建網(wǎng)上學(xué)習環(huán)境的評價(jià)模型和指標體系以及開(kāi)發(fā)標準化的網(wǎng)上學(xué)習環(huán)境測評量表。此評價(jià)模型和指標體系開(kāi)發(fā)的過(guò)程包括以下10個(gè)步驟：收集和分析關(guān)于學(xué)習環(huán)境和網(wǎng)上教學(xué)研究的文獻；比較國內外流行的17種網(wǎng)上課程開(kāi)發(fā)平臺以及使用這些平臺開(kāi)發(fā)的上百門(mén)網(wǎng)上課程；調查亞洲地區網(wǎng)上教師和學(xué)習者對網(wǎng)上教和學(xué)的體驗；構想網(wǎng)上學(xué)習環(huán)境的維度及指標體系；效度論證；先行性研究；信度測量；建構模型及指標；確認模型及指標；建立網(wǎng)上測評量表。最后形成的評價(jià)模型包括8個(gè)維度：教學(xué)設計、內容設計、網(wǎng)站設計、靈活性、學(xué)生互動(dòng)、教師支持、技術(shù)支持以及學(xué)習評估，在每個(gè)維度下又細分為7-11個(gè)指標不等，整個(gè)的指標體系共70項。我們希望，本評價(jià)模型和指標體系能為準備開(kāi)發(fā)網(wǎng)上課程的教師設計有效的網(wǎng)上學(xué)習環(huán)境提供一個(gè)框架，為網(wǎng)上教育工作者評定自己的網(wǎng)上課程提供測量量表，有助于改進(jìn)網(wǎng)上學(xué)習環(huán)境的實(shí)踐。 【關(guān)鍵詞】評價(jià)模型；指標體系；測評量表；學(xué)習環(huán)境 績(jì)效技術(shù)，又叫做人類(lèi)績(jì)效技術(shù)（Human Performance Technology，簡(jiǎn)稱(chēng)HPT），并不是一個(gè)全新的概念。事實(shí)上，目前應用于績(jì)效技術(shù)的很多理念都產(chǎn)生于20世紀60年代末和70年代初，主要來(lái)自于Thomas Gilbert、Joe Harless、Robert Mager和Geary Rummler等人。作為教育技術(shù)領(lǐng)域不斷發(fā)展起來(lái)的一個(gè)重要研究領(lǐng)域，績(jì)效技術(shù)從80年代開(kāi)始對教學(xué)設計產(chǎn)生影響，到90年代時(shí)就極大的影響了教學(xué)設計，同時(shí)許多訓練組織和教學(xué)設計者也將注意力從設計訓練項目轉到了設計電子績(jì)效支持系統[1]。目前，績(jì)效技術(shù)已經(jīng)在美國等國家得到了長(cháng)足的發(fā)展，但在我國的發(fā)展卻十分緩慢，我們力圖通過(guò)一組文章對績(jì)效技術(shù)的相關(guān)概念、理論淵源、研究范疇、工作模型、發(fā)展動(dòng)態(tài)及趨勢、與教學(xué)設計的關(guān)系、在公司及學(xué)校中的應用等多方面，比較系統地介紹績(jì)效技術(shù)的研究?jì)热?。本文作為該組文章的開(kāi)篇，著(zhù)重介紹績(jì)效技術(shù)的相關(guān)概念、理論淵源及基本觀(guān)點(diǎn)、HPT模型及人類(lèi)績(jì)效技術(shù)的研究范疇。 一、績(jì)效技術(shù)的內涵與特征 一、介紹 人們的行為受制于個(gè)人特征和所處環(huán)境之間的相互作用，因此，學(xué)習環(huán)境一直是教育領(lǐng)域中廣受關(guān)注的研究課題。學(xué)習環(huán)境的研究可以追溯到30年代德國心理學(xué)家盧因(Lewin)的學(xué)習場(chǎng)理論，盧因深受愛(ài)因斯坦的影響，把場(chǎng)物理學(xué)的觀(guān)念用于心理學(xué)。他認為，行為取決于個(gè)人和環(huán)境的作用，并提出了B=(P，2)的公式，這里B指行為，P指人，E指環(huán)境，也就是說(shuō)，一個(gè)人的行為受制于個(gè)人特征和社會(huì )環(huán)境。他的場(chǎng)理論是對現代社會(huì )心理學(xué)最有影響的理論之一(Cooper,2002)。 基于盧因的場(chǎng)理論，弗雷澤(Fraser，1986，1998)提出，我們需要一種新的策略來(lái)分析影響和導致有意義學(xué)習的多種因素，這就需要研究者設計一種測評學(xué)習環(huán)境的工具，從心理社會(huì )層面評價(jià)所在的學(xué)習環(huán)境。從80年代開(kāi)始，一系列的學(xué)習環(huán)境量表開(kāi)始出現，表1是目前流行的課堂學(xué)習環(huán)境或遠程學(xué)習環(huán)境測評的部分量表。 隨著(zhù)網(wǎng)上教學(xué)的發(fā)展，網(wǎng)上學(xué)習環(huán)境的研究開(kāi)始受到重視。要建立網(wǎng)上學(xué)習環(huán)境的評價(jià)模型和指標體系，就要研究網(wǎng)上學(xué)習環(huán)境的組成部分。綜合現有的文獻，發(fā)現目前關(guān)于網(wǎng)上學(xué)習環(huán)境的組成部分有三種分類(lèi)：基于教育技術(shù)的分類(lèi)；基于教學(xué)論的分類(lèi)；基于教育技術(shù)和教學(xué)論的分類(lèi)。詳見(jiàn)表2。  以上的三種網(wǎng)上學(xué)習環(huán)境的分類(lèi)表明了遠程教育研究者已經(jīng)關(guān)注到網(wǎng)上學(xué)習環(huán)境的重要性，也可以看出人們對網(wǎng)上學(xué)習環(huán)境的認識有一個(gè)過(guò)程，從最初的只是從網(wǎng)絡(luò )硬件設備發(fā)展到從網(wǎng)絡(luò )軟件功能的角度進(jìn)行網(wǎng)上學(xué)習環(huán)境分類(lèi)，繼而從教學(xué)論的角度探討網(wǎng)上學(xué)習環(huán)境的組成，以及綜合了技術(shù)和教學(xué)論的角度研究網(wǎng)上學(xué)習環(huán)境。然而，所有這些關(guān)于網(wǎng)上學(xué)習環(huán)境組成部分的研究，主要是依據文獻分析和推論，是一種思辨性的探討，缺乏科學(xué)和實(shí)證的研究基礎。 教學(xué)實(shí)踐的每一階段都需要發(fā)展一種科學(xué)的評價(jià)模型、指標體系及測評量表，通過(guò)評價(jià)和測量來(lái)保證教學(xué)質(zhì)量和增進(jìn)教學(xué)實(shí)踐。然而，近年來(lái)，網(wǎng)上學(xué)習的實(shí)踐飛速發(fā)展，但是根據文獻研究，關(guān)于網(wǎng)上學(xué)習環(huán)境評定的模型和指標的研究極為有限，目前還沒(méi)有標準化的專(zhuān)門(mén)測評網(wǎng)上學(xué)習環(huán)境的量表。因此，我們有必要通過(guò)系統的科學(xué)的實(shí)證研究，探討網(wǎng)上學(xué)習環(huán)境的組成部分，構建網(wǎng)上學(xué)習環(huán)境的評價(jià)模型和指標體系，開(kāi)發(fā)具有良好效度和信度的網(wǎng)上學(xué)習環(huán)境測評量表，為建立有效的網(wǎng)上學(xué)習環(huán)境提供理論基礎，同時(shí)為幫助網(wǎng)上教育工作者開(kāi)發(fā)或增進(jìn)網(wǎng)上學(xué)習環(huán)境提供一個(gè)基準。 二、研究設計和方法 (一)研究方法。在本研究中，我們采用了文獻分析、國際比較、問(wèn)卷調查、專(zhuān)家論證、標準化測量等研究方法。 (二)樣本。表3概括了評價(jià)模型、指標體系及量表開(kāi)發(fā)中不同階段的樣本人數，其中每一階段選擇的樣本是不重復的。 (三)研究過(guò)程。整個(gè)研究的過(guò)程可分為以下10個(gè)步驟： 1．文獻收集、綜合及分析。全面收集關(guān)于學(xué)習環(huán)境分類(lèi)和測量，以及網(wǎng)上教學(xué)研究方面的中英文文獻，并進(jìn)行綜合和分析，研究結果已另文發(fā)表(參見(jiàn)：張偉遠、王立勛，2003a)。 2．網(wǎng)上教學(xué)平臺和課程的國際比較。我們選擇了從萬(wàn)維網(wǎng)可以進(jìn)入的在開(kāi)放大學(xué)和普通高校廣泛應用的17種網(wǎng)上教學(xué)開(kāi)發(fā)工具，并對采用這些教學(xué)平臺開(kāi)發(fā)的100多門(mén)網(wǎng)上課程的學(xué)習環(huán)境的特征進(jìn)行了歸納，分析這些網(wǎng)上教學(xué)平臺的功能、特征、優(yōu)勢和不足，研究結果已另文發(fā)表(參見(jiàn)：張偉遠、王立勛，2003b)。 3．問(wèn)卷調查。我們對亞洲地區七國九地的1728名不同學(xué)科的網(wǎng)上學(xué)習者和105名從事網(wǎng)上教學(xué)的教師進(jìn)行了網(wǎng)上教和學(xué)的體驗和看法的問(wèn)卷調查，研究結果已另文發(fā)表(參見(jiàn)：張偉遠，2003)。 4．構想網(wǎng)上學(xué)習環(huán)境的評價(jià)模式及指標體系。在文獻研究、教學(xué)平臺比較、網(wǎng)上課程分析，以及問(wèn)卷調查的基礎上，歸納出網(wǎng)上學(xué)習環(huán)境評價(jià)模型的8個(gè)維度：并設計了相應的網(wǎng)上教學(xué)環(huán)境的96項評價(jià)指標，形成初步的網(wǎng)上學(xué)習環(huán)境測評量表。 5．內容效度的專(zhuān)家論證。我們邀請了來(lái)自我國內陸、香港、英國、美國、加拿大、澳大利亞以及印度的11位網(wǎng)上教育研究專(zhuān)家，對該評價(jià)模型、指標體系和測評量表進(jìn)行內容效度論證，結果得到了專(zhuān)家們的一致肯定，同時(shí)他們也提出了寶貴的修改建議。在認真考慮了專(zhuān)家意見(jiàn)后，我們刪除了2條不合適的指標，并對有關(guān)指標進(jìn)行了修改。 6．先行性研究。我們把經(jīng)過(guò)專(zhuān)家論證后的94項測評指標進(jìn)行隨機排列，選擇了50名網(wǎng)上學(xué)習者為樣本，請他們填寫(xiě)網(wǎng)上學(xué)習環(huán)境測評量表。根據先行性研究的結果，我們在文字上對測評量表作了一些修改。 7.信度測量·。在信度測量中采用的是測量—再測量的方法。我們選擇了32名網(wǎng)上學(xué)習者為樣本，以經(jīng)過(guò)先行性研究后修改的測評量表為工具，請這些學(xué)生填寫(xiě)。在4周以后，我們請這32名學(xué)生再次填寫(xiě)同樣的量表，然后分析兩次填寫(xiě)的量表的結果的一致性。統計結果發(fā)現，測量—再測量的信度系數是0．725。在我們刪除了與總分相關(guān)系數低于0．04的項目時(shí)，即去掉了5個(gè)信度差的項目，余下的89個(gè)項目的測量—再測量的信度系數提高到了0．728。 8．建構模型及指標。我們邀請了5所大學(xué)參加課題的模型和指標建構階段的研究，這些高校分別是：中央廣播電視大學(xué)、北京師范大學(xué)、香港公開(kāi)大學(xué)、馬來(lái)西亞開(kāi)放大學(xué)，以及英國曼徹斯特都會(huì )大學(xué)。所選擇的不同學(xué)科的796名網(wǎng)上學(xué)習者填寫(xiě)了網(wǎng)上學(xué)習環(huán)境測評量表。根據收集的數據，采用因素分析的統計方法，發(fā)現了8個(gè)可解釋的因素，即8個(gè)網(wǎng)上學(xué)習環(huán)境的維度。根據因素負荷和項目量表信度，15個(gè)項目被進(jìn)一步排除。余下的70個(gè)指標項目的alpha信度達到0．97。 9．確認模型及指標。這一階段的研究目的是對上一階段發(fā)現的網(wǎng)上學(xué)習環(huán)境的8個(gè)維度及指標體系進(jìn)行確認。我們選擇了8所大學(xué)參加這一階段的研究，他們分別是：北京大學(xué)、中央廣播電視大學(xué)、北京師范大學(xué)、華南師范大學(xué)、香港大學(xué)、香港城市大學(xué)、臺灣高雄師范大學(xué)以及墨西哥的巴佳加里福尼亞自治大學(xué)。被選擇的來(lái)自不同學(xué)科的1342名網(wǎng)上學(xué)習者填寫(xiě)了網(wǎng)上學(xué)習環(huán)境測評量表。根據測量的結果，采用因素分析的方法，發(fā)現同模型和指標建構階段的研究結果一致，統計結果顯示出同樣的8個(gè)明顯的因素，即8個(gè)網(wǎng)上學(xué)習環(huán)境的維度。根據每一維度包含的指標項目，我們給予每一維度特定的名稱(chēng)和含義(詳見(jiàn)研究結果部分)。根據這次測量，70個(gè)評價(jià)指標最后被保留下來(lái)，其alpha信度達到0．98。 10．建立網(wǎng)上測評量表。最后我們建立了評價(jià)模型、指標體系以及網(wǎng)上學(xué)習環(huán)境測評量表，這是國際上第一個(gè)標準化的供管理人員、教師及學(xué)習者使用的網(wǎng)上學(xué)習環(huán)境測評量表，量表有中文和英文兩個(gè)版本，并與香港公開(kāi)大學(xué)遙距及成人教育研究中心的網(wǎng)頁(yè)聯(lián)接，人們可以自由免費使用。 三、研究結果 (一)網(wǎng)上學(xué)習環(huán)境評價(jià)模型 根據研究結果，網(wǎng)上學(xué)習環(huán)境評價(jià)模型包括8個(gè)維度，即教學(xué)設計、內容設計、網(wǎng)站設計、靈活性、學(xué)生互動(dòng)、教師支持、技術(shù)支持以及學(xué)習評估。詳見(jiàn)下圖。
（二）網(wǎng)上學(xué)習環(huán)境評價(jià)的指標體系 本研究發(fā)現，網(wǎng)上學(xué)習環(huán)境的指標體系包括在8個(gè)維度下的70項指標，詳見(jiàn)表4。 (三)網(wǎng)上學(xué)習環(huán)境的測評量表 1．測評量表的結構。根據在模型及指標建構和模型及指標確認兩個(gè)階段收到的收據(分別是796和1343名被試)，采用Vari—max旋轉的主成分分析法，對評價(jià)模型中的所有指標進(jìn)行探究因素分析，結果證明，這些指標可以分為能解釋的8個(gè)因素(即網(wǎng)上學(xué)習環(huán)境的8個(gè)維度)，綜合每一維度的相應的指標內容，我們把8個(gè)維度稱(chēng)為教學(xué)設計、內容設計、網(wǎng)站設計、靈活性、學(xué)生互動(dòng)、教師支持、技術(shù)支持以及學(xué)習評估。最后的網(wǎng)上學(xué)習環(huán)境評價(jià)模型包括8個(gè)維度和70項指標。根據每一維度下的具體的指標內容，我們確定了這8個(gè)維度的含義，詳見(jiàn)表5。 2.測評量表的信度。測評量表的可靠性是通過(guò)信度測量來(lái)進(jìn)行的，本研究采用了克龍巴赫a1—pha信度測量和測量—再測量的兩種信度分析方法。根據克龍巴赫卻ha信度測量，總量表的內在一致性系數是0．98，8個(gè)分量表(即8個(gè)維度)的內在一致性系數是介于0．82至0．98之間。根據測量—再測量的結果分析，總量表的內在一致性系數是0．95，8個(gè)分量表(即8個(gè)維度)的內在一致性系數是介于0．78至0．95之間，詳見(jiàn)表6。 表6表明，這一量表的信度系數都高于0．78，因此，可以說(shuō)此量表具有良好的信度(Nunnally，1967)。 3.測評量表的效度。本測評量表的效度可以從3方面來(lái)確定：第一，由專(zhuān)家評定所有項目的內容效度。我們邀請了來(lái)自我國內陸、香港、英國、美國、加拿大、澳大利亞以及印度的11位網(wǎng)上教育研究專(zhuān)家對該評價(jià)模式和所有指標進(jìn)行效度論證；第二，本量表經(jīng)過(guò)了先行性研究，確保問(wèn)卷的合適性；第三，通過(guò)因素分析證明，大部分的指標都能歸為8個(gè)因素(維度)之下，因此具有良好的構想效度。 4．網(wǎng)上測評量表的組成部分。網(wǎng)上測評量表的中文和英文兩個(gè)版本的網(wǎng)址是：http／／www．ouhk．edu．hk／cridal／doviles／。量表包括下面5個(gè)聯(lián)接的部分： (1)介紹 (3)量表。本量表隨機排列了70個(gè)指標項目，量表的部分內容見(jiàn)表7。 表7 (4) 測量結果。測量結果包括兩個(gè)部分，一是使用者的網(wǎng)上學(xué)習環(huán)境的8個(gè)維度上的綜合得分和樣本總體的常模分數，供使用者比較參考。使用者得分和常模分數用圖形和數字同時(shí)顯示，使測評結果一目了然。另一部分是使用者的網(wǎng)上學(xué)習環(huán)境在8個(gè)維度下的70個(gè)指標的得分和樣本總體的常模分數。 (5)數據收集。使用者填的網(wǎng)上學(xué)習環(huán)境測量量表的數據，會(huì )直接進(jìn)入量表開(kāi)發(fā)者所設定的Excel形式的數據庫，這些自動(dòng)收集的數據可作量表的進(jìn)一步效度論證，以及自動(dòng)更新常模。 四、討論和結論 本研究基于對學(xué)習環(huán)境和網(wǎng)上教學(xué)研究的文獻分析，對網(wǎng)上教學(xué)平臺和網(wǎng)上課程的特征和功能的國際比較，對亞洲地區網(wǎng)上教學(xué)現狀的問(wèn)卷調查，構建了網(wǎng)上學(xué)習環(huán)境的評價(jià)模型和指標體系，開(kāi)發(fā)了網(wǎng)上學(xué)習環(huán)境的測評量表，經(jīng)過(guò)國內外專(zhuān)家論證、先行性研究、信度測量，并在多個(gè)國家進(jìn)行試用，量表符合適合性、可靠性及有效性三方面的量表開(kāi)發(fā)要求，可供網(wǎng)上教學(xué)的管理人員、網(wǎng)上教師以及網(wǎng)上學(xué)習者使用。 這一網(wǎng)上學(xué)習環(huán)境評價(jià)模型、指標體系，以及測評量表的開(kāi)發(fā)和應用，具有理論和實(shí)踐兩方面的貢獻。從理論上來(lái)看，本研究的結果發(fā)現，網(wǎng)上學(xué)習環(huán)境的組成部分可以綜合為8個(gè)部分：教學(xué)設計、內容設計、網(wǎng)站設計、靈活性、學(xué)生互動(dòng)、教師支持、技術(shù)支持以及學(xué)習評估。這一結果比現存的各種網(wǎng)上學(xué)習環(huán)境的分類(lèi)，更加反映了最新的網(wǎng)上教學(xué)的現狀。由于這一研究是基于實(shí)證的，它比已有的網(wǎng)上學(xué)習環(huán)境的分類(lèi)更科學(xué)、綜合和完整，能為創(chuàng )立網(wǎng)上教學(xué)的理論提供基礎。 從實(shí)踐上來(lái)看，這一研究結果有以下幾方面的價(jià)值：對于管理人員和教師來(lái)說(shuō)，如果計劃開(kāi)設網(wǎng)上課程，可以參考這一量表的評價(jià)模型和指標體系，使他們在開(kāi)發(fā)網(wǎng)上課程中能考慮到網(wǎng)上學(xué)習環(huán)境的各個(gè)層面和各種指標。如果管理人員和教師需要評價(jià)已有的網(wǎng)上課程，他們可以從網(wǎng)上學(xué)習環(huán)境的8個(gè)維度和各項指標，與本項研究已經(jīng)建立的網(wǎng)上學(xué)習環(huán)境的常模分數比較，從而考慮如何增進(jìn)網(wǎng)上學(xué)習環(huán)境的實(shí)踐。對于網(wǎng)上學(xué)習者來(lái)說(shuō)，通過(guò)運用這一測評量表，了解自己學(xué)習的網(wǎng)上課程的學(xué)習環(huán)境與其他網(wǎng)上課程的差異?？傊?，我們希望此評價(jià)模式和指標體系能為網(wǎng)上教育工作者提供一個(gè)評定網(wǎng)上學(xué)習環(huán)境的有用工具，此測量量表能幫助他們自我評價(jià)網(wǎng)上課程的學(xué)習環(huán)境，從而有針對性地改進(jìn)和提高。 然而，網(wǎng)上學(xué)習環(huán)境牽涉的因素極其復雜，不同國家和地區進(jìn)行網(wǎng)上教學(xué)的模式也不盡相同，各地的政治、經(jīng)濟、教育體系、傳統、文化、語(yǔ)言等等因素都對網(wǎng)上學(xué)習環(huán)境有著(zhù)一定的制約和影響。因此，通過(guò)這一測評量表得到的結果只能作為評價(jià)的參考依據之一。最后，要指出的是，這一評價(jià)模式、指標體系及測評量表，只是幫助使用者評價(jià)自己所教或學(xué)的網(wǎng)上課程與他人的網(wǎng)上課程在學(xué)習環(huán)境方面的不同之處，而不能作為評價(jià)網(wǎng)上學(xué)習環(huán)境優(yōu)劣的標準。 |
聯(lián)系客服
