魏定國　田瑞英

【摘要】 眾所周知,知識結(jié)構(gòu)是各個專業(yè)領(lǐng)域的專業(yè)技能的決定因素。知識結(jié)構(gòu)評估是教師了解學(xué)生的知識結(jié)構(gòu)是否朝著合適的方向發(fā)展、鑒別學(xué)習(xí)或培訓(xùn)是否有效的方法。然而這種評估很少被應(yīng)用到會計教學(xué)之中。本文探索了一種評估技術(shù),即路徑查找技術(shù),能將它容易地應(yīng)用到會計教學(xué)實(shí)踐中,評估學(xué)生的知識結(jié)構(gòu),并提供了在會計教育中應(yīng)用該技術(shù)的實(shí)際案例。結(jié)果說明該技術(shù)的評估結(jié)果能夠反映會計教學(xué)情況。

【關(guān)鍵詞】 知識結(jié)構(gòu);課堂評估技術(shù);結(jié)構(gòu)化評估

一、 引言

在認(rèn)知科學(xué)中,就學(xué)習(xí)行為來說,儲存在記憶中的知識的數(shù)量和知識的結(jié)構(gòu)都是非常重要的。知識結(jié)構(gòu)的概念早就被相關(guān)專家引入會計教育研究中,知識結(jié)構(gòu)的概念是基于人們將信息組織成能夠反映定義它們的概念與特征之間的關(guān)系,是一門學(xué)科的概念、原理、規(guī)則和特征的組成方式。

知識結(jié)構(gòu)對會計專業(yè)技能具有重要的意義。實(shí)證研究已經(jīng)證明,精確、高質(zhì)量的知識結(jié)構(gòu)使得相關(guān)信息容易識別和編碼,便于從長期的記憶中檢索可用的知識,有利于在會計任務(wù)的行為特征中找到合適的問題解決策略。盡管記憶豐富的行為特征有它的優(yōu)勢,但較好的知識結(jié)構(gòu)對后續(xù)的學(xué)習(xí)是大有益處的。

知識結(jié)構(gòu)和知識類型之間概念上的實(shí)際差別意味著評估策略必須不同。盡管評估某個人的知識結(jié)構(gòu)的結(jié)構(gòu)化評估方法(SA)已經(jīng)廣泛應(yīng)用于計算機(jī)專業(yè)技能教育的研究之中,但結(jié)構(gòu)評估方法還是沒有作為課堂學(xué)習(xí)評估技術(shù)的主流。例如,在會計教育評估中,一些專家拒絕討論SA技術(shù)。這是由于他們對SA方法缺乏了解造成的。

本文主要研究SA工具是如何應(yīng)用于會計教育中知識結(jié)構(gòu)評估之中。目前已有一些商品化的SA軟件工具,它們都很容易使用,將其運(yùn)用于會計教學(xué)評估只需要作少量的二次開發(fā)。

二、 評估知識結(jié)構(gòu)

學(xué)生的專業(yè)知識結(jié)構(gòu)的發(fā)展可以近似地認(rèn)為要經(jīng)過一系列的階段,知識低級形式的認(rèn)識是知識結(jié)構(gòu)的基礎(chǔ),也是過渡到高級形式的必要條件。說明性的知識主要是關(guān)于人、地點(diǎn)和事物的口頭信息或事實(shí),是知識認(rèn)識的早期階段。在達(dá)到學(xué)習(xí)的初始所需要的說明性知識起點(diǎn)水平之后,學(xué)習(xí)者就開始集中于程序性知識的學(xué)習(xí),程序性的知識由一系列在具體結(jié)果中所產(chǎn)生的動作序列組成。程序性的知識可以從簡單(計算)到復(fù)雜(決策分析)。隨著時間的消耗,說明性知識和程序性知識的認(rèn)識與記憶體中的知識關(guān)聯(lián)在一起。這種知識形成的特性為評估知識結(jié)構(gòu)提供了基礎(chǔ),為區(qū)分專家和初學(xué)者的表現(xiàn)提供了識別的手段。

為了揭示一個人的知識結(jié)構(gòu),最接近SA方法進(jìn)行了以下三步的過程:

一是獲得某人的概念關(guān)系的判斷;

二是將這些判斷當(dāng)作知識結(jié)構(gòu)的表示;

三是通過與參考知識結(jié)構(gòu)或“黃金標(biāo)準(zhǔn)”(也就是該領(lǐng)域?qū)＜业闹R結(jié)構(gòu))進(jìn)行對比來評估所得到的知識結(jié)構(gòu)。

關(guān)于獲得概念關(guān)系的技術(shù)包括概念映射技術(shù)、單詞關(guān)聯(lián)技術(shù)、有序回憶、卡片排序過程、對半比較和有序技術(shù)等。在得出結(jié)果之后,這些數(shù)據(jù)通常要經(jīng)過提煉處理,如進(jìn)行聚類分析、共性相關(guān)分析或多維定量分析。從這些方法所導(dǎo)出的知識表示還要進(jìn)行交叉學(xué)科的比較,與參考標(biāo)準(zhǔn)進(jìn)行對照,用來評估每一個學(xué)生的知識結(jié)構(gòu)的質(zhì)量。

筆者開發(fā)了一個自包含集合的計算機(jī)軟件,通過人機(jī)界面或智能化自動獲取學(xué)生所掌握的知識,為評估知識結(jié)構(gòu)提供良好的手段。教師當(dāng)然可以應(yīng)用對半比較,得到概念表中所有可能概念的相似判斷,用來判別其知識的領(lǐng)域。筆者應(yīng)用的評估方法與傳統(tǒng)方法有所不同,其評估電腦算法是基于知識的網(wǎng)絡(luò)表示。算法是將人們概念關(guān)系的判斷(如相同判斷的比較對的集合)轉(zhuǎn)換成將概念表示成結(jié)點(diǎn)的結(jié)構(gòu)。筆者應(yīng)用的路徑尋找技術(shù)是一個基于知識的網(wǎng)絡(luò)表示的量化算法。這個方法將學(xué)生頭腦中的概念關(guān)系判斷(如:相似判斷的“比較對”的集合)轉(zhuǎn)換成計算機(jī)能夠識別的網(wǎng)絡(luò)結(jié)構(gòu)模型:概念表示成結(jié)點(diǎn),聯(lián)系表示成網(wǎng)絡(luò)中兩個結(jié)點(diǎn)之間的距離。與其它評估方法相比,網(wǎng)絡(luò)結(jié)構(gòu)能夠描述組成學(xué)生知識結(jié)構(gòu)概念中更為復(fù)雜的關(guān)系。圖1說明了一個學(xué)生在管理會計中所掌握的概念的網(wǎng)絡(luò)表示。在這種表示中,相似的概念表示為相互連接的結(jié)點(diǎn),既可表示它們的關(guān)系,又可表示它們之間相差的距離。

為了評估某個人的知識結(jié)構(gòu)的質(zhì)量,路徑尋找技術(shù)提供了比較兩個網(wǎng)絡(luò)結(jié)構(gòu)的方法,如學(xué)生的知識結(jié)構(gòu)和教師的知識結(jié)構(gòu)。路徑尋找技術(shù)應(yīng)用一個稱之為“C”的量值,C值表示兩個網(wǎng)絡(luò)之間共同連接數(shù)和總連數(shù)的比率。對任意兩個網(wǎng)絡(luò),C是從0到1之間的變化,C值為“0”意味著兩個網(wǎng)絡(luò)間沒有聯(lián)系,而“1”說明兩個網(wǎng)絡(luò)有相同的結(jié)構(gòu)。很顯然,C值能夠說明教師和學(xué)生之間的知識結(jié)構(gòu)的差別,C值越高就意味著師生之間網(wǎng)絡(luò)越一致,學(xué)生也就越具有良好的知識結(jié)構(gòu)。

三、 路徑尋找技術(shù)在教室中測試的應(yīng)用

筆者認(rèn)為,路徑尋找技術(shù)是教學(xué)評估或?qū)W習(xí)評估的有效手段,不論是在會計學(xué)教學(xué)中還是計算機(jī)科學(xué)以及其他的教學(xué)中,都能有很好地應(yīng)用。筆者在兩門會計課程中證實(shí)了路徑尋找技術(shù)的有效性,主要從以下兩個方面進(jìn)行了研究:

一是知識結(jié)構(gòu)的C值評定能夠改善相關(guān)教學(xué)環(huán)境嗎?

二是C值與傳統(tǒng)的學(xué)生知識評估方法,也就是考試成績之間有怎樣的相關(guān)程度?

在教學(xué)評估中,C值的真實(shí)性取決于它的判別函數(shù)的有效性。因此筆者著手解決下面問題:C值在會計教學(xué)中的預(yù)測性能是否優(yōu)于或超過傳統(tǒng)的評價方法?

(一) 實(shí)例

筆者對廣東商學(xué)院會計學(xué)本科生進(jìn)行實(shí)驗(yàn),針對他們學(xué)習(xí)的管理會計、審計和其它非會計課程應(yīng)用路徑尋找技術(shù)進(jìn)行測試。首先,我們對學(xué)習(xí)管理會計的學(xué)生(n=56)進(jìn)行學(xué)前預(yù)考和學(xué)后結(jié)業(yè)考試,評價學(xué)生的知識結(jié)構(gòu)是否發(fā)生了改變。然后進(jìn)行比較研究,對學(xué)習(xí)了審計的學(xué)生(n=54)的知識結(jié)構(gòu)與未學(xué)會計專業(yè)課的學(xué)生(n=51)的知識結(jié)構(gòu)進(jìn)行比較研究。

(二) 方法

用下列方法進(jìn)行評價:

1.知識結(jié)構(gòu)。每一科目的C分值用于反映知識結(jié)構(gòu)的質(zhì)量。由于C值表示的是兩個網(wǎng)絡(luò)結(jié)構(gòu)之間的相互關(guān)系,在筆者的研究中以教師自己的知識結(jié)構(gòu)作為參照標(biāo)準(zhǔn)。

2.說明性的知識。學(xué)生常規(guī)考試中所得的分?jǐn)?shù)表示說明性知識的評價方法?？荚囍饕啥囗?xiàng)選擇和幾個問答與簡述所組成。

3.案例成績。要求學(xué)生對某個工業(yè)企業(yè)作一個財務(wù)管理咨詢,撰寫咨詢報告,對其進(jìn)行評分,以此作為成績的評定依據(jù)。考察報告中分析的徹底性、溝通能力、建議的創(chuàng)造性可以比較準(zhǔn)確地評價學(xué)生的報告。

4.對審計任務(wù)的自我效能、學(xué)生的自我效能的評價。筆者收集了幾個審計實(shí)例。自我效能指人們對自己是否能夠成功地進(jìn)行某一成就行為的主觀判斷,在這里可以認(rèn)為是學(xué)生需要達(dá)到指定成績類型而組織、執(zhí)行相關(guān)課程學(xué)習(xí)的判斷。通過對161名學(xué)生的全面分解,可以發(fā)現(xiàn)自我效能與成績之間有很大的相互關(guān)系。因此筆者為審計任務(wù)構(gòu)建了一套三級的自我效能的評價,科目表示他們的信用等級(從沒用信用“0”到完全信用“100”)在成功完成審計任務(wù),包括風(fēng)險評價、內(nèi)部控制評估和審計過程的設(shè)計。

(三) 過程

生成C值的過程對所有實(shí)例都是相同的。

第一步,教師對每一門會計課程提供與特定的教學(xué)順序相關(guān)的概念列表(例如,收益和現(xiàn)金流量分析)。

第二步,創(chuàng)造兩個文本文件,第一個包含與整個比較對相關(guān)的概念列表,第二個包含在評價會話開始時呈現(xiàn)在屏幕上的給學(xué)生的指令表。

第三步,引導(dǎo)學(xué)生進(jìn)行評價人機(jī)對話,建立起學(xué)生的個人知識結(jié)構(gòu)網(wǎng)絡(luò)。記錄評價程序和兩個數(shù)據(jù)文件,應(yīng)用于計算機(jī)實(shí)驗(yàn)室。學(xué)生執(zhí)行評價程序進(jìn)行評價人機(jī)對話,訪問概念文件、隨機(jī)生成概念對,再每一次提示學(xué)生評價一個對之間的關(guān)系。課程教師完成同樣的評價任務(wù)以創(chuàng)建一個“參考或標(biāo)準(zhǔn)”的知識結(jié)構(gòu)網(wǎng)絡(luò)。將這個過程所建立的數(shù)據(jù)運(yùn)用路徑尋找軟件自動轉(zhuǎn)換成數(shù)據(jù)矩陣,并保存為近似的數(shù)據(jù)文件。

第四步,評估一個學(xué)生的知識結(jié)構(gòu)的質(zhì)量,只要運(yùn)用路徑尋找軟件中的相關(guān)模塊計算教師和學(xué)生的兩個近似數(shù)據(jù)文件之間的相關(guān)性(C值)即可。在筆者的實(shí)驗(yàn)中,通過學(xué)生人機(jī)會話生成學(xué)生的近似數(shù)據(jù)文件,使用路徑尋找軟件參照教師的“標(biāo)準(zhǔn)”知識結(jié)構(gòu)文件,評價學(xué)生知識結(jié)構(gòu)的水平。

最后,由路徑尋找軟件生成與圖1中類似的學(xué)生知識結(jié)構(gòu)的物理表示,它可用于對學(xué)生知識結(jié)構(gòu)的質(zhì)量評估。

四、 結(jié)果

(一) 管理會計

筆者通過實(shí)驗(yàn),獲得了教育前和教育后的C值,如表1所示。在表中可以看到,教育前到教育后的C分值在統(tǒng)計意義上有了增加(0.22對0.37;t=6.5 P<0.001)。另外,教育后的C評估肯定與考試成績(r=0.5; P<0.01)和案例分析成績(r=0.47; P<0.01)相關(guān)。為了檢測其有效性,筆者對管理會計基于學(xué)生的考試分?jǐn)?shù)和學(xué)生的C分值進(jìn)行了回歸分析?？荚嚪?jǐn)?shù)和學(xué)生的C分值估算回歸系數(shù)是非常重要的,它表明這兩個預(yù)測值在案例成績分析中有很大的變化。

總而言之,從實(shí)驗(yàn)中獲得的數(shù)據(jù)揭示了路徑尋找技術(shù)的幾個重要的性質(zhì)。1. C的分值因教育而得到了改進(jìn),C的分值與傳統(tǒng)的課堂評價方法(也就是多重選擇的測試方法)相關(guān)。2. 就案例分析成績來說,C值提供了漸進(jìn)式的預(yù)測,好于傳統(tǒng)的考試分?jǐn)?shù)。最后一個,也是最關(guān)鍵的,路徑尋找技術(shù)能夠捕獲獨(dú)特知識結(jié)構(gòu)。

(二) 審計課程

對審計課程和非會計課程的平均C分值(教育后)進(jìn)行比較,其學(xué)生的會計知識結(jié)構(gòu)質(zhì)量有很大的不同(0.41對0.07;t=18.3,P<0.01)。這也與管理會計案例的結(jié)果一致,C分值與考試成績是正相關(guān)的(r=0.31;P<0.05)。而且,在審計案例中的每一次評估與審計任務(wù)自身效能的相關(guān)度都是有差別的。然而,C值對審計任務(wù)的自我效能是正相關(guān)的(r=0.28;P<0.06),考試分?jǐn)?shù)幾乎不能預(yù)測審計任務(wù)的自我效能(r=0.04;P>0.25)?？偠灾?從審計案例所獲得的數(shù)據(jù)表明,路徑尋找技術(shù)評估方法與傳統(tǒng)的評估方案是能夠相互補(bǔ)充的。同時,C分值和考試分?jǐn)?shù)與自身效果的相關(guān)度還是有差別的,筆者建議選擇特別的知識類型來識別。

五、 討論

(一) 對傳統(tǒng)評價方法的補(bǔ)充

在會計教育的專題討論中,有些學(xué)者強(qiáng)調(diào)培養(yǎng)“技術(shù)問題的解決者”,幫助學(xué)生變成“訓(xùn)練有素、富有創(chuàng)造性的問題解決者”。知識結(jié)構(gòu)被認(rèn)為是會計課程對達(dá)到該轉(zhuǎn)換所必須的一個度量,可以幫助會計教學(xué)工作者開發(fā)改進(jìn)學(xué)生的知識結(jié)構(gòu)的方法,并評價這種方法的有效性,本文論證了以路徑尋找技術(shù)來評價學(xué)生的知識結(jié)構(gòu)的可行性。該技術(shù)為學(xué)生的知識結(jié)構(gòu)提供了啟發(fā),可根據(jù)某個標(biāo)準(zhǔn)或被采用的結(jié)構(gòu)進(jìn)行知識結(jié)構(gòu)的評估。

結(jié)果證明路徑尋找方法的C值因知識結(jié)構(gòu)的呈現(xiàn)而改進(jìn),與其它學(xué)習(xí)評估方法相關(guān),能夠與考試成績相關(guān)聯(lián)。路徑尋找技術(shù)對課堂評價是非常實(shí)用的,它能提供關(guān)于學(xué)生學(xué)習(xí)獨(dú)特性的信息以及特別學(xué)生的會計知識結(jié)構(gòu)。

(二)使用路徑尋找工具作為一個課評價技術(shù)

Harwood and Cohen早在1999年就確定了評價的四種類型:效果評價、課堂評做、等級分配與考試、課堂環(huán)境的控制。結(jié)構(gòu)評價(SA)屬于等級分類方法,或說一種課堂評價技術(shù)。筆者認(rèn)為使用路徑尋找技術(shù)不是一種分等活動,因?yàn)榘袰值評分作為課程評分等級是非常困難的。因此,筆者相信路徑尋找技術(shù)是比較好的用于課程評價技術(shù)(CAT),經(jīng)常用來小規(guī)模評價學(xué)生的在課堂上的學(xué)習(xí)情況。CAT不分等,但能夠評估他或好的教學(xué)方法的有效性。

CAT技術(shù)能夠提供教師和學(xué)生的反饋,說明學(xué)生進(jìn)入了更深一步的學(xué)習(xí)狀態(tài),而不是簡單記憶事實(shí)與步驟。路徑尋找技術(shù)也能提供學(xué)生知識的物理表示,這是矯正和改進(jìn)努力的有價值信息的來源。例如:學(xué)生和教師能夠共同檢查學(xué)生知識的表示,找出需要糾正的差距和不足。同樣,學(xué)生可按組各自進(jìn)行分析。

六、結(jié)束語

路徑尋找技術(shù)作為一個CAT,也有一些不足。如果評價一個知識結(jié)構(gòu)只是源于20多個概念,就需要作190(N×(N-1)/2)條件的判斷。當(dāng)概念增加時,需要判斷的數(shù)目就會變得難以想象。然而,筆者通過研究發(fā)現(xiàn),只要應(yīng)用10個左右的概念,就不會影響結(jié)果的有效性。

由該技術(shù)提供的數(shù)據(jù)能夠增強(qiáng)與專業(yè)實(shí)踐相關(guān)的學(xué)習(xí)效果的預(yù)測。很顯然,知識結(jié)構(gòu)評估與涉及的具體領(lǐng)域和各自的能力有關(guān)。從這種評估方法的收斂、可識別和預(yù)測效果來看,這種結(jié)構(gòu)化評估方法能夠提供關(guān)于教學(xué)效果方面的有價值的反饋信息。

雖然路徑尋找技術(shù)不太適合于等級劃分或考試,但非常適合用作課堂評價的工具。如果要對認(rèn)知科學(xué)和會計學(xué)教學(xué)進(jìn)行深入研究,更好地提升學(xué)生的專業(yè)知識與技能,結(jié)構(gòu)化評價肯定會得到教師越來越多的關(guān)注。●

【主要參考文獻(xiàn)】

[1] 王壘. The Structure and Measurement of Self-efficacy [J]. 北京大學(xué)學(xué)報(自然科學(xué)版),1999,(5):415-420.

[2] Mary B. Curtis, Mark A. Davis. Assessing knowledge structure in accounting [J]. Journal of Accounting Education, 2005,(21):185-195.

[3] Harwood, E. M., and Cohen, J. R.. Classroom assessment: educational and research opportunities. JournalofAccounting Education [J]. 1999,(4):691-724.

[4] Booth, P., Luckett, P., and Mladenovic, R.The quality of learning in accounting education: the impact of approaches to learning on academic performance [J]. Accounting Education, 1999, (8):277-300.

[5] Choo, F., and Curtis, M. B.. Structural assessment in accounting research [J]. Journal of AccountingLiterature,2000,(19): 131-157.