鄭 爽
(河南師范大學(xué)圖書館,河南 新鄉(xiāng) 453007)
概念地圖(concept map)最早是在上世紀(jì)60年代初由美國(guó)康奈爾大學(xué)諾瓦克(J.D.Novak)教授提出的一種教學(xué)工具。[1]歷經(jīng)不斷研究和發(fā)展,概念地圖被擴(kuò)展為針對(duì)特定主題的結(jié)構(gòu)化知識(shí)的一種圖示方法,是一種功能強(qiáng)大的知識(shí)組織工具。近年來,我國(guó)學(xué)者也對(duì)概念地圖進(jìn)行了研究,但絕大部分研究成果產(chǎn)生在2005年以后,研究?jī)?nèi)容主要涉及概念地圖的基礎(chǔ)理論和應(yīng)用研究。由于概念地圖本身就是一種實(shí)用的知識(shí)組織工具,因此,對(duì)概念地圖的應(yīng)用研究則是我國(guó)該研究領(lǐng)域的重點(diǎn)。筆者從逐年文獻(xiàn)發(fā)表數(shù)量、被引用情況、研究?jī)?nèi)容、來源狀況、作者分布狀況以及對(duì)該領(lǐng)域的資助狀況等方面,對(duì)2001年以來概念地圖的研究進(jìn)行了較為詳細(xì)的計(jì)量分析,全面、詳盡地揭示該領(lǐng)域的研究現(xiàn)狀與趨勢(shì)。
筆者檢索的數(shù)據(jù)庫(kù)為中國(guó)知網(wǎng)(CNKI)數(shù)據(jù)庫(kù)學(xué)術(shù)文獻(xiàn)總庫(kù),在字段“主題”中輸入“概念地圖”,選擇的時(shí)間段是從2001年1月1日到2010年12月31日,檢索結(jié)果返回97條記錄。通過對(duì)這97篇文獻(xiàn)逐一進(jìn)行查重、篩選,排除與本課題無關(guān)文獻(xiàn),得到論文85篇作為本研究的數(shù)據(jù)樣本。再通過Excel和CNKI提供的分組分析工具對(duì)其進(jìn)行統(tǒng)計(jì)分析,以便做進(jìn)一步相關(guān)研究。
從2001到2010年每年發(fā)表的該研究領(lǐng)域的文獻(xiàn)如圖1所示。
從圖1可以看出,該領(lǐng)域歷年發(fā)表的文獻(xiàn)數(shù)量呈波浪形。2001年、2002年各有1篇論文內(nèi)容涉及“概念地圖”。2003年增加到了5篇,內(nèi)容與“概念地圖”相關(guān)度較低,大多作為其他學(xué)科研究的輔助工具出現(xiàn)。2004年更多學(xué)者發(fā)現(xiàn)并重視“概念地圖”的工具價(jià)值,開始對(duì)其進(jìn)行本體研究,如江西師范大學(xué)鐘志賢在“中國(guó)電化教育”上發(fā)表的《作為學(xué)習(xí)工具的概念地圖》,詳細(xì)介紹了“概念地圖”的理論基礎(chǔ),以及在學(xué)習(xí)中的意義及應(yīng)用。2006年該領(lǐng)域的研究論文增加到了12篇。在2006年,武漢大學(xué)的馬費(fèi)成教授、郝金星博士在《中國(guó)圖書館學(xué)報(bào)》上發(fā)表了系列關(guān)于概念地圖的論文,這些成果是其國(guó)家社科基金項(xiàng)目“基于IRM及KM范式下的情報(bào)學(xué)發(fā)展模式研究”(項(xiàng)目編號(hào):03BTQ012)的部分研究成果。此系列研究成果對(duì)我國(guó)在該領(lǐng)域的研究起到了極大的推進(jìn)作用。在2007年,本領(lǐng)域的文獻(xiàn)量達(dá)到了20篇,以后幾年發(fā)表的文獻(xiàn)量也都在10篇左右浮動(dòng)。這說明部分學(xué)者對(duì)“概念地圖”的研究熱情不減。
圖1 2001到2010年概念地圖文獻(xiàn)歷年發(fā)表數(shù)量
被引用頻次的分析可以很好地了解該領(lǐng)域的重點(diǎn)文獻(xiàn)以及研究的成熟度。CNKI的數(shù)據(jù)顯示,在這85篇文獻(xiàn)當(dāng)中被引用次數(shù)超過10次的有13篇文獻(xiàn),鐘志賢等的《作為學(xué)習(xí)工具的概念地圖》引用頻次高達(dá)58次,再有就是馬費(fèi)成和郝金星的《概念地圖在知識(shí)表示和知識(shí)評(píng)價(jià)中的應(yīng)用(Ⅰ)——概念地圖的基本內(nèi)涵》,其引用次數(shù)為27次,其下載次數(shù)達(dá)到了600次。馬耀峰發(fā)表在《地球信息科學(xué)》上的《不同學(xué)科概念地圖研究的反思》,被引用次數(shù)達(dá)到15次。
被引用頻次為2~9次的有25篇文獻(xiàn),其中包括馬費(fèi)成和郝金星的《概念地圖及其結(jié)構(gòu)分析在知識(shí)評(píng)價(jià)中的應(yīng)用(Ⅲ):實(shí)證研究》(8次)和《概念地圖在知識(shí)表示與知識(shí)評(píng)價(jià)中的應(yīng)用(Ⅱ)——概念地圖作為知識(shí)評(píng)價(jià)的工具及其研究框架》(8次)。有16篇文獻(xiàn)被引用1次,其余文獻(xiàn)未被引用。
這里的學(xué)科是指廣義上的學(xué)科,不是嚴(yán)格意義上的學(xué)科。通過CNKI的“學(xué)科類別”分析,這85篇文獻(xiàn)分布于25個(gè)學(xué)科。文獻(xiàn)數(shù)量排名前三的學(xué)科超過了10篇,其中教育理論與教育管理為24篇,計(jì)算機(jī)軟件及計(jì)算機(jī)應(yīng)用為22篇,圖書情報(bào)與數(shù)字圖書館為10篇。另外有13個(gè)學(xué)科的文獻(xiàn)量超過了兩篇,其余9篇文獻(xiàn)分布在9個(gè)學(xué)科中,每個(gè)學(xué)科僅為1篇。
從中可以看到,概念地圖這一主題的學(xué)科分布比較分散,在計(jì)算機(jī)、教育以及圖書情報(bào)等學(xué)科有較多研究。由于概念地圖是一個(gè)知識(shí)組織的工具,而概念地圖在這些學(xué)科的應(yīng)用比較多,因而產(chǎn)生了較多文獻(xiàn)。
根據(jù)我們的統(tǒng)計(jì),這85篇文章共由58位作者所寫,其中單個(gè)(合作)作者發(fā)表論文數(shù)量最多的有3篇。武漢大學(xué)的馬費(fèi)成及其博士生郝金星在《中國(guó)圖書館學(xué)報(bào)》上面共同發(fā)表了3篇;溫州大學(xué)的胡來林發(fā)表了3篇論文。發(fā)表兩篇文獻(xiàn)的作者有13位,其余42位作者只發(fā)表了一篇文章。
從文獻(xiàn)作者所在單位來看,這85篇論文的作者共來自于56個(gè)單位。發(fā)文量排名前5的單位分別是江西師范大學(xué)(11篇)、武漢大學(xué)(7篇)、華東師范大學(xué)(7篇)、溫州大學(xué)(4篇)、南京師范大學(xué)(3)。另有6個(gè)單位發(fā)表了兩篇文章,其余45個(gè)單位各發(fā)表了1篇文章。
由以上統(tǒng)計(jì)數(shù)據(jù)可以看出,在對(duì)概念地圖的研究過程中,作者的合作程度不高;在這個(gè)領(lǐng)域深入研究的作者和單位較少,絕大多數(shù)作者和單位都只發(fā)表了1篇論文。
分析文獻(xiàn)來源,可以看出文獻(xiàn)的集中與分散狀況。根據(jù)CNKI的統(tǒng)計(jì),這85篇文獻(xiàn)來源于54種期刊(或單位、論文集,因?yàn)檫@里面含有學(xué)位論文、會(huì)議論文)。其中文獻(xiàn)來源最多的刊物是《中國(guó)圖書館學(xué)報(bào)》(5篇),其次是華東師范大學(xué)(3篇學(xué)位論文)。另外,有11種期刊(或單位)的發(fā)文量為兩篇,其余文獻(xiàn)來源于41種期刊(或單位、論文集),各有1篇文獻(xiàn)。從以上統(tǒng)計(jì)分析可以看出,研究概念地圖的文獻(xiàn)來源廣泛,分布極為分散,這主要與其學(xué)科分布較廣有關(guān)。
筆者通過對(duì)這85篇文獻(xiàn)的分析,發(fā)現(xiàn)這些文獻(xiàn)的研究?jī)?nèi)容可以大致分為3個(gè)部分:理論研究、應(yīng)用研究以及總結(jié)性研究。
3.6.1 理論研究
從我們所掌握的這些文獻(xiàn)來看,對(duì)理論研究的文獻(xiàn)不多。其中,馬耀峰討論了生理學(xué)、教育心理學(xué)、規(guī)劃環(huán)境領(lǐng)域等不同學(xué)科關(guān)于主觀地圖(概念地圖為主觀地圖的一種類型)的研究,提出了客觀地圖和主觀地圖的概念,認(rèn)為主觀地圖在地圖學(xué)研究中被弱化和邊緣化了,主觀地圖研究應(yīng)成為地圖研究的重要內(nèi)容。認(rèn)為主觀地圖研究具有巨大的發(fā)展?jié)摿?。[2]楊謙在其碩士論文《主觀地圖分析研究》中指出,生理學(xué)與心理學(xué)家出于想搞清生物是如何表達(dá)對(duì)外部感知這一問題,推動(dòng)了認(rèn)知地圖、概念地圖等主觀地圖理論研究?;趯?duì)客觀地圖與主觀地圖的分析比較,他探討主觀地圖構(gòu)成要素和應(yīng)用前景。[3]焦中明和賴曉云具體介紹了概念地圖的繪制方法及建構(gòu)量規(guī),促進(jìn)使用者更好地理解概念地圖的知識(shí)組織形式,為概念地圖的自評(píng)與他評(píng)提供依據(jù)。[4]馬費(fèi)成和郝金星在綜合國(guó)外近幾十年研究成果的基礎(chǔ)上,論述概念地圖定義與組成要素、理論基礎(chǔ)、研究領(lǐng)域和相關(guān)研究,提出了概念地圖在知識(shí)管理領(lǐng)域的(潛在)應(yīng)用。[1]再加上他們?cè)凇吨袊?guó)圖書館學(xué)報(bào)》上發(fā)表的其他兩篇相關(guān)論文,對(duì)概念地圖進(jìn)行了精深的理論和實(shí)證研究,可謂我國(guó)在該領(lǐng)域的研究權(quán)威。
3.6.2 應(yīng)用研究
對(duì)概念地圖的應(yīng)用研究是我國(guó)學(xué)者的研究熱點(diǎn),這很好地體現(xiàn)了概念地圖這一知識(shí)組織工具的價(jià)值。概念地圖在應(yīng)用領(lǐng)域主要涉及教育、知識(shí)管理、圖書館以及機(jī)器人等方面。
3.6.2.1 教育領(lǐng)域的應(yīng)用
概念地圖在教育領(lǐng)域的運(yùn)用很多,主要用于:
第一,自學(xué)。和學(xué)仁在其碩士論文中,從剖析當(dāng)前自主學(xué)習(xí)設(shè)計(jì)理論與實(shí)踐中的問題入手,探討了導(dǎo)學(xué)—自主學(xué)習(xí)與協(xié)作學(xué)習(xí)內(nèi)涵、概念地圖工具的應(yīng)用及導(dǎo)學(xué)—自主學(xué)習(xí)理論指導(dǎo)下大學(xué)本科專業(yè)基礎(chǔ)課程教學(xué)設(shè)計(jì)問題。[5]鐘志賢與陳春生最早探討了概念地圖作為學(xué)習(xí)工具在學(xué)習(xí)中的意義和應(yīng)用,較為系統(tǒng)地論述了概念地圖的定義、構(gòu)成、特征、理論基礎(chǔ),并且介紹了概念地圖的模型以及制作方法,認(rèn)為概念地圖有助于發(fā)展學(xué)習(xí)者獨(dú)立學(xué)習(xí)和終生學(xué)習(xí)的能力。[6]
第二,教學(xué)。概念地圖用于教學(xué)方面的論文較多,比如用于英語教學(xué)、電路教學(xué)、物流教學(xué)、電子商務(wù)教學(xué)、漢語詞匯教學(xué)、幼兒園教學(xué)等。吳鑫園和劉省權(quán)在《概念地圖在計(jì)算機(jī)基礎(chǔ)教學(xué)中的應(yīng)用》中介紹了概念地圖的主要構(gòu)成要素及相關(guān)編制軟件;通過給出概念地圖在計(jì)算機(jī)基礎(chǔ)教學(xué)中的具體應(yīng)用案例,重點(diǎn)探討了概念地圖在計(jì)算機(jī)教學(xué)中所起的助教與助學(xué)兩方面的作用。[7]郭睿論述了“概念地圖”詞匯教學(xué)策略的理論基礎(chǔ)和現(xiàn)實(shí)依據(jù),在此基礎(chǔ)上提出了旨在擴(kuò)大詞匯量、提高詞匯掌握程度的“概念地圖”教學(xué)策略,并結(jié)合具體實(shí)例對(duì)該策略的操作步驟進(jìn)行了闡釋。[8]張文桂認(rèn)為教師應(yīng)運(yùn)用概念地圖,提供給幼兒充分觀察和動(dòng)手的機(jī)會(huì),遵循從易到難的漸進(jìn)原則,選擇恰當(dāng)?shù)慕虒W(xué)內(nèi)容,采用多種方式,幫助幼兒掌握概念之間的關(guān)系,從而拓展認(rèn)識(shí)。[9]河北師范大學(xué)的張麗平等人則對(duì)概念地圖的教學(xué)功能進(jìn)行了探討:認(rèn)為教學(xué)設(shè)計(jì)、教學(xué)優(yōu)化、教師發(fā)展是其作為教的功能;知識(shí)同化與整合、學(xué)生發(fā)展是其作為學(xué)的功能;概念地圖還能通過教與學(xué)的檢測(cè)發(fā)揮其評(píng)價(jià)功能。[10]此外,湖北大學(xué)的趙柏樹等人則論述了一種建立在建構(gòu)主義以及概念同化理論基礎(chǔ)之上的概念地圖教學(xué)模式,并對(duì)其操作程序以及應(yīng)用方法進(jìn)行了舉例說明。[11]
第三,優(yōu)化閱讀。汪李娟等把概念地圖引入閱讀課教學(xué),認(rèn)為概念地圖能夠促使學(xué)生建立起新知識(shí)與已有知識(shí)之間的聯(lián)系,引導(dǎo)學(xué)生思考,幫助學(xué)生理清文章的脈絡(luò),能使學(xué)生很好地掌握文章內(nèi)容,把握全文結(jié)構(gòu),促進(jìn)有意義的學(xué)習(xí)。[12]
第四,幫助兒童寫作。胡來林運(yùn)用實(shí)驗(yàn)研究法,對(duì)語音識(shí)別和概念地圖技術(shù)支持學(xué)習(xí)困難的學(xué)生寫作進(jìn)行了實(shí)證研究。其研究結(jié)果表明:在漢語環(huán)境下,概念地圖支持下的作文教學(xué)策略能為寫作困難的學(xué)生提供作文的多媒體環(huán)境并克服作文高水平加工的障礙,從而促進(jìn)寫作困難學(xué)生作文的長(zhǎng)度和質(zhì)量的改善。[13]
3.6.2.2 知識(shí)管理方面的應(yīng)用
概念地圖在知識(shí)管理方面的應(yīng)用研究也較多,有學(xué)者指出信息時(shí)代一種個(gè)人知識(shí)管理策略:分析個(gè)人對(duì)知識(shí)資源的需求、選擇合適的個(gè)人知識(shí)管理工具、建立自身的知識(shí)管理體系、維護(hù)個(gè)人知識(shí)管理體系、知識(shí)的使用與創(chuàng)新。[14]運(yùn)用概念地圖等個(gè)人知識(shí)管理軟件進(jìn)行個(gè)人知識(shí)的管理,學(xué)習(xí)者可以高效率地整合自己的知識(shí),促進(jìn)隱性知識(shí)向顯性知識(shí)的轉(zhuǎn)化,提高個(gè)人在社會(huì)和組織中的價(jià)值。[15]概念地圖能夠提供知識(shí)結(jié)構(gòu)的視覺表征。作為一種傳達(dá)知識(shí)的手段,概念地圖為文本語言提供了補(bǔ)充。[16]此外,概念地圖還可以作為知識(shí)評(píng)價(jià)的工具。[17]
3.6.2.3 其他領(lǐng)域的應(yīng)用
除了應(yīng)用較多的教育領(lǐng)域和知識(shí)管理領(lǐng)域,概念地圖在項(xiàng)目管理中[18]、在圖書館[19]、在機(jī)器人技術(shù)等方面都有應(yīng)用。錢堃針對(duì)服務(wù)機(jī)器人提出一種環(huán)境概念地圖模型,利用該概念地圖模型,提出了一種在大規(guī)模室內(nèi)環(huán)境下的拓?fù)渑c柵格分層導(dǎo)航策略,即通過地圖切換技術(shù)維持在小尺度地圖范圍內(nèi)進(jìn)行Monte Carlo定位及柵格路徑規(guī)劃。在較大規(guī)模室內(nèi)環(huán)境下的導(dǎo)航實(shí)驗(yàn)結(jié)果驗(yàn)證了機(jī)器人定位導(dǎo)航具有良好的性能和效率,實(shí)現(xiàn)了一種機(jī)器人的語義導(dǎo)航方式。[20]
3.6.3 總結(jié)性研究
在我們所掌握的85篇論文中,有3篇論文從某種角度或者時(shí)間段總體介紹了該領(lǐng)域的研究狀況。林曉華等從本體、概念地圖等目前研究熱點(diǎn),分析總結(jié)了當(dāng)前情報(bào)檢索語言的功能與發(fā)展趨勢(shì)。[21]廖宇峰將知識(shí)地圖分為概念知識(shí)地圖(教育概念地圖、音樂概念地圖)、流程知識(shí)地圖、職稱型知識(shí)地圖,并探討了概念知識(shí)地圖的作用。[22]此外,姜曉曦介紹了2007年概念地圖等10個(gè)方面在國(guó)外信息組織方法與技術(shù)的研究進(jìn)展。2007年,學(xué)者們通過研究證實(shí)了概念地圖的重要性及其在e-learning環(huán)境下的有效應(yīng)用。概念地圖可以向人們展示某個(gè)學(xué)科的整體構(gòu)圖和核心知識(shí)。加拿大Chen Nianshing等學(xué)者以學(xué)術(shù)文章為研究點(diǎn),利用數(shù)據(jù)挖掘技術(shù),實(shí)現(xiàn)了自動(dòng)構(gòu)建e-learning領(lǐng)域的概念地圖。他們用期刊論文和會(huì)議資料作為來源數(shù)據(jù),分析e-learning領(lǐng)域中概念間的相互關(guān)系,使學(xué)習(xí)者可以看見該領(lǐng)域的整個(gè)結(jié)構(gòu),了解該領(lǐng)域哪些知識(shí)是重要的。此外,該方法研制出的概念地圖可以顯示出概念間的“關(guān)系強(qiáng)度”,當(dāng)學(xué)習(xí)者研究一個(gè)領(lǐng)域問題的時(shí)候,“關(guān)系強(qiáng)度”可以引導(dǎo)學(xué)習(xí)者了解與當(dāng)前研究領(lǐng)域相關(guān)的其他領(lǐng)域內(nèi)容。[23]
對(duì)概念地圖的研究起源于國(guó)外,我國(guó)學(xué)者在21世紀(jì)后才著手研究。但對(duì)概念地圖的研究主要局限于應(yīng)用,理論研究較少,系統(tǒng)地介紹國(guó)外研究狀況的文章不多,研究深度還有待于加強(qiáng);在該領(lǐng)域的合作研究較少,這不利于研究深度的提升和內(nèi)容的充實(shí);多數(shù)學(xué)者只是在該領(lǐng)域發(fā)表了一篇文章,在該領(lǐng)域產(chǎn)生影響的學(xué)者屈指可數(shù)。在信息技術(shù)對(duì)知識(shí)組織的影響越來越重要的情況下,如何更好地利用信息技術(shù)擴(kuò)展概念地圖的應(yīng)用領(lǐng)域?qū)⑹歉拍畹貓D的研究趨勢(shì)。
[1] 馬費(fèi)成,郝金星.概念地圖在知識(shí)表示和知識(shí)評(píng)價(jià)中的應(yīng)用(I)——概念地圖的基本內(nèi)涵[J].中國(guó)圖書館學(xué)報(bào),2006(3):5-9,49.
[2] 馬耀峰.不同學(xué)科概念地圖研究的反思[J].地球信息科學(xué),2005(2):12-16,64.
[3] 楊謙.主觀地圖分析研究[D].長(zhǎng)安大學(xué),2007.
[4] 焦中明,賴曉云.概念地圖繪制及其建構(gòu)量規(guī)[J].贛南師范學(xué)院學(xué)報(bào),2005(6):70-72.
[5] 和學(xué)仁.基于概念地圖原理的《電聲原理與技術(shù)》導(dǎo)學(xué)——自主學(xué)習(xí)教學(xué)設(shè)計(jì)研究[D].云南師范大學(xué),2007.
[6] 鐘志賢,陳春生.作為學(xué)習(xí)工具的概念地圖[J].中國(guó)電化教育,2004(204):23-27.
[7] 吳鑫園,劉省權(quán).概念地圖在計(jì)算機(jī)基礎(chǔ)教學(xué)中的應(yīng)用[J].計(jì)算機(jī)時(shí)代,2009(8):59-61.
[8] 郭睿.論中級(jí)漢語詞匯教學(xué)的“概念地圖”策略[J].語言教學(xué)與研究,2010(3):23-28.
[9] 張文桂.概念地圖在幼兒園教學(xué)中的運(yùn)用[J].學(xué)前教育研究,2007(7-8):61-63.
[10] 張麗平,劉建軍.概念圖及其教學(xué)功能探究[J].理工高教研究,2006(4):103-104.
[11] 趙柏樹,顧豪爽.基于概念地圖的教學(xué)模式構(gòu)建[J].電氣電子教學(xué)學(xué)報(bào),2008(5):87-90.
[12] 汪李娟,高瓊.運(yùn)用概念地圖優(yōu)化閱讀教學(xué)質(zhì)量[J].科技信息,2009(32):383-384.
[13] 胡來林.語音識(shí)別和概念地圖技術(shù)支持寫作困難學(xué)生寫作的實(shí)驗(yàn)研究[D].華東師范大學(xué),2007.
[14] 趙紅斌,方芳,謝勵(lì).信息時(shí)代的個(gè)人知識(shí)管理策略探索[J].科技情報(bào)開發(fā)與經(jīng)濟(jì),2008(11):101-102.
[15] 姜利華.基于網(wǎng)絡(luò)的個(gè)人知識(shí)管理工具[J].圖書館學(xué)研究,2007(2):58-60.
[16] 賴曉濤,任茵.概念地圖在知識(shí)管理中的作用[J].贛南師范學(xué)院學(xué)報(bào),2005(6):73-75.
[17] 馬費(fèi)成,郝金星.概念地圖在知識(shí)表示與知識(shí)評(píng)價(jià)中的應(yīng)用(Ⅱ)——概念地圖作為知識(shí)評(píng)價(jià)的工具及其研究框架[J].中國(guó)圖書館學(xué)報(bào),2006(4):22-27.
[18] 張于濤.項(xiàng)目協(xié)作知識(shí)流模型構(gòu)建探析[J].現(xiàn)代商貿(mào)工業(yè),2009(14):60-61.
[19] 侯君潔.知識(shí)可視化在圖書館領(lǐng)域的應(yīng)用前景展望[J].科技情報(bào)開發(fā)與經(jīng)濟(jì),2009(31):3-5.
[20] 錢堃,馬旭東,戴先中.基于概念地圖的機(jī)器人導(dǎo)航方法[J].東南大學(xué)學(xué)報(bào):自然科學(xué)版,2010(9):144-148.
[21] 林曉華,林丹紅,鐘伶.情報(bào)檢索語言的功能與發(fā)展趨勢(shì)[J].情報(bào)探索,2010(2):75-77.
[22] 廖宇峰.國(guó)外知識(shí)地圖研究現(xiàn)狀和展望[J].新世紀(jì)圖書館,2009(3):80-83.
[23] 曉曦.2007年國(guó)外信息組織方法與技術(shù)研究進(jìn)展述評(píng)[J].圖書館建設(shè),2009(1):14-18,23.