排名過程中爭(zhēng)議更大的是同行評(píng)議,即由某一領(lǐng)域的專家來對(duì)某大學(xué)的這一領(lǐng)域的學(xué)術(shù)研究成就進(jìn)行評(píng)價(jià)。比如在THES排行榜中,40%的打分是根據(jù)全球3700多名專家的意見來確定的,而跨國企業(yè)的研究者的意見僅占10%。對(duì)此,荷蘭萊頓大學(xué)科學(xué)技術(shù)研究中心(center for science and technology studies,簡稱 CWTS)曾作過一項(xiàng)研究,首先以論文引用率(一個(gè)國際公認(rèn)的影響因子評(píng)價(jià)方式)為基礎(chǔ),對(duì)各大學(xué)進(jìn)行分析,再將評(píng)論者的判斷和他們自己的分析進(jìn)行比較,結(jié)果顯示上述兩者之間的打分沒有必然的聯(lián)系,也就是說這樣劃分兩者的比重沒有任何根據(jù)。CWTS的主任Anthony Van Raan 在2005年的一篇文章中寫道:“這項(xiàng)研究的結(jié)果足以對(duì)THES的排名研究產(chǎn)生嚴(yán)重質(zhì)疑?!?/div>
對(duì)于同行評(píng)議,在《美新》今年的排名中也是爭(zhēng)論的焦點(diǎn)。參與了今年抵制該排行榜調(diào)查的華盛頓三一大學(xué)(Trinity University)的校長Patricia McGuire表示:“在評(píng)分時(shí),我們收到了一張有幾百個(gè)大學(xué)的列表,但只有從1分到5分的評(píng)定等級(jí),這樣做是非?;闹嚨?。這樣的排名不能評(píng)估出三一大學(xué)的真正優(yōu)勢(shì)所在,因?yàn)槲覀冎饕菫榈褪杖肷贁?shù)民族婦女提供學(xué)習(xí)機(jī)會(huì)?!?/div>
排名者的解釋
ARWU作為第一個(gè)多指標(biāo)的全球性大學(xué)排名,自發(fā)布以來,它的學(xué)術(shù)排名受到了各國的重視,卻也不斷受到質(zhì)疑或被誤讀。比如,該排行榜只排前100名,100名后就不具體排名了,而只是50所或100所大學(xué)分成一組,每一組內(nèi)的大學(xué)均按照校名字母進(jìn)行排序。而國內(nèi)一些媒體對(duì)部分大學(xué)的名次進(jìn)行了錯(cuò)誤的解讀和比較。有媒體在報(bào)道今年的最新排名時(shí)認(rèn)為清華、北大分列第167名和第228名。
面對(duì)非議,記者聯(lián)系到ARWU的負(fù)責(zé)人、上海交大高教所所長劉念才,得到的答復(fù)是,拒絕接受任何媒體采訪。劉念才稱,他們已經(jīng)就此發(fā)表了《上海交通大學(xué)高等教育研究所關(guān)于“世界大學(xué)學(xué)術(shù)排名”的聲明》,對(duì)該排名的的說明都已體現(xiàn)在聲明中。
有意思的是,記者在上海交大高教所的網(wǎng)站首頁上看到了這份發(fā)表于9月1日的的聲明,內(nèi)容雖然不完全針對(duì)《科學(xué)》,也沒有提到該雜志,但為什么在此時(shí)發(fā)表,劉念才也拒絕回答。
聲明提到:任何大學(xué)排名都是有爭(zhēng)議的,ARWU也不例外,它體現(xiàn)的僅僅是看待大學(xué)國際地位的一種視角。由于ARWU主要關(guān)注的是大學(xué)的科研成果和學(xué)術(shù)表現(xiàn),因此指標(biāo)體系中有關(guān)人才培養(yǎng)的分量較輕,也不包括大學(xué)對(duì)社會(huì)的服務(wù)等內(nèi)容。 ARWU排名指標(biāo)中對(duì)人文社會(huì)科學(xué)等學(xué)科的體現(xiàn)不夠,發(fā)表論文等部分指標(biāo)對(duì)英語國家較有利,人均表現(xiàn)的權(quán)重較低。事實(shí)上,交大高教所一直針對(duì)ARWU的不足進(jìn)行著深入的學(xué)術(shù)研究,并不斷努力改進(jìn)。
劉念才同時(shí)推薦記者閱讀他于2005年8月發(fā)表在《清華大學(xué)教育研究》上的論文《世界大學(xué)學(xué)術(shù)排名的現(xiàn)狀與未來》。其中也提到,在統(tǒng)計(jì)獎(jiǎng)項(xiàng)的過程中,有的人獲獎(jiǎng)時(shí)所在大學(xué)并非進(jìn)行獲獎(jiǎng)成果研究時(shí)的大學(xué),也有的獲獎(jiǎng)?wù)攉@得學(xué)位的大學(xué)不是他度過大部分學(xué)習(xí)時(shí)間的大學(xué)等等。
劉念才在該文中還提到了因技術(shù)問題給排名帶來的難度。像前文提到的柏林洪堡大學(xué)和柏林自由大學(xué)之爭(zhēng);還比如,數(shù)據(jù)庫的檢索是非常復(fù)雜的,在關(guān)鍵詞的選擇上需要特別小心,在ARWU的排名過程中,不管作者是否在署名中提及相關(guān)大學(xué),每一個(gè)被引用率最高的教師都被歸于其所在大學(xué),每一篇NS論文也得到了同樣的處理,在SCIE和SSCI的檢索過程中,許多大學(xué)需要輸入多個(gè)關(guān)鍵詞才能找到其全部論文。
劉念才同時(shí)認(rèn)為,由于量化指標(biāo)及其權(quán)重不同,一所大學(xué)在排名榜上的位置也將有所差異,容易引起爭(zhēng)議。但是,一所真正一流的大學(xué)在各種指標(biāo)體系下都會(huì)是一流的,其排名不會(huì)產(chǎn)生大的波動(dòng)。
《美新》主編Brian Kelly表示,排名總會(huì)受到一些人的質(zhì)疑,但還是有超過半數(shù)的大學(xué)填寫了調(diào)查問卷,也總能找到一些人來對(duì)大學(xué)進(jìn)行評(píng)價(jià)。
使用大學(xué)排名需謹(jǐn)慎
1983年,《美新》首先作為一種促銷手段而推出大學(xué)排名,之后很多國家紛紛推出各種排行榜,對(duì)各自國內(nèi)的大學(xué)進(jìn)行排名。同時(shí),也出現(xiàn)了一些全球性的或者地區(qū)性大學(xué)排行榜。
伴隨著排名帶來的影響,以及遭受的批評(píng),排名者自己也承認(rèn)排名結(jié)果并不是最終定論。例如,《美新》建議學(xué)生在選擇大學(xué)時(shí)要考慮多種因素。在上海交大高教所的網(wǎng)站上也提醒大家,由于存在一些技術(shù)和方法的問題,使用這些排名時(shí)要謹(jǐn)慎。上海交大高教所的聲明中也提到,同一所大學(xué)在不同的排名指標(biāo)體系中會(huì)有不同的名次。因此,要根據(jù)排名的目的和指標(biāo)體系來認(rèn)識(shí)大學(xué)排名的結(jié)果,理性地把大學(xué)排名作為大學(xué)評(píng)價(jià)的參考依據(jù)之一。
與此同時(shí),排名者們也在不斷修改排名的指標(biāo)體系。但是,有批評(píng)指出,這樣就出現(xiàn)了同一所大學(xué)可以在一年內(nèi)突然變好或變差很多。很多人指責(zé),《美新》作出的排名,只是簡單的、無根據(jù)的隨意變動(dòng),其目的旨在提高雜志銷量,結(jié)果卻適得其反。
為提高排行榜的可信度,2006年,大學(xué)國際排名專家組(International Ranking Expert Group,簡稱IREG)在柏林召開的IREG第二次會(huì)議上,討論通過了一系列高等教育排名的質(zhì)量標(biāo)準(zhǔn)和操作范例——高等教育機(jī)構(gòu)排名的柏林原則。該原則強(qiáng)調(diào)排名過程及方法的透明性,認(rèn)為,排名結(jié)果的可靠性取決于對(duì)信息的加工和信息的來源(比如數(shù)據(jù)庫、學(xué)生、教師、雇主等)。數(shù)據(jù)的選擇應(yīng)該基于對(duì)質(zhì)量和學(xué)術(shù)優(yōu)劣的各種評(píng)價(jià)指標(biāo)的認(rèn)識(shí),而不是僅僅考慮數(shù)據(jù)的可獲取性。排名應(yīng)當(dāng)明確告知為什么包括這些指標(biāo)和這些指標(biāo)反映的是什么。排名應(yīng)該盡可能地使用審核過的、可核實(shí)的數(shù)據(jù),這些數(shù)據(jù)在機(jī)構(gòu)間是可比的、口徑是一致的。柏林原則同時(shí)提到,排名可以提供有關(guān)高等教育的可比信息和對(duì)高等教育更深入的了解,但是不應(yīng)該成為判斷高等教育是什么和做什么的主要標(biāo)準(zhǔn)。
CWTS的研究員Henk Moed表示,盡管存在種種抱怨,但大學(xué)排名有其存在的益處。實(shí)際上排名可以刺激競(jìng)爭(zhēng),促使大學(xué)不斷完善,即使排名并不完美,在一定程度上排名仍可以為學(xué)生以及政策制定者提供相關(guān)信息。
另有一些排名工作者也指出,大學(xué)也是喜歡吹捧自己的,特別是當(dāng)其運(yùn)轉(zhuǎn)良好時(shí)。在 2007 上海排名宣布不久,兩個(gè)“柏林大學(xué)”的校長,開始心平氣和地坐下來,討論如何分配關(guān)于愛因斯坦和其他諾貝爾獎(jiǎng)獲得者的獲獎(jiǎng)數(shù)問題。也許這樣的妥協(xié)會(huì)促使這兩所大學(xué)在2008年重新回到上海排行榜上。
“當(dāng)然,愛因斯坦也許會(huì)相當(dāng)欣賞這出鬧劇——在普林斯頓,他的辦公室里有這樣一個(gè)條幅,上面寫著——不是所有可以量化的東西都是重要的,也不是所有重要的都可以量化。”《科學(xué)》上的文章以這段話作為結(jié)尾來表明作者對(duì)待排名的態(tài)度。
(本報(bào)記者趙鷹、袁建勝對(duì)本文亦有貢獻(xiàn))