為了滿足政府管理部門(mén)、高校和社會(huì)各界了解中國(guó)研究生教育競(jìng)爭(zhēng)力的需求，武漢大學(xué)中國(guó)科學(xué)評(píng)價(jià)研究中心的研究人員于2010年3月-6月份開(kāi)展了中國(guó)研究生教育競(jìng)爭(zhēng)力評(píng)價(jià)工作，按31個(gè)省、市、自治區(qū)、56個(gè)研究生院、477所高校、11個(gè)學(xué)科門(mén)類(lèi)、81個(gè)一級(jí)學(xué)科和373個(gè)專(zhuān)業(yè)對(duì)培養(yǎng)單位的研究生教育競(jìng)爭(zhēng)力進(jìn)行了全面、系統(tǒng)和深入的評(píng)價(jià)，共獲得了469個(gè)排行榜。這是目前國(guó)內(nèi)外最全面、最系統(tǒng)的研究生教育評(píng)價(jià)，特別是對(duì)國(guó)務(wù)院學(xué)位辦設(shè)置的373個(gè)專(zhuān)業(yè)(不含一級(jí)學(xué)科學(xué)位授權(quán)點(diǎn)下各單位自設(shè)的專(zhuān)業(yè))的評(píng)價(jià)，這是我們?cè)?004年評(píng)價(jià)工作的基礎(chǔ)上開(kāi)展的，本次評(píng)價(jià)更為科學(xué)、合理，這將為從事研究生教育的培養(yǎng)單位、政府管理部門(mén)、相關(guān)研究人員、廣大教師和考生、以及其他社會(huì)各界人士提供了一份全面、系統(tǒng)、詳細(xì)的評(píng)價(jià)報(bào)告。這對(duì)于滿足社會(huì)信息需求，改革和完善我國(guó)研究生教育制度，提高其培養(yǎng)質(zhì)量和水平，促進(jìn)高校之間的競(jìng)爭(zhēng)和發(fā)展都具有重要的指導(dǎo)意義和參考價(jià)值。

　　1.評(píng)價(jià)的對(duì)象和范圍

　　為了確保評(píng)價(jià)研究工作的延續(xù)性和可比性，我們確定中國(guó)科學(xué)院研究生院、中國(guó)社會(huì)科學(xué)院研究生院、中國(guó)農(nóng)業(yè)科學(xué)院研究生院和中國(guó)醫(yī)學(xué)科學(xué)院研究生院和477所普通高校作為本次評(píng)價(jià)的對(duì)象。各個(gè)評(píng)價(jià)對(duì)象的具體分布情況是：國(guó)家級(jí)科學(xué)院研究生院4個(gè)、普通高校研究生院52個(gè)以及其余425個(gè)高校研究生培養(yǎng)單位(處、部、辦公室、中心)。關(guān)于分學(xué)科評(píng)價(jià)，除了與軍事學(xué)有關(guān)的1個(gè)學(xué)科門(mén)類(lèi)、8個(gè)一級(jí)學(xué)科和20個(gè)相關(guān)專(zhuān)業(yè)外，我們分別對(duì)11個(gè)學(xué)科門(mén)類(lèi)、81個(gè)一級(jí)學(xué)科以及373個(gè)專(zhuān)業(yè)進(jìn)行了評(píng)價(jià)。

　　與2009年相比，評(píng)價(jià)對(duì)象和范圍有以下變化：①采用最新規(guī)范的學(xué)校名單，改名的學(xué)校名稱(chēng)進(jìn)行了更正;②更新了各一級(jí)學(xué)科和專(zhuān)業(yè)所涉及到的學(xué)校數(shù)量，如在2010年專(zhuān)業(yè)競(jìng)爭(zhēng)力評(píng)價(jià)中，就其總量而言，共有21528個(gè)(次)培養(yǎng)單位。

　　2.數(shù)據(jù)來(lái)源和處理方法

　　這次評(píng)價(jià)的原始數(shù)據(jù)主要來(lái)自以下四個(gè)方面：① 有關(guān)政府部門(mén)的統(tǒng)計(jì)數(shù)據(jù)資料(包括匯編、年鑒、報(bào)表等);② 國(guó)內(nèi)、外有關(guān)數(shù)據(jù)庫(kù);③ 有關(guān)政府部門(mén)、高校的網(wǎng)站;④ 國(guó)家有關(guān)刊物、書(shū)籍、報(bào)紙、內(nèi)部資料等。

　　我們對(duì)原始數(shù)據(jù)進(jìn)行了全面核查，并對(duì)異常數(shù)據(jù)進(jìn)行處理，然后利用我們自己設(shè)計(jì)的《中國(guó)研究生教育評(píng)價(jià)信息系統(tǒng)》進(jìn)行數(shù)值計(jì)算、統(tǒng)計(jì)得分。

　　根據(jù)集中與離散分布規(guī)律，在各評(píng)價(jià)結(jié)果的表示方面，繼續(xù)沿用去年的星級(jí)表示方法。即用5★、4★、3★、2★和0★分別取代A+、A、B+、B和C各等級(jí)。

　　2010年研究生教育評(píng)價(jià)在處理方法上最大的創(chuàng)新是，采用中心自主開(kāi)發(fā)的“科學(xué)評(píng)價(jià)論文分類(lèi)系統(tǒng)”，該系統(tǒng)在此次評(píng)價(jià)中的應(yīng)用價(jià)值主要是完成論文的匹配工作，即由系統(tǒng)取代以前的人工方法自動(dòng)將論文匹配到專(zhuān)業(yè)及學(xué)科門(mén)類(lèi)下。

　　分類(lèi)評(píng)價(jià)是當(dāng)前科學(xué)評(píng)價(jià)的熱點(diǎn)和難點(diǎn)。本次評(píng)價(jià)實(shí)踐出發(fā)，分析了評(píng)價(jià)數(shù)據(jù)的特征，認(rèn)為利用題錄信息可以完成分類(lèi)，并提出《學(xué)科分類(lèi)與代碼》是中國(guó)科學(xué)評(píng)價(jià)領(lǐng)域的最佳分類(lèi)體系。在梳理常規(guī)分類(lèi)方法的基礎(chǔ)上，歸納出這些方法適合于分類(lèi)評(píng)價(jià)的方面，而且對(duì)這些方面進(jìn)行進(jìn)一步的改造和融合，提出和構(gòu)建了科學(xué)評(píng)價(jià)論文分類(lèi)系統(tǒng)，其特點(diǎn)是“二次分類(lèi)”和“自動(dòng)生成訓(xùn)練集”。實(shí)驗(yàn)證明本系統(tǒng)能勝任科學(xué)評(píng)價(jià)中的論文分類(lèi)任務(wù)。系統(tǒng)巧妙利用期刊分類(lèi)器和類(lèi)號(hào)轉(zhuǎn)換器，實(shí)現(xiàn)了二次分類(lèi)和自動(dòng)生成測(cè)試集，提高了SVM分類(lèi)精度，也避免了繁重的人工分類(lèi)任務(wù)。實(shí)驗(yàn)證明本系統(tǒng)能勝任科學(xué)評(píng)價(jià)中的論文分類(lèi)任務(wù)。

　　另外，本次評(píng)價(jià)是科學(xué)評(píng)價(jià)論文分類(lèi)方法的初步探討，很多問(wèn)題有待進(jìn)一步發(fā)掘。其中，跨語(yǔ)言分類(lèi)和利用參考文獻(xiàn)顯示的引證關(guān)系進(jìn)行分類(lèi)等問(wèn)題，具有較高的理論和應(yīng)用意義，值得深入研究。

　　3.評(píng)價(jià)指標(biāo)體系

　　今年的評(píng)價(jià)工作沿用2006年的評(píng)價(jià)指標(biāo)體系，它由3個(gè)一級(jí)指標(biāo)、11個(gè)二級(jí)指標(biāo)、22個(gè)三級(jí)指標(biāo)構(gòu)成(具體指標(biāo)如表1所示)。在細(xì)節(jié)方面進(jìn)行了調(diào)整，在國(guó)家創(chuàng)新研究群體(團(tuán)隊(duì))這個(gè)三級(jí)指標(biāo)下，增加了“教育部的教學(xué)創(chuàng)新團(tuán)隊(duì)”一項(xiàng)。

　　表1 2010年中國(guó)研究生教育評(píng)價(jià)指標(biāo)體系