2020年U.S.News数学科目排名,曲阜师范大学领先北京大学,引起舆论关注。本文为此为例,分析四个主流高校排行榜排名的特征和局限性,提出新时代科目评估应提高客观评价的精准程度;充分考察人才培养的能力、水平和效果;提高科研产出的精准评价;保证信息的客观性、准确性、时效性和全面性。
[重要词]科目评估;U.S.News;大信息分析
2020年U.S.News的数学科目排名中,曲阜师范大学名列国内第一,领先北京大学,引起关注。曲阜师范大学数学科目水平自然不容小觑,领先北京大学被质疑也属正常。值得关注的是科目评估的科学性和客观性,及对世界一流科目建设的导向。通过分析U.S.News科目评估指标体系和公开的两校科研产出大信息,能够一窥其中到底。
U.S.News评估指标体系的构成与侧重点
在世界知名的四大学术排名指标体系中,QS世界大学排名考察的办学指标主要是6项,其各自比例为:学术声誉(40%)、雇主声誉(10%)、师生占比(20%)、师均论文引用数(20%)、国际教师占比(5%)及国际同学比率(5%)。ARWU世界大学排名考察的办学指标也主要是6项,其各自比例为:获诺贝尔奖和菲尔兹奖的校友折合数(10%)、获诺贝尔奖和菲尔兹奖的教师折合数(20%)、高被引学者数(20%)、N&S(即《Nature》和《Science》)论文数(20%)、国际论文即SCI&SSCI收录论文数(20%)及上述5项指标得分的师均值(10%)。THE世界大学排名考察的办学指标主要是5项,其各自比例为:教学(30%)、研究(30%)、引用(30%)、领域投资的研究收入(2.5%)和国际展望(7.5%)。U.S.News的指标体系分成了三类13项(详见表1),其实质为两类,即声誉与学术出版物(其第三类“科学成就计量指标”也是基于论文的数量与引用率)。
各指标体系相比,U.S.News和ARWU聚焦科研,U.S.News基于出版物的客观计量指标比例75%,ARWU全部采用客观计量指标,主要考察高层次人才比例和高水平学术论文数。QS和THE兼顾教学和科研,QS主观评价(社会评价和同行评价)比例较重,达50%,THE指标较为全面和均衡。
综上,U.S.News聚焦高校科研产出进行评价,主要基于学术出版物及被引用状况开展数量指标计量。出版物达到肯定学术认定水平,一般为无差别计入,尚不能进一步区分科研产出的质量。
细看北京大学优在何处
曲阜师范大学“量”领先,北京大学“质”占优。两校U.S.News总评为80.2分和78分,由分项排名(见表2)可见。
曲阜师范大学在会议论文和专著的出版数量、总被引用次数和平均被引用次数、国际共同作者论文相关两项指标等六个分项中,三项名列第一,另三项各名列第二、第三、第四。那些计量指标,都是数量指标、非竞争性指标,纳入计量样本的门槛相对不是很高。在竞争性的两项声誉指标中,北京大学明显领先;“引用率前10%的出版物数量、引用率前10%的出版物数量占总出版物的占比、学术论文出版数量”,这三项对出版物学术质量抬高门槛的指标,北京大学领先。
北京大学顶刊发文遥遥领先。按照学术界共识,影响因子10以上为世界顶级刊物。曲阜师范大学在影响因子10以上世界顶级刊物发表的论文总数仅为26篇,且在15以上顶刊没有文章;北京大学在影响因子10以上顶刊发表论文总数为156篇,其中15以上有83篇。两校数学科目在学术顶层的比较,北京大学占有绝对优势。
北京大学学术出版物主要是被国外、校外的一流学术机构引用。北京大学被国外引用比例63%,曲阜师范大学是30%;北京大学被校外引用是84%,曲阜师范大学是66%;北京大学被非本科目引用比例57%,曲阜师范大学是42%。两校TOP10引用机构的平均被引量,曲阜师范大学为456次,北京大学为583.7次,差距不大,可是从引用机构在QS排行榜中的排名看,引用曲阜师范大学学术出版物前10位的机构依次为:广州大学、山东科技大学、上海师范大学、江南大学、科廷大学(QS排名217)、阿卜杜勒阿齐兹国王大学、南京数据工程大学、西南师范大学、东南大学(QS排名493)、华南师范大学;引用北京大学学术出版物前10位的机构依次为:北京应用物理与测算数学研究所、清华大学(QS排名15)、新加坡国立大学(QS排名11)、北京师范大学(QS排名279)、复旦大学(QS排名34)、中国科学院大学、上海交通大学(QS排名47)、中山大学(QS排名263)、宾夕法尼亚州立大学(QS排名101)、厦门大学(QS排名432)。引用曲阜师范大学的机构基本未上排行榜,引用北京大学的机构基本在排名前300,约一大半排名在前100。