最新一期的英国《自然》杂志在社论中披露了提供论文引用统计数据的机构——位于美国费城的科学信息研究所（Institute for Scientific Information，简称ISI）在数据统计中出现错误的事实。社论说：“对于那些主要依靠这些统计数据来对科学表现进行评价的机构和人来说，这种情形令人担忧。”
   
    在ISI公布的引用率最高的热门论文排行榜上，去年由国际人类基因组测序组发表的人类基因组序列测序结果的论文却榜上无名。这一奇怪的现象促使《自然》杂志社对ISI的引用数据的统计数据进行了调查。调查发现，该机构的相关统计数据还有多处不准确的地方。
   
    《自然》社论说：“对于部分研究人员来说，监测论文的引用统计数据和学术期刊的‘影响因子’是一项非常严肃的工作。比如，许多德国大学都要对其科学家发表论文的期刊的影响因子进行统计，其中涉及到的有关数据直接影响到研究人员和所在部门研究经费的申请。在世界范围内，引用统计数据越来越广泛地被用作评价科学家工作质量的一个省事的标准。
   
    “具有文献计量学分析专长的研究人员们长久以来都在指出统计数据中存在着潜在的错误，在他们的研究中，他们常常会花相当长的篇幅来保证他们研究中使用的数据确凿无误。但是，当引用统计数据在那些非专业人士的手中时，这种严谨性往往就被抛到九霄云外。比如说，将不同学科期刊的影响因子进行对比是没有意义的，因为不同学科论文的引用状况是不同的。但是，为了对科学家们的表现进行评价，这种比较方法还经常被使用。
   
    “现在，处于垄断地位的提供论文引用统计数据的机构是位于美国费城的科学信息研究所（Institute for Scientific Information－ISI），这家研究所现在属于Thomson公司。ISI不可能对这些统计数据的使用情况负责，它在自己的网页上也有一篇解说文章，对引用数据的局限性进行了说明。
   
    “然而，ISI应该对它所公布的统计数据的准确性负责。ISI《科学观察》（Science Watch）的订阅者们将会注意到，ISI最新一期《科学观察》中有一篇对《自然》杂志和国际人类基因组测序工作组的致歉信。在ISI网页上先前公布的统计数据中，去年那篇描述国际人类基因组测序结果的里程碑式论文的引用率是如此之低，以至于这篇论文无缘进入最热门生物学论文的排行榜。这一排行榜定期刊登在《科学观察》上。
   
    “大惑不解的《自然》杂志的工作人员对ISI的数据进行了检查，他们发现这篇论文的引用数据被严重低算。国际人类基因组发表的其它几篇著名论文的引用情况也出现了这种情况。值得赞扬的是，ISI立即对此作出了反应，修正了自己的网页，并指派一位记者在《科学观察》上写了一篇对此事进行解释的文章。国际人类基因组发表的人类基因组序列论文现在位于热门论文排行榜的榜首。
   
    “如果问题只在于此，更正之后也就该算没事了。但是，《自然》的调查还发现了其它问题，特别是关于期刊的影响因子的数据的问题。期刊的影响因子是指期刊论文的平均引用情况。比如，一本期刊在2000年的影响因子是这样计算的：首先统计2000年ISI收录的所有出版物对此期刊前两年发表的所有论文对该期刊所有论文的引用数据，然后，再将这一数据除以该期刊前两年出版的所有论文数，其中所统计的论文数据包括原始论文和评审文章。这样得到的计算结果就是ISI公布的期刊影响因子。
   
    “《自然》杂志进行的初步研究揭示出被ISI当作分母的数据有错误，这些错误使得ISI以前公布的部分期刊的影响因子无效。比如，由ISI统计的《自然》杂志出版集团出版的其它研究性期刊的引用论文数据就不准确，导致这些杂志在不同年度的影响因子出现了误差。
   
    “《自然》杂志发表本文的目的并不是要直接改正这些错误，准确的数据需要进一步更仔细的分析。而对许多科学家来说，一份期刊影响因子的准确性并不是他们发表论文时最为关注的事。但这些事例却告诫我们有必要比以前更仔细检验ISI数据的准确性。对非常依赖论文统计数据的研究人员、政策制定者和期刊出版者们来讲，需要更为小心、谨慎地对待这些数据。看来ISI还需要对此问题进行更深入的检查。”
   
   

摘自：科学时报