Measuring the Globalization of Knowledge Networks
本文提出了一种方法来理解全球科学的增长是由于网络内的优先连接机制。本文旨在通过对科学网络结构的理论和案例研究,为知识创造和转移指标的发展做出贡献。我们认为,指标的制定受到了缺乏对理解知识创造动态的理论基础的关注。这种缺乏的部分原因是难以衡量社会组织内部的动态系统。本文试图填补这一空白,提出基于理论的指标,知识创造网络理论和分析。本文提出了一个关于知识体系的假设,通过分析国际科学合作的增长来探索。
2009-11-18 physics.soc-ph
Macro-level Indicators of the Relations between Research Funding and Research Output
为了响应科学政策科学的号召,我们从科学计量学的角度讨论了指标在国家宏观层面的贡献。除了中国崛起等全球趋势外,人们还可以将世界出版物份额的百分比与政府在学术研究方面的支出联系起来。随着时间的推移,提高一个人的份额的边际成本正在增加。各国在将(资金)投入转化为可计量的产出的效率方面存在很大差异。各国的资助计划和学科组合都有所不同。但是,每张纸的价格是可以估计的。不同国家用于学术研究的国内生产总值百分比与历史偶然事件(如研究人员在人口中的百分比)显著相关。制度动态使得欧盟里斯本目标等战略目标-即在2010年将GDP的3%用于研发-变得不现实。
2009-11-05 physics.soc-ph
Scaling rules in the science system: influence of field-specific citation characteristics on the impact of research groups
我们提出了一个科学的引用密度景观的表示和调查的缩放规则与特定领域的引用密度作为一个主要的拓扑属性。我们专注于规模依赖的几个主要的文献计量学指标的研究小组,同时区分高性能和低性能组。我们证明,这种表示的科学系统是特别有效的理解的作用和相互依赖的不同的文献计量指标和相关的拓扑性质的景观。
2007-07-22 physics.data-an physics.soc-ph
A proposal for a quantitative indicator of original research output
科学生产力的量化指标现在似乎已广泛用于评估研究人员和研究机构。然而,人们普遍认为,这些指标并不一定代表所开展研究的独创性,它们主要是表明或多或少的多产科学活动和所针对的科学次群体的规模。我们首先讨论了一些被广泛采用的$h$指数的缺点,它代表了一个事实,在平均意义上,一个指标,可从总的引用次数。然后,我们提出了一个指标,虽然不能免受偏见,似乎更符合一般的期望量化什么是典型的原创作品。最后讨论了关于不同指标如何塑造科学未来的定性论点。
2017-12-22 cs.DL physics.soc-ph
Caveats for the Use of Citation Indicators in Research and Journal Evaluations
出版物的老化,自引的百分比和影响力在科学领域内因期刊而异。假设引用和出版的做法是同质的专业和科学领域是无效的。此外,学科领域和专业之间的划分也很模糊。分析的机构单位和人员可以在不同领域之间移动或跨越不同的专业。引文索引和机构概况之间的匹配因机构单位和国家而异。相应的比赛可能会严重影响单位的代表性。非ISI期刊越来越多地陷入“跨学科”模式2的功能,但以英语以外的语言出版的专业期刊除外。可以计算这些期刊的“外部引用影响因子”。非ISI期刊的引用影响将以《科学与公共政策》为例进行展示。
2009-11-07 cs.DL physics.soc-ph
Comparison of a citation-based indicator and peer review for absolute and specific measures of research-group excellence
许多不同的措施被用来评估学术研究的卓越性,这些都受到国际上科学计量,大学管理和决策社区正在进行的讨论和辩论。一个仍然重要的专题是,基于引用的指标与基于同行审查的评价相比的程度。在这里,我们分析了一个特定的基于引用的影响力指标的值和同行评议分数在几个学科,从自然科学到社会科学和人文科学之间的相关性。我们对研究小组而不是个人进行比较。我们在两个层面上进行比较。在绝对水平上,我们比较了整个集团的总影响力和整体实力。在一个特定的层面上,我们比较了学术影响和质量,并根据团体的规模进行了标准化。我们发现,在前一级非常高的相关性为一些学科和穷人的相关性在后一级的所有学科。这意味着,虽然基于引用的分数可以帮助描述研究小组的实力,特别是对于所谓的硬科学,但它们不应该被用作研究小组排名或比较的代理。此外,软科学的同行评价分数和基于引用的分数之间的相关性较弱。
2013-05-27 cs.DL physics.soc-ph
CWTS crown indicator measures citation impact of a research group's publication oeuvre
Tobias Opthof和Loet Leydesdorff(arXiv:1002.2769)发表的文章“CWTS(`Leiden ')研究绩效评估中期刊和领域规范化的注意事项”涉及一个与引用影响的所谓领域规范化指标在评估个人研究人员和研究小组的研究绩效中的应用同样重要的主题。字段规范化旨在说明科学-学术学科领域之间引用实践的差异。作为介绍“莱顿”指标的论文以及报告实际使用这些措施的评估结果的许多报告和文章的主要作者,我对Opthof和Leydesdorff论文中提到的3个主要问题发表了评论。
2010-03-30 cs.DL physics.soc-ph
Longitudinal Trends in Networks of University-Industry-Government Relations in South Korea: The Role of Programmatic Incentives
本研究以大学-产业-政府(UIG)关系的三螺旋(TH)指标,探讨韩国网络化研究关系的系统性纵向趋势。这些数据来自科学引文索引(SCI)及其在社会科学(SSCI)和艺术与人文科学(A&HCI)中的同行。自1965年以来,韩国SCI出版物的总数迅速增长。然而,TH指标表明,网络动态根据国家政府的研究政策有很大的不同。从20世纪70年代中期到90年代中期,SCI中以合著关系衡量的合作模式明显增加,但有一些变化。然而,在21世纪的第一个十年,新的国家科学技术(S&T)研究政策对国内科学家和研究小组的评价基于他们的国际出版物数量,而不是学术、私人和公共领域之间的合作水平,这对机构间的合作产生了负面影响。结果表明,韩国未能通过忽视科学,技术和产业的网络效应来提高其国家研究能力。
2009-12-16 physics.soc-ph
Comparison of the Hirsch-index with standard bibliometric indicators and with peer judgment for 147 chemistry research groups
在本文中,我们提出的赫希(h-)指数和几个标准的文献计量学指标之间的统计相关性的特点,以及与同行评议的判断结果。我们使用的147所大学的化学研究小组在荷兰涵盖了约700名高级研究人员在1991-2000年期间的工作的大型评估研究的结果。因此,我们处理研究小组,而不是个别科学家,因为我们认为研究小组是研究中最重要的工作场所单位,特别是在自然科学。此外,我们将引用期限制在三年的窗口,而不是生命时间计数,以关注最近的工作的影响,从而对当前的研究表现。结果表明,h指数和我们的文献计量学冠指标都与同行的判断相当的方式。但对于引用流量较少的领域中的较小群体,皇冠指标似乎是一个更合适的研究绩效衡量标准。
2006-04-24 physics.data-an physics.soc-ph
Integrated Impact Indicators (I3) compared with Impact Factors (IFs): An alternative research design with policy implications
在文献计量学中,将“影响力”与中心趋势统计联系起来是错误的。影响累积起来,因此引用曲线应该被整合而不是平均。例如,《MIS Quarterly》和《JASIST》期刊在各自的影响因子(IF)方面相差两倍,但IF较低的期刊具有较高的影响力。使用百分比等级(例如,前1%、前10%等),综合影响指标(I3)可以基于引用曲线的综合,但是在将引用曲线归一化到相同尺度之后。跨文档集的结果可以作为参考集的总影响的百分比进行比较。然而,不应该使用引用总数,因为引用曲线的形状不被欣赏。I3可以应用于任何文档集和任何引用窗口。积分(求和)的结果可以完全分解为期刊或机构单位,如国家、大学等,因为百分比等级是在纸张级别上确定的。在这项研究中,我们首先比较了I3和IF的两个ISI学科类别(“信息科学与图书馆学”和“多学科科学”)的期刊。此外,地雷影响调查还按国家进行了分解。这种可能的范式转变在引文影响分析的政策影响。
2011-06-13 cs.DL physics.soc-ph
Statistical Methodologies for Urban Morphology Indicators: A Comprehensive Review of Quantitative Approaches to Sustainable Urban Form
该研究通过审查89篇文献,构建了包含365个指标的六类城市形态分类法,揭示了空间建模应用不足及区域偏见,呼吁建立标准化框架以促进可持续城市研究。
2025-08-07 physics.soc-ph
Scientometrics and the evaluation of European integration
在本章中,我们详细阐述了欧洲科学一体化的主题。我们将不讨论与欧洲一体化的影响有关的问题,而只讨论科学计量学问题,即如何定量地表明欧洲科学体系的一体化。我们的研究是为了促进和补充辩论,而不是提供一个最终的答案,欧洲一体化是否“存在”的问题。在本章中,我们首先从历史的角度讨论了科学计量指标在研究评价中的使用(第2节)。欧洲科学政策的讨论如下(第3节)。然后,我们介绍了一些一体化的指标,并讨论了我们的经验结果有关的演变,欧洲科学体系在20世纪80年代和90年代(第4节)。在本章的最后,我们讨论了未来加强研究评估的可能途径(第5节)。
2009-12-07 cs.DL physics.soc-ph
Altmetrics: New Indicators for Scientific Communication in Web 2.0
在本文中,我们回顾了所谓的altmetrics或替代指标。这一概念源于基于Web 2.0的新指标的开发,用于评估研究和学术活动。基本的假设是,博客中的提及次数、twitter数量或研究人员为研究论文添加书签的数量等变量可能是衡量科学出版物使用和影响的合理指标。从这个意义上说,这些指标目前是文献计量学界的焦点,正在进行讨论和辩论。我们描述了主要的平台和指标,我们分析了作为一个样本,在传播学西班牙的研究成果。将传统指标(如引文)与这些新指标进行比较。结果表明,根据altmetrics,被引用最多的论文也是影响力最高的论文。最后,我们指出了这些指标存在的主要缺点,以及它们在通过2.0平台衡量研究影响时可能发挥的作用。
2013-06-27 cs.DL cs.SI physics.soc-ph
How to measure research performance of single scientists? A proposal for an index based on scientific prizes: The Prize Winner Index (PWI)
本文提出基于合著距离的Prize Winner Index (PWI)来衡量科学家研究绩效,通过计算科学家与著名奖项获奖者的合著距离,验证了PWIPM与P(top 10%)指标具有高相关性,表明其可作为传统文献计量指标的替代方案。
2023-03-31 cs.DL physics.soc-ph
Netconomics: Novel Forecasting Techniques from the Combination of Big Data, Network Science and Economics
网络理论方法与最近可用的丰富的经济数据相结合,导致开发新的分析和计算工具,用于建模和预测关键经济指标。其主要思想是引入一个拓扑组件的分析,始终考虑到所有高阶的相互作用。我们提出了三种基本的方法来展示不同的方法来利用由此产生的网络增益。首先,使用多元线性回归优化算法来生成国家国际收支账户的各个组成部分之间的关系网络。该模型以高精度描述年度统计数据,并对大多数指标进行了良好的预测。第二,提出了一个全球金融危机的预警机制,它将网络措施与标准经济指标相结合。通过对长期债务证券的跨界证券投资网络的分析,可以用总市值和名义未偿金额来描述各种场外交易的金融衍生品,如信用违约互换的扩散,这与市场相互依存程度和系统性风险的增加有关。第三,考虑到G-20经济体之间货物贸易的流动网络,网络统计数据为关键经济指标提供了比传统指标更好的代理。例如,它表明,一个国家的守门潜力,作为衡量当地权力,预测其国内生产总值的年度变化一般远远好于其进出口量。
2014-03-04 physics.soc-ph q-fin.GN stat.ME
Towards a new crown indicator: An empirical analysis
我们提出了一个实证比较两个规范化机制的研究绩效的引文为基础的指标。这些机制的目的是使该领域的引文计数和出版物的出版年份标准化。一种机制应用于我们研究所目前所谓的冠状指示器中。另一种机制应用在我院拟采用的新冠指标中。我们发现,在高聚集水平,如在大型研究机构一级或在国家一级,两种机制之间的差异非常小。在较低的汇总级别,如在研究小组一级或在期刊一级,这两种机制之间的差异稍大。我们特别注意最近出版物的处理方式。这些出版物的引用次数通常很低,因此应特别小心处理。
2010-09-07 cs.DL physics.soc-ph
Efficiency of research performance and the glass researcher
Abramo和D'Angelo(出版中)怀疑现有的衡量引用影响力的独立于规模的指标的有效性,并支持衡量科学效率(通过使用分数科学强度指标)。本文旨在评论Abramo和D'Angelo(出版中)论文中的一些有争议的和一些有利的方法。
2016-05-31 cs.DL physics.soc-ph
Convergent validity of several indicators measuring disruptiveness with milestone assignments to physics papers by experts
这项研究的重点是最近推出的一种衡量科学破坏性的指标。破坏性研究通过开辟新的研究路线而偏离当前的研究路线。在目前的研究中,我们包括了最初提出的这种新类型的指标(Wu,Wang,& Evans,2019)和DI1的几个变体:DI5,DI1n,DI5n和DEP。由于指标应该衡量他们打算衡量的东西,我们调查了指标的收敛有效性。我们使用了一系列里程碑式的论文,由《物理评论快报》的编辑选择和发表,并调查了这个基于人类(专家)的列表是否与几个中断指标变体的值有关,如果是这样,哪些变体与专家判断的相关性最高。我们使用二元统计,多元回归模型,(粗)精确匹配(CEM)调查的收敛有效性的指标。结果表明,各指标与编辑的里程碑论文任务的相关性不同。表现最好的不是最初提出的破坏指数(DI1),而是Bornmann,Devarakonda,Tekles和Chacko(2019)引入的变体DI5。在本研究的CEM分析中,Bu,Waltman和Huang(2019)引入的DEP变体也显示出有利的结果。
2020-06-18 cs.DL physics.soc-ph
Entropy-based disciplinarity indicator: role taxonomy of journals in scientific communication systems and isolation degree. Knowledge importation/exportation profiles from journals and disciplines
本研究提出了一个新的学科性指标--多学科性,并对其进行了探讨和应用。EBDI是基于被分析单位引用或被引用期刊的学科类别的频率分布和用Shannon-Wiener熵测量的学科类别之间的引文的扩散和多样性的组合。讨论了该方法的重现性、稳健性和一致性。四个组合的价值观时,应用到引用和引用维度导致建议的分类的作用,研究单位可能有在科学传播系统中的不同学科的知识的转化和它的位置方面的假设的主题核心的学科,它已被分类。该指标适用于属于JCR-SSCI 2011年图书馆学与情报学的第一个四分位数的期刊,并应用和讨论了基于指标的分类法,指出分析的期刊的不同主题作用。
2013-03-06 cs.DL physics.soc-ph
The Distribution of the Asymptotic Number of Citations to Sets of Publications by a Researcher or From an Academic Department Are Consistent With a Discrete Lognormal Model
如何量化研究人员或机构工作的影响,对科学家、资助机构和招聘委员会来说越来越重要。文献计量指标,如h指数或期刊影响因子,尽管有其已知的局限性,但已得到广泛使用。我们认为,大多数现有的文献计量指标是不一致的,有偏见的,最糟糕的是,易受操纵。在这里,我们追求一个原则性的方法来制定一个指标,以量化的科学影响,个人研究人员和研究机构的基础上的函数形式的渐近数量的引文分布。我们使用来自7个科学和工程学科的1,283名研究人员以及106个美国研究机构的化学系的出版记录来验证我们的方法,这些研究机构被归类为“非常高的研究活动”。我们的方法有三个明显的优势。首先,它准确地捕捉了研究人员在所有职业阶段的整体科学影响力,通过渐近引用计数来衡量。第二,与其他指标不同,我们的指标是抗操纵的,并奖励出版质量超过数量。第三,我们的方法捕捉了研究机构的科学影响的时间演变。
2015-11-02 cs.DL physics.soc-ph
An Indicator of Research Front Activity: Measuring Intellectual Organization as Uncertainty Reduction in Document Sets
当使用科学文献对学术话语进行建模时,研究专业可以作为一组不断发展的相关文档进行操作。每一份出版物都有望为研究前沿专业的进一步发展做出贡献。论文中的标题词和引用文献的特定组合可以被认为是论文中知识主张的签名:新词和词的组合可以被期望代表变化,而每篇论文同时使用上下文相关的参考文献选择性地定位到一个领域的知识组织中。这三个维度--标题词、引用文献和序列号--之间的互信息是否可以作为一个指标,用来衡量知识组织在多大程度上构建了一个研究前沿的不确定性?纳米管(1991年)的发现对先前存在的富勒烯领域的影响被用作测试案例。此后,这种方法被应用于科学研究,重点是科学计量学使用各种样本划定。引文分析是一个新兴的研究前沿。
2009-11-22 cs.DL cs.IR physics.soc-ph
A Meta-evaluation of Scientific Research Proposals: Different Ways of Comparing Rejected to Awarded Applications
将不同的数据集与提交给两个著名资助机构的赠款和奖学金申请信息相结合,我们能够将他们的资助决定(奖励和拒绝)与两个科学领域(生命科学和社会科学)的科学计量绩效指标进行比较。这些数据集涉及社会科学领域的671项应用和生命科学领域的668项应用。在这两个领域,获奖申请人的平均表现优于所有被拒绝的申请人。如果在这两个领域中只考虑最杰出的被拒绝的申请人,他们在引用影响力方面的得分高于获奖者。关于生产力,我们发现不同领域之间的差异:虽然生命科学的获奖者平均表现优于最杰出的被拒绝的申请人,但社会科学的情况正好相反。
2009-11-18 cs.CY physics.soc-ph
Scientometrics and Communication Theory: Towards Theoretically Informed Indicators
引文理论不应该把被引者和/或被引者作为其唯一的研究对象。人们还能够研究通信网络中的动态。当通信代理(例如,作者、实验室、期刊)在其出版物和引用计数方面可以进行比较,人们会期望通信网络不是同质的。网络的潜在结构表明,不同的编码跨越一个空间的可能的“预防措施”。从进化的角度可以假设各种子动力。以《科学与技术研究》中的期刊间引文网络为例,分析了这种次动力机制的运作。将阐述理论驱动型科学计量学的政策影响和后果。
2010-01-25 cs.DL physics.soc-ph
Now is the time to build a national data ecosystem for materials science and chemistry research data
呼吁政府、学术界和工业界采取协调行动。
2022-01-01 cond-mat.mtrl-sci physics.chem-ph physics.soc-ph
AI-Driven Automation Can Become the Foundation of Next-Era Science of Science Research
Shanghai Artificial Intelligence Laboratory(上海人工智能实验室);Department of Engineering Science, University of Oxford(牛津大学工程科学系);Shanghai Institute for Science of Science(上海科学科学研究院);School of Mathematics, Southeast University(东南大学数学学院);Shanghai Innovation Institute(上海创新研究院);Department of Information Engineering, Chinese University of Hong Kong(香港中文大学信息工程系)
本文提出以AI驱动的自动化支撑下一代科学学研究,分析其相较传统统计与规则方法的优势、局限及解决路径,并通过多智能体系统示例验证其模拟科研社会的潜力。
2025-05-17 cs.AI cs.CL physics.soc-ph
Science overlay maps: a new tool for research policy and library management
我们提出了一种新颖的方法来直观地定位科学研究机构,无论是在每一个时刻的时间和动态。本文描述了这种方法如何与其他努力相适应,以绘制本地和全球科学产出。然后,我们展示了这些科学覆盖图如何帮助基准,探索合作,并跟踪时间变化,使用大学,公司,资助机构和研究课题的例子。我们讨论应用条件,及其优点,缺点和局限性。叠加地图特别有助于调查越来越多的科学发展和不适合传统学科类别的组织。我们提供这些工具,以帮助研究人员探索科学和技术系统正在进行的社会认知转型。
2009-12-19 cs.DL cs.IR physics.soc-ph
Uncertain research country rankings. Should we continue producing uncertain rankings?
本研究调查了基于引用的国家研究能力评估不准确的原因,发现引用分布偏差导致百分位指标误判国家与机构能力,建议弃用此类指标。
2025-03-20 cs.DL cs.IR physics.soc-ph