考虑时序的单篇科技文献新颖性评估方法

doi:10.13266/j.issn.0252-3116.2022.17.009

图书情报工作 ›› 2022, Vol. 66 ›› Issue (17): 93-105.DOI: 10.13266/j.issn.0252-3116.2022.17.009

考虑时序的单篇科技文献新颖性评估方法

张吉玉, 张均胜

中国科学技术信息研究所北京 100038

收稿日期:2022-03-28 修回日期:2022-07-02 出版日期:2022-09-05 发布日期:2022-09-09
通讯作者: 张均胜,研究员,博士,通信作者,E-mail:zhangjs@istic.ac.cn
作者简介:张吉玉,硕士研究生
基金资助:
本文系国家重点研发计划项目"颠覆性技术识别理论、方法与专家预判系统"(项目编号:2019YFA0707201)和中国科学技术信息研究所创新研究基金项目"科技论文原创性与新颖性评估方法研究"(项目编号:MS2022-05)研究成果之一。

Novelty Evaluation Method of Single Scientific and Technical Literature Considering Time Series

Zhang Jiyu, Zhang Junsheng

Institute of Scientific and Technical Information of China, Beijing 100038

Received:2022-03-28 Revised:2022-07-02 Online:2022-09-05 Published:2022-09-09

摘要/Abstract

摘要： [目的/意义]结合时间序列对科技文献新颖性进行分析,从历史发展的视角评估其创新性,为科技文献代表作评价提供辅助。[方法/过程]提出一种考虑时序的科技文献问题-方法矩阵用于评估单篇文献新颖性。该方法利用模式匹配和词表匹配抽取文献中的研究问题和研究方法,再用Jaccard系数计算文本相似度进行相似文本聚类,构建问题-方法矩阵用于评估文献的时间相关新颖性,并以可视化矩阵的形式呈现评估结果。[结果/结论]实验中选取发表时间为2019-2021年,分类为TP391.1的222篇文献做数据集,验证本文所提方法的有效性和可行性,结果表明该方法可辅助代表作评价中的新颖性评估。

关键词: 时间序列, 新颖性评估, 问题-方法矩阵, 科技文献, 代表作评价

Abstract: [Purpose/Significance] This paper analyzes the novelty of scientific and technical literature in combination with time series, evaluates its innovativeness from the perspective of historical development, and assists in the evaluation of representative works of scientific and technical literature.[Method/Process] This paper proposed a question-method matrix for scientific and technical literature that considers time series and was used for novelty assessment of a single literature. First, this method used pattern matching and vocabulary matching to extract the research questions and research methods of the literature. Secondly, the Jaccard coefficient was used to calculate the text similarity to cluster similar texts. Next, the problem-method matrix was constructed for assessing the time-relevant novelty of the literature and presented the assessment results in the form of a visual matrix.[Result/Conclusion] In the experiment, 222 papers published in 2019-2021 and classified as TP391.1 are selected as the dataset to verify the effectiveness and feasibility of the method proposed in this paper. The results show that the method can assist in novelty evaluation in the evaluation of representative works.

Key words: time series, novelty evaluation, question-method matrix, scientific and technical literature, the evaluation of representative works

中图分类号:

G250

张吉玉, 张均胜. 考虑时序的单篇科技文献新颖性评估方法[J]. 图书情报工作, 2022, 66(17): 93-105.

Zhang Jiyu, Zhang Junsheng. Novelty Evaluation Method of Single Scientific and Technical Literature Considering Time Series[J]. Library and Information Service, 2022, 66(17): 93-105.

参考文献

[1] 科技部. 科技部印发《关于破除科技评价中"唯论文"不良导向的若干措施(试行)》的通知[EB/OL].(2020-02-17)[2022-02-28]. http://www.most.gov.cn/xxgk/xinxifenlei/fdzdgknr/fgzc/gfxwj/gfxwj2020/202002/t20200223_151781.html.
[2] 谢珍,马建霞,胡文静.学术代表作评价:方法述评与研究展望[J].情报理论与实践,2021,44(12):190-196.
[3] 柴嘉琪,陈仕吉.论文新颖性测度研究综述[J].农业图书情报学报,2020,32(10):56-61.
[4] 闻浩,鲁立.科技期刊论文质量评价方法及相关研究[J].情报工程,2017,3(5):60-67.
[5] MARSH H W, JAYASINGHE U W, BOND N W. Improving the peer-review process for grant applications:reliability, validity, bias, and generalizability[J]. American psychologist, 2008, 63(3):160.
[6] 玄兆辉.中国国家创新调查制度建设研究与展望[J].科学管理研究,2018,36(5):15-18.
[7] 罗卓然,王玉琦,钱佳佳,等.学术论文创新性评价研究综述[J].情报学报,2021,40(7):780-790.
[8] COSTANZO B P, SÁNCHEZ L E. Innovation in impact assessment theory and practice:how is it captured in the literature?[J]. Environmental impact assessment review, 2019, 79:106289.
[9] LEE Y, WALSH J P, WANG J, et al. Creativity in scientific teams:unpacking novelty and impact[J]. Research policy, 2015, 44 (3):684-697.
[10] HOFSTRA B, KULKARNI V V, MUNOZ-NAJAR GALVEZ S, et al. The diversity-innovation paradox in science[J]. Proceedings of the National Academy of Sciences, 2020, 117(17):9284-9291.
[11] 张金柱,王秋月,仇蒙蒙.颠覆性技术识别研究进展综述[J/OL].数据分析与知识发现:1-27[2022-06-30].http://kns.cnki.net/kcms/detail/10.1478.g2.20220304.1437.002.html.
[12] WANG Z, WANG K, LIU J, et al. Measuring the innovation of method knowledge elements in scientific literature[J]. Scientometrics, 2022, 127(5):2803-2827.
[13] ZHANG Y, TSAI F S. Chinese novelty mining[C]//Proceedings of the 2009 conference on empirical methods in natural language processing. Stroudsburg:Association for Computational Linguistics, 2009, 3:1561-1570.
[14] JEON D, AHN J M, KIM J, et al. A doc2vec and local outlier factor approach to measuring the novelty of patents[J]. Technological forecasting and social change, 2022, 174:121294.
[15] 陈斯斯,董立平,许丹,等.三种信息粒度下的新颖性探测理论及其应用[J].中华医学图书情报杂志,2016,25(11):16-19.
[16] 李鲲. 面向科技文献自动摘要的科研事件抽取研究[D]. 北京:中国科学技术信息研究所,2017.
[17] 王小玉,董诚,曾文.科技政策语义分析方法研究[J].情报工程,2015,1(6):102-108.
[18] 杨建林,钱玲飞.基于关键词对逆文档频率的主题新颖度度量方法[J].情报理论与实践,2013,36(3):99-102.
[19] 许丹,徐爽,陈斯斯,等.基于自然语言词对法的文献主题新颖性探测研究[J].图书情报工作,2018,62(8):130-138.
[20] YANG J, LU W, HU J, et al. A novel emerging topic detection method:a knowledge ecology perspective[J]. Information processing & management, 2022, 59(2):102843.
[21] 王艳艳,张均胜,乔晓东,等. 基于问题-方法矩阵的文献新颖性评估方法[J]. 情报理论与实践,2021,44(2):90-95.
[22] 钱佳佳,罗卓然,陆伟.基于问题-方法组合的科技论文新颖性度量与创新类型识别[J].图书情报工作,2021,65(14):82-89.
[23] CHEN C, CHEN Y, HOROWITZ M, et al. Towards an explanatory and computational theory of scientific discovery[J]. Journal of informetrics, 2009, 3(3):191-209.
[24] UZZI B, MUKHERJEE S, STRINGER M, et al. Atypical combinations and scientific impact[J]. Science, 2013, 342(6157):468-472.
[25] 任海英,王德营,王菲菲. 主题词组合新颖性与论文学术影响力的关系研究[J]. 图书情报工作,2017(9):87-93.
[26] MATSUMOTO K, SHIBAYAMA S, KANG B, et al. Introducing a novelty indicator for scientific research:validating the knowledge-based combinatorial approach[J]. Scientometrics, 2021, 126(8):6891-6915.
[27] WANG J, VEUGELERS R, STEPHAN P. Bias against novelty in science:a cautionary tale for users of bibliometric indicators[J]. Research policy, 2017, 46(8):1416-1436.
[28] BORNMANN L, TEKLES A, ZHANG H H, et al. Do we measure novelty when we analyze unusual combinations of cited references? a validation study of bibliometric novelty indicators based on F1000Prime data[J]. Journal of informetrics, 2019, 13(4):100979.
[29] 罗芳琼,吴春梅.时间序列分析的理论与应用综述[J].柳州师专学报,2009,24(3):113-117.
[30] 徐珍珍,张均胜,刘文斌.科技文献中技术关联自动发现方法研究[J].图书情报工作,2021,65(20):113-122.
[31] 王海林,张雅君.基于LDA的长短文本分类比较[J].数字技术与应用,2016(10):230.
[32] 谢红.基于词频比的改进Jaccard系数文本相似度计算[J].内江科技,2021,42(8):27-2.
[33] 秦岩,代君,廖莹驰.学术会议论文新颖性测度研究——以计算机学科人工智能领域为例[J].情报科学,2021,39(1):104-110.

考虑时序的单篇科技文献新颖性评估方法

Novelty Evaluation Method of Single Scientific and Technical Literature Considering Time Series

PDF

可视化

摘要/Abstract

引用本文

使用本文

参考文献

相关文章 15

编辑推荐

Metrics

[1]	庞弘燊, 钟秀梅. 颠覆性技术产生过程的多源数据多特征项可视化研究[J]. 图书情报工作, 2022, 66(19): 122-131.
[2]	董美, 常志军. 一种面向中医领域科技文献的实体关系抽取方法[J]. 图书情报工作, 2022, 66(18): 105-113.
[3]	马晓悦, 孟啸, 王镇, 刘益东. 网络突发事件中社交机器人情感的交互式影响机制研究[J]. 图书情报工作, 2021, 65(8): 74-84.
[4]	张鑫, 文奕, 许海云, 刘忠禹. Prophet预测-修正的主题强度演化模型——以干细胞领域为实证[J]. 图书情报工作, 2020, 64(8): 78-92.
[5]	孙坦, 黄永文, 张建勇, 赵瑞雪, 鲜国建, 李娇. 开放科学环境下国家科技文献发展战略研究与展望[J]. 图书情报工作, 2020, 64(14): 3-12.
[6]	王军, 李子舰, 刘潇蔓. 不同文本长度的体验型产品在线评论时间序列研究——以电影评论为例[J]. 图书情报工作, 2019, 63(16): 103-111.
[7]	秦春秀, 杨智娟, 赵捧未, 刘杰. 面向科技文献知识表示的知识元本体模型[J]. 图书情报工作, 2018, 62(3): 94-103.
[8]	于改红, 张智雄, 马娜. 科技文献语篇元素自动标注模型研究综述[J]. 图书情报工作, 2018, 62(15): 132-144.
[9]	田人合, 张志强, 高志. 基于分段线性回归模型的科学家个人科研产出规律研究——以杰青基金地球科学项目为例[J]. 图书情报工作, 2018, 62(1): 106-116.
[10]	祝娜, 王芳. 基于主题关联的知识演化路径识别研究——以3D打印领域为例[J]. 图书情报工作, 2016, 60(5): 101-109.
[11]	滕广青, 贺德方, 彭洁, 赵汝南, 张利彪. 基于网络中心性的领域知识动态演化研究[J]. 图书情报工作, 2016, 60(14): 128-134,141.
[12]	屈鹏, 张均胜, 曾文, 乔晓东, 王惠临. 国内外专利挖掘研究(2005-2014)综述[J]. 图书情报工作, 2014, 58(20): 131-137.
[13]	石崇德, 乔晓东, 王惠临, 屈鹏. 中文科技文献切分的领域适应技术研究[J]. 图书情报工作, 2014, 58(19): 13-18.
[14]	丁洁, 王曰芬. 基于特征项的文献共现网络在学术信息检索中的应用[J]. 图书情报工作, 2014, 58(15): 135-141.
[15]	王晓笛, 祝娜, 白如江, 王效岳. 基于语义角色标注的文献相似度检测研究[J]. 图书情报工作, 2014, 58(12): 130-135.