学术成果主题新颖性测度方法研究-北京玛格泰克科技发展有限公司.PDFVIP

研究论文 学术成果主题新颖性测度方法研究* ——基于Doc2Vec 和HMM 算法 逯万辉 1,2,3 谭宗颖 1,2 1( 中国科学院文献情报中心 北京 100190) 2( 中国科学院大学 北京 100049) 3( 中国社会科学院中国社会科学评价研究院 北京 100732) 摘要: 【目的 】进一步研究和构建学术成果主题新颖性测度指标, 量化地测度学术成果的主题新颖性。【方法】 构建基于Doc2Vec 和HMM 的文本内容特征因子计算模型, 通过该内容特征因子构造文档的主题新颖性测度指 标函数。基于《情报学报》、《情报科学》和《情报杂志》三本期刊2014 年度所刊载的学术论文进行实证研究, 测 度论文的主题新颖性。【结果】将该方法与已有的新颖性测度方法的计算结果进行对比, 其结果表现为0.01 水平 上的显著相关关系, 相关系数为 0.494, 同时该方法也避免了已有方法的计算结果中存在的区分度不够的问题。 【局限】仅使用摘要文本进行挖掘, 未对全文信息进行深入挖掘。【结论】基于该方法的学术成果主题新颖性测 度方法和计算结果具有可操作性和可解释性, 可以为学术评价和学科前沿探测提供有效支撑。 关键词: 主题新颖度 内容特征因子 学术成果 分类号: G250 DOI : 10.11925/infotech.2096-3467.2017.1012 果新颖性的判断主要以定性评价为主, 仅以证明“没 1 引 言 有发表过”作为查新的主要目的和新颖性判断依据, 科研成果评价是科研管理中的一个重要环节, 目 评价粒度较粗且没能从量化角度进行学术成果的新颖 前已经引起了社会各界的广泛关注和重视, 但是其难 性研究, 伴随着当前学术研究的不断深入, “从无到 点也相对突出, 难以对学术成果的学术质量做出客观 有” 的绝对学术新颖性并不十分常见, 而在一定的检 准确的评价, 同时这里的学术质量又是一个比较复杂 索数据集内研究主题或话题的相对新颖性成为相关研 的概念, 难以直接和客观地评判与测度, 特别是一些 究的测度目标。基于此, 本文从学术成果的研究主题 重大理论创新必须经历较长时间的检验后才能展示其 新颖性着手, 通过文本挖掘技术和方法, 对学术成果 历史地位与学术价值。在自然科学领域中, 曾长期把 的研究主题进行抽取和计算, 构建主题新颖性测度指 新颖性、先进性和实用性作为评价科研成果学术质量 标, 以期为学术成果的评价提供参考。 的主要指标, 并且认为新颖性是先进性与实用性的基 2 相关研究 础[1-2], 因此学术评价机构在开展学术评价与学术成果 质量判断时, 新颖性都是其中的一个重要方面, 但是 2.1 基于同行评议的主题新颖性测度方法 在具体做法上, 包括查新服务等方法在内, 对学术成 关于学术研究中的主题新颖性的评价方法, 在国 通讯作者: 谭宗颖, ORCID: 0000-0003-3945-7174, E-mail: tanzy@ 。 *本文系国家自然科学基金委课题“力学学科发展态势评估研究: 2006-2015”和国家社会科学基金重大项目“社科研究领域哲学社会科学 成果评价体系和奖励制度研究”(项目编号: 2016MZD003)的研究成果之一。 22 数据分析与知识发现 总第15 期 2018 年 第3 期 际学术界最为通用的就是同行评议, 由于其操作简便 与连续性上的体现也反映了学术成果的创新性、科学 易行、结果反馈直接, 因此其应用范围不仅仅局限在 性[7] 。但是近些年来由于学术引用的情况越来越复杂, 包含学术创新性或者研究主题新颖性等在内的学术评 导致其在具体应用中偏离学术本身的情况时有出现, 价中, 同时在