学术不端论文检测系统的工作原理_论文学术不端检测
学术不端论文检测系统的工作原理由刀豆文库小编整理，希望给你工作、学习、生活带来方便，猜你可能喜欢“论文学术不端检测”。
学术不端论文检测系统的工作原理
学位论文学术不端行为检测系统（简称“TMLC”）以《中国学术文献网络出版总库》为全文比对数据库，实现了对抄袭与剽窃、伪造、篡改等学术不端行为的快速检测，可供用户检测学位论文，并支持用户自建比对库。
重合字数指学位论文该章节与比对文献比较后,重合部分的字数。一般来说,不管文字复制比如何,重合字数越多,存在学术不端行为的可能性越大。如图8所示,在图中,虽然文字复制比只有16%,比例不高,但图中左文标红部分实际上是抄袭了右文的标红部分。
学位论文一般文献篇幅较大,字数多,硕士论文一般为3~5万字,博士论文则多达十多万字。因此,为了让用户对整个学位论文有一个快速的概况了解,特制定了以下指标体系: 支持文献改写,多篇文献组合等各种文献变形检测;
学位论文一般篇幅大,少则3~5万字,多则十多万字,若以文字复制比来衡量一篇论文的文字重合情况,则不太合适。因为对于一篇10几万字的博士论文来说,10%就已达到1万字,文字复制情况已经非常严重。因此,对于博硕士论文检测,检测系统使用论文检测绝对字数即总重合字数作为检测结果的核心指标。如图6所示:
◆自建比对库:指管理人员可以选择将检测文献放入个人比对库或者批量上传文献作为个人比对库,该个人比对库即可作为以后学术不端文献检测的比对数据库,该自建个人比对库完全属于用户,其他用户无权使用。
与比对文献重合的最大段长度即为最大段长。最大段长反映成段抄袭特征。连续的文字越长,抄袭的可能性越大。
对于学位论文的每一章节,又制定了如下检测指标来反映该章节的检测情况,对于一篇学位论文来说,每一章的内容各异,重点也不一样,其核心工作内容一般主要存在某几章中,子检测指标可以让用户迅速了解每一章节的检测情况。子检测指标包括:
系统主要功能包括:已发表文献检测、论文检测、问题库查询、自建比论文检测对库管理等。
1.若用户提交的论文是ms word格式,且按照ms word格式生成了文档目录,检测系统会自动识别论文章节,按论文实际章节信息显示论文内容。
支持研究生学位论文、图书专著等超长文献的学术不端检测。
平均段长和 段落数反映了重合文字在学位论文中的分布情况,一般来说,指标参数越高,存在学术不端行为的可能性越大。如图9所示,标红部分的连续文字构成了段,而且它是算法设计的抄袭,审查人员比较容易判断;而在图10中,标红文字不构成段,连续文字较少,对它的性质判断则可能需要更多的信息。
在收录资源种类上,cnki在国内具有明显优势,收录了期刊、学位论文、会议论文、报纸、年鉴、工具书、专利、外文文献、学术文献引文等与科学研究、学习相关的主要资源。在资源收录数量上,cnki明显优于同类产品,各个资源库收录年限长,期刊等主要资论文检测源库回溯到创刊。在资源更新速度上,cnki产品除了第三方合作的外文文献以外,其他资源都做到了日更新,单日更新数量大,这是推行产业化、标准化运作的结果。
学位论文某一章节的前20%称之为章节首部,首部的文字复制比为首部复制比。就中文文献来说,一般每一章节正文开头部分出现的是综述性语言,重要性相对偏低。如图11所示,左文和右文开头大段相同,但文字内容基本都是综述性的介绍。
◆问题库查询:指用户可以将检测结果中确认有问题的文献放入到问题库,便于用户集中管理。
在学位论文的某一章节中,所有该章节文字重合段的字数之和占该章节文字数的比例为段文字比。段文字比反映了抄袭连续特征。一般来说,连续文字出现的越多,比文字分散出现的情况更可能存在学术不端行为。
tmlc 采用cnki 特征检测技术,具有检测速度快,准确率,召回率较高,抗干扰性强等特征。
对任意一篇需要检测的文献,系统首先对其进行分层处理,按照篇章、段落、句子等层级分别创建指纹,而比对资源库中的比对文献,也采取同样技术创建指纹索引。这样的分层多阶指纹结构,不仅可以满足我们对超长文献的快速检测,而且,因为我们的最小指纹粒度为句子,因此,也满足了系统对检准率和 检全率的高要求。原则上,只要检测文献与比对文献存在一个相同的句子,就能被检测系统发现。
该指标体系从多个角度对检测文献中的文字复制情况进行了概括性描述。
在学位论文中,所有段的数量为段落数。
每一章节的后80%称之为章节尾部,尾部的文字复制比为尾部复制比。
学位论文学术不端行为检测系统(简称“tmlc”)以《中国学术文献网络出版总库》为全文比对数据库,实现了对抄袭与
总文字数是指该检测论文所有包含的字数,文字复制比与总文字数的乘积即为重合字数。
1.重合文字来源文献信息。
3.总检测指标。
因为学位论文一般较长,因此,系统一般按章检索,并且每一章给出子检测指标,该检测指标从多个角度对该章内容的检测情况进行了详细描述。
因为学位论文一般文字量较多,为了便于用户快速浏览检测结果。系统会自动对学位论文进行切分处理。有如下两种处理方式:
疑似章节数是则检测论文疑似存在学术不端行为的章节的数量。总章节数则是指学位论文总的章节数(对于不按章节显示,而是按照固定长度切分的论文,每一段落为一章节)。注意:系统只对疑似存在学术不端行为的论文生成检测报告。
检测系统自动生成一个检测报告单,详细列出检测文献的学术不端行为检测情况,用户可以对该报告单进行修改,生成终审报告。
2.若学位论文不存在明显的章节信息,或者不是ms word格式论文,则系统会自动按照每段1万余字符切分学位论文,按照切分后的结果显示。
cnki拥有强大的技术研发队伍,目前已经拥有了具有国际或国内领先水准的全面的数字出版的相关技术,包括资源采集技术,文本数据库加工技术,文本数据库技术, 数字资源版权保护技术, 知识挖掘技术, 自然语言处理技术、快速比对技术等。在海量的全文数据的基础上实现快速准确的检测,上述技术是基本的保证。
在学位论文中,所有段的长度的平均值即为平均段长。
上述指标从多个角度反映了检测文献的检测情况,便于用户进行针对性审核。下面对各项指标分别进行说明。
4.子检测指标。
2010年11月21日
文字复制比即指论文切分后每一章节段落的文字复制情况。文字复制比即指学位论文的某一章节与比对文献比较后,重合文字部分在该章节中所占的比例。比例越高,反映该章节越多的文字来自于其他已发表文献。文字复制比反映了文章“抄袭”的文字数量比例,一般来说,文字复制比越高,存在学术不端行为的可能性越大。文字复制比情况如图7所示。
系统详细列出重合文字来源文献信息,这些文献都是真实存在,而且应是公开发表或得到发表确认的。◆已发表文献检测:指检测系统能够自动将属于用户的已正式发表的学位论文检索出来,并对每一篇已发表文献进行实时检测,快速给出检测结果。在学位论文检测中,当连续文字超过一定比例时,称之为段。在本系统中,一般认为,连续200以上文字称为段。
◆论文检测:主要实现论文实时在线检测功能。
tmlc需要一个尽可能完备的全文数据比对资源库,而cnki的《中国学术文献网络出版总库》则正好满足这一要求。到目前为止,cnki拥有学术期刊7000余种,期刊全文文献2480万篇,期刊期数和 文献收录完整率都大于99.9%,文献量居国际国内同类产品之首;出版503家硕士学位点的72万篇优秀硕士学位论文,368家博士学位点的9.6万篇博士学位论文;1286家重要会议论文106万篇;515家重要报纸500多万篇;1376种重要年鉴787万篇;600多种工具书220多万条;学术引文索引数据600多万条;这些出版物做到平均日更新20000条记录;国家标准、专利、springer数据库也集成到cnki网络出版平台中;另外,出版平台还集成整合出版了各类第三方数据库资源1020种。
首部重合文字数指学位论文前1万字中重合的文字数量。尾部重合文字数是指除去前1万字,剩下的部分中重合的文字数量。对于学位论文,一般开头部分均是综述性的报告介绍,其重要性远低于论文尾部。
上述指标从整体情况描述了论文的检测情况,便于用户快速了解该论文总的检测概况。下面对上述指标分别进行说明。
总文字复制比则是指学位论文中总的重合字数在总的论文字数中所占的比例。通过该指标,我们可以直观了解到重合字数在该检测学位论文中所占的比例情况。
检测文献和 来源文献的详细比对信息,用户可以快速选择重合文字部分查阅。
剽窃、伪造、篡改等学术不端行为的快速检测,可供用户检测学位论文,并支持用户自建比对库。其系统示意图如图1所示。
系统根据指标参数以及其他元数据相关信息,自动给出一个预判的诊断类型,供审查人员参考。
tmlc的目的是辅助各研究生培养单位对学位论文质量进行评估,为审查论文提供技术服务。检测系统在对论文进行检测之后,生成检测报告,为判断论文性质提供相关依据。数据库,实现了对抄袭与
总文字数是指该检测论文所有包含的字数,文字复制比与总文字数的乘积即为重合字数。
1.重合文字来源文献信息。
3.总检测指标。
因为学位论文一般较长,因此,系统一般按章检索,并且每一章给出子检测指标,该检测指标从多个角度对该章内容的检测情况进行了详细描述。
因为学位论文一般文字量较多,为了便于用户快速浏览检测结果。系统会自动对学位论文进
行切分处理。有如下两种处理方式:
疑似章节数是则检测论文疑似存在学术不端行为的章节的数量。总章节数则是指学位论文总的章节数(对于不按章节显示,而是按照固定长度切分的论文,每一段落为一章节)。注意:系统只对疑似存在学术不端行为的论文生成检测报告。
检测系统自动生成一个检测报告单,详细列出检测文献的学术不端行为检测情况,用户可以对该报告单进行修改,生成终审报告。
2.若学位论文不存在明显的章节信息,或者不是ms word格式论文,则系统会自动按照每段1万余字符切分学位论文,按照切分后的结果显示。
cnki拥有强大的技术研发队伍,目前已经拥有了具有国际或国内领先水准的全面的数字出版的相关技术,包括资源采集技术,文本数据库加工技术,文本数据库技术, 数字资源版权保护技术, 知识挖掘技术, 自然语言处理技术、快速比对技术等。在海量的全文数据的基础上实现快速准确的检测,上述技术是基本的保证。
在学位论文中,所有段的长度的平均值即为平均段长。
上述指标从多个角度反映了检测文献的检测情况,便于用户进行针对性审核。下面对各项指标分别进行说明。
4.子检测指标。
2010年11月21日
文字复制比即指论文切分后每一章节段落的文字复制情况。文字复制比即指学位论文的某一章节与比对文献比较后,重合文字部分在该章节中所占的比例。比例越高,反映该章节越多的文字来自于其他已发表文献。文字复制比反映了文章“抄袭”的文字数量比例,一般来说,文字复制比越高,存在学术不端行为的可能性越大。文字复制比情况如图7所示。
系统详细列出重合文字来源文献信息,这些文献都是真实存在,而且应是公开发表或得到发表确认的。◆已发表文献检测:指检测系统能够自动将属于用户的已正式发表的学位论文检索出来,并对每一篇已发表文献进行实时检测,快速给出检测结果。在学位论文检测中,当连续文字超过一定比例时,称之为段。在本系统中,一般认为,连续200以上文字称为段。◆论文检测:主要实现论文实时在线检测功能。
tmlc需要一个尽可能完备的全文数据比对资源库,而cnki的《中国学术文献网络出版总库》则正好满足这一要求。到目前为止,cnki拥有学术期刊7000余种,期刊全文文献2480万篇,期刊期数和 文献收录完整率都大于99.9%,文献量居国际国内同类产品之首;出版503家硕士学位
点的72万篇优秀硕士学位论文,368家博士学位点的9.6万篇博士学位论文;1286家重要会议论文106万篇;515家重要报纸500多万篇;1376种重要年鉴787万篇;600多种工具书220多万条;学术引文索引数据600多万条;这些出版物做到平均日更新20000条记录;国家标准、专利、springer数据库也集成到cnki网络出版平台中;另外,出版平台还集成整合出版了各类第三方数据库资源1020种。
首部重合文字数指学位论文前1万字中重合的文字数量。尾部重合文字数是指除去前1万字,剩下的部分中重合的文字数量。对于学位论文,一般开头部分均是综述性的报告介绍,其重要性远低于论文尾部。
上述指标从整体情况描述了论文的检测情况,便于用户快速了解该论文总的检测概况。下面对上述指标分别进行说明。
总文字复制比则是指学位论文中总的重合字数在总的论文字数中所占的比例。通过该指标,我们可以直观了解到重合字数在该检测学位论文中所占的比例情况。
检测文献和和 源文献的详细比对信息,用户可以快速选择重合文字部分查阅。
剽窃、伪造、篡改等学术不端行为的快速检测,可供用户检测学位论文,并支持用户自建比对库。其系统示意图如图1所示。
系统根据指标参数以及其他元数据相关信息,自动给出一个预判的诊断类型,供审查人员参考。
tmlc的目的是辅助各研究生培养单位对学位论文质量进行评估,为审查论文提供技术服务。检测系统在对论文进行检测之后,生成检测报告,为判断论文性质提供相关依据。
