本科查重是什么?一文讲清查重目的与常见方式

查重入门:查重率怎么看、怎么降 约 7 分钟
  • 查重
  • 学术诚信
  • 论文原创性
本文目录

1. 查重的定义

查重,就是对论文或者文稿进行相似度检测,从而发现抄袭或者重复的内容。其主要目的并不是为了打压复制,而是为了维护学术诚信和原创性。

就技术而言,查重就是利用文本比对算法,把待检测文档同海量数据库里的已有文献展开逐段、逐句乃至逐字的匹配计算,最后给出相似度百分比报告。该过程被普遍地用在学术论文评审、期刊投稿审核、内容平台反抄袭、企业内部文档合规检查等场合中。

根据教育部《学位论文作假行为处理办法》(2012年颁布,2016年修订)第三条,学位申请者的学位论文出现购买、由他人代写、剽窃他人作品和学术成果等作假情形的,将被取消学位申请资格,已获学位的依法撤销学位。查重系统就是这个法规的技术支撑。

常见查重系统对比

系统名称主要覆盖范围数据库规模核心识别能力市场占有率(高校)典型用户
知网(CNKI)中文学术论文、期刊、会议覆盖中文学术论文90%以上连续13字重复标记、跨库比对(含学位论文)约85%国内高校、科研机构
维普(VIP)中文学术资源超2000万篇期刊论文标红连续重复段、支持自定义阈值约10%部分高校、期刊社
Turnitin英文论文、国际期刊含全球学术数据库、学生论文库语法改写检测、跨语言抄袭筛查约60%(国际高校)海外高校、英文期刊投稿
万方中文学位论文、期刊超500万篇标注相似度、引用率约5%部分高校、企业内部

数据来源:2024年CNKI年度报告、维普官网、Turnitin产品说明页。

2. 查重的目的与意义

保障学术诚信,防止抄袭

查重最直接的作用就是发现直接抄袭的行为。按照学术出版规范中期刊学术不端行为界定的规定,抄袭可以分为以下几种类型

  • 直接抄袭:逐字复制他人原文,没有加引号或者标注来源。甲论文中连续200字与乙论文完全一致,没有引用标记。
  • 观点抄袭:窃取他人的核心论点、研究思路,用不同的文字来表达。该类行为查重系统不能直接识别出来,但是可以通过人工审阅来判定。
  • 改写不充分:只替换了部分词语(把“使用”改为“采用”),但是原句的结构和关键词没有变化。查重系统用算法检测出大于阈值的相似度。

帮助作者提高原创性

查重不是终点,是改进的开始。很多学生第一次查重后,发现重复率在30%到40%之间,于是开始认真地去了解自己的引用是否规范,表达是否独立。硕士生小李用知网查重后,发现连续13个字重复被标红。他把原文的“深度学习在图像识别中应用广泛”改为“图像识别领域大量使用深度学习技术”,并且通过改变语序、增加过渡句等方式,使重复率从45%降到12%。不但可以降低相似度,而且可以提高论文的表达质量。

给评审提供客观依据

查重系统给出的相似度结果,是评审专家、编辑判断论文原创性的重要依据。大多数高校规定本科毕业论文查重结果要低于15%到20%(具体阈值因校而异),期刊投稿一般要求低于10%。低于阈值的论文可以进入后续评审,超过的要修改或者直接被拒。

3. 常见的查重技术与方法

3.1 关键词匹配法

最基础的查重方式就是统计文档中高频关键词出现的次数,然后和数据库中的文献进行对比。如果关键词出现频率异常集中,并且与某篇文献重合,那么就标记为疑似抄袭。

优点:计算速度快,适合初步筛选。

缺点:漏判率高,不能识别同义替换(把“深度学习”改为“深度神经网络”)。

3.2 字符串相似度比对

这是目前主流查重系统的主要算法。其原理是,系统把文档分成固定长度的字符串(20个字符或者13个连续汉字),然后和数据库中所有的文献逐段做滑动窗口匹配,计算重合度。知网使用的是连续13个汉字重复就标红的规则。

技术解释:滑动窗口文本比对算法是查重系统的技术基础。系统把文档分成定长字符串,和数据库逐段对比,算出相似度。例如,待检测句“本研究采用混合数据分析方法”,系统会切分成“本研究采用混合”、“研究采用混合数据”、“采用混合数据分析”等窗口,再和数据库逐段比较。

不同系统的差异

  • 知网:采用“连续13字重复”规则,对改写不充分的文本识别率较高,但对同义替换(如“采用”→“运用”)的检测能力有限。
  • Turnitin:结合了语法分析和语义相似度,能够识别同义替换(如“increase”→“rise”)和句式调整(如主谓宾倒装),但无法处理跨语言抄袭(如中译英后直接使用)。

3.3 语义相似度检测(NLP)

基于自然语言处理(NLP)的深度学习模型,比如BERT、GPT,用向量化文本并计算余弦相似度的方式可以找到词义相近但文字不同的句子。例如,“该方法收敛速度快”和“算法的收敛速度很快”在语义空间中会被判定为高相似度。

优点:识别同义替换、句子结构重组的能力强。

缺点:计算资源消耗大,而且对于高度专业化的术语(“卷积神经网络”和“CNN”)会误认为是不相似的。

常见查重技术优缺点对比

技术类型原理适用场景优点缺点
关键词匹配法统计高频词重合快速筛选速度快漏判率高
字符串相似度比对滑动窗口匹配逐字剽窃检测检测精确度高对同义替换不敏感
语义相似度检测向量化+余弦相似度同义改写检测识别改写能力强计算耗时,需足够算力

4. 查重的典型应用场景

根据2024年中国学术不端行为检测系统市场报告显示,查重在各个场景的使用频率为学术论文查重约占65%,内容平台反抄袭约占25%,企业内部文档合规约占10%。

查重应用场景分布

学术论文查重

这是最主要的应用场景,包括:

  • 本科毕业论文:毕业前必须经过学校指定的查重系统检测,达到规定的阈值才能参加答辩。
  • 硕士/博士论文:盲审前需要进行查重,重复率一般要求控制在10%到15%以下。
  • 期刊投稿:向《科学通报》、《中国社会科学》等权威期刊投稿时需要附带查重报告。

内容平台反抄袭

各大内容创作平台(知乎、微信公众号、百家号等)用查重技术来识别洗稿、伪原创内容。例如,某平台发现用户发布的文章和一篇已经发表的论文内容相似度大于70%,就认定为抄袭,对其进行限流或者删除。

企业内部文档合规检查

金融、咨询、法律等行业的企业在项目中要保证内部报告、方案没有外部抄袭或者泄露内部机密文档的情况。查重系统可以将待提交的文档与内部库、外部公开文献进行对比,找出异常相似的内容。

查重的基本流程

查重系统从提交到出报告的典型流程图

提交待检文本系统进行分词和索引与数据库比对并生成相似度报告

具体过程如下:

1. 用户上传:将论文(Word或PDF格式)提交至查重系统,系统自动提取文本内容。

2. 预处理:系统进行去噪处理(去除页眉页脚、参考文献格式等),然后进行分词、切分长字符串(如每13-20个汉字为一个窗口)。

3. 数据库比对:将切分后的文本片段与在线数据库(包括已发表论文、图书、网络资源)进行逐段匹配。

4. 相似度计算:用滑动窗口算法计算重合片段的比例,得到总体相似度百分比。

5. 生成报告:输出带有标红、标黄、标蓝的详细报告,标明相似来源、重复率、引用率等指标。

5. 查重的局限性

对改写、同义替换检测能力有限

虽然NLP技术有了很大的进步,但是大部分的查重系统(知网等)仍然使用字符串匹配的方式。如果作者把“研究表明”改成“从数据来看”,或者把“深度学习”改成“深层神经网络”,那么系统就无法识别出来。造成技术性降重的灰色地带,也就是用机器同义替换来降低表面的重复率,但是并没有提高原创性。

跨语言抄袭难以识别

把英文论文翻译成中文直接使用,查重系统一般检测不出来,因为数据库里的英文文献和中文待检文本不在同一个语义空间里。高端系统(Turnitin高级版)已经加入了跨语言比对,但是覆盖面还比较小。

无法判断引用是否合理

查重系统只能识别文本重复,不能判断引用是否合理。例如,一段引用虽然标注了来源,但是长段直接复制原文(超过合理篇幅),查重系统会标记为引用(标绿色),但是人工审阅时仍然可以判定为过度引用或者不当引用。另外,查重系统不能识别观点抄袭,即窃取他人的核心论点,但是用自己的语言来表达,这种行为还是需要人工来判定。

常见误区与修改建议

常见误区

误区一:字数越少越容易过查重

有些学生认为论文篇幅小,查重时重复的概率就小。实际上查重计算的是相似内容的占比,而不是绝对字数。一篇3000字的论文如果有500字是抄袭的,那么重复率大约是16.7%;而一篇10000字的论文如果也抄袭了500字,那么重复率只有5%。因此字数少的反而会因为重复内容占的比例高而更容易超标。

误区二:改写后不用查重

很多学生使用同义替换工具或者自己改写之后,就认为已经安全了,不再进行查重。但是主流查重系统对于改写不充分的(只替换个别词语)识别率比较高。小李第一次改写后没有查重就直接提交了,结果重复率还是28%,因为系统检测到他的改写后的句子和原文结构一样(主谓宾顺序一致,只换了动词)。改写后必须经过查重系统的检验,保证相似度小于阈值。

误区三:查重结果等于抄袭判定

查重系统输出的相似度百分比并不等同于抄袭比例。报告中“引用率”部分(直接引用他人原文并注明出处)虽然标蓝,但是合理引用,不构成抄袭。而“重复率”指的是没有注明出处的重复内容,这是判定抄袭的主要标准。混淆两者会造成误判,把合理引用当作抄袭,或者把没有标明来源的重复内容当作合理引用。

查重后如何修改建议

1. 重度重复段落(标红):优先修改。如果是直接引用,需要加上引号并注明出处;如果是改写不充分,需要调整语序、替换核心动词、合并或者拆分句子。

2. 中度重复段落(标黄):检查是否属于合理引用。如果引用的篇幅过长(超过100字),就需要删减或者提炼出主要观点;如果是改写,可以改变表达方式。

3. 轻度重复段落(标蓝):一般为引用或者常见表述,可以保留,但是需要保证引用格式正确(标注作者、年份、页码)。

修改建议:对於标红段可以采用同义替换、句子结构调整、增加新内容的组合方式。例如,把原文的“本研究采用混合数据分析方法,结合定性与定量分析”改为“本研究中用到了定性分析和定量计算两种方法来对数据进行深入挖掘”。同时也可以参考以下AI提示词指令进行降重:

对标题为《XXX》的论文进行专业的学术降重,用同义词替换、句子结构调整、增加新内容等方法进行降重。需要降重的内容为:XXX。

常见问题

常见问题

共 3 个问题,点击展开查看答案

  • 查重就是利用技术手段对文本进行检测,看是否存在相似或者重复的内容,在学术论文、期刊投稿、毕业论文等场合中被广泛使用,用以发现抄袭、不当引用等学术不端行为。

  • 查重的主要目的就是保证学术诚信,防止抄袭、剽窃,促使作者提高原创性,给审稿、编辑提供客观的依据。

  • 常见的查重方式有基于关键词匹配的简单查重、基于字符串相似度的文本比对、基于自然语言处理的语义查重等,常用的系统有知网、维普、Turnitin等。