作者在毕业季为解决论文查重问题，使用Python开发了一个简单的文本降重工具。该工具通过百度翻译API，进行多语言转换以生成新的句子，实现降重目的。用户只需输入appid和key，即可将文本输入，点击开始按钮完成降重，新文本可直接复制。此工具虽初级，但可供进一步扩展，旨在帮助学弟学妹。
前言：
时值毕业季，有不少小伙伴深受论文查重的困扰。因此我便想到做一个简单的自动去重的工具，先看看效果，我们再对原理或是代码实现做进一步的分析。
首先需要输入appid以及key，这些可以在百度翻译开放平台申请一个账号，可以免费申请一个账号。接着将需要进行降重的文本内容复制到相应的输入框内，点击开始按钮，即可输出不同但意思相近的语句，即达到降重去重的作用。点击复制按钮便可以将得到的新文本复制到剪贴板上，点击清楚按钮可以重新输入需要降重的文本，并且循环往复地进行。
去重原理
论文查重的粒度是句子，两个句子的相似度主要取决于句子包含哪些词，以及词在句子中的位置。句子相似度只是文字上的对比，不考虑语义上的相近。
正因如此，我们可以采取的措施便是变换句子结构，使用近似词替换。
为了完成这些句子的自动替换，从而达到降重的目的，这里很容易便想到利用不同语种之间的互相转换来生成新文本。比如在本工具中，我采用了中文→英文→韩文→中文的策略，你也可以采取更长的转换路径，但那样似乎会在很大程度上降低文本的可读性。
开放平台的使用
语句的翻译我采用了百度翻译开放平台的接口，简单地申请之后就可以获取每个月200万的免费字符翻译权限。
此API的接入方式略微有些麻烦，需要生成签名sign并且拼接完整的url。
def translate(q,
最低0.47元/天 解锁文章
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
