今年推出了许多人工智能助手和工具,这似乎正在彻底改变专业人士和学生的工作方式。您现在可以使用 AI 助手直接生成内容、图像等,这消除了许多工作流程中平凡任务的麻烦。在这些新的AI助手中,流行的ChatGPT,这是一款LLM聊天机器人,只要它属于其功能范围,它几乎可以做任何事情。您可以使用 ChatGPT 生成文章、演讲、研究论文、历史账户等等。然而,这导致世界各地的许多用户怀疑聊天机器人是否真的产生了新的原创内容。由于它已经在互联网上接受了大量现有数据的训练,ChatGPT 不会从可用数据中抄袭其输出吗?让我们来了解一下!
ChatGPT会给出相同的回应吗?
尽管 ChatGPT 有其局限性,但聊天机器人似乎非常擅长其工作。在我们下面进行的测试中,ChatGPT 似乎对同一提示给出了独特的响应。首先使用相同的提示进行测试,然后在同一对话中,从同一帐户,然后从不同的用户帐户进行测试。在所有这些情况下,ChatGPT 似乎对同一提示产生了独特的响应。
提示比较 1:不同对话中的相同提示
如您所见,上面的响应彼此非常相似,但并不相同。更改了一些单词,同时保持上下文与原始响应非常相似。
提示比较 2:同一对话中的相同提示
当 ChatGPT 在同一对话中出现相同的提示时,我们会得到类似的结果。虽然这一次,文本似乎与 ChatGPT 之前的响应完全匹配,这里和那里只有一些小的更改。
提示比较 3:来自不同用户帐户的相同提示
这就是响应之间的差异非常突出的地方。与使用同一帐户时收到的响应不同,我们对来自不同帐户的同一提示得到了完全不同的响应。ChatGPT 改变了它构建答案的方式,同时还包含不同的示例。
ChatGPT 会抄袭其输出吗?
现在让我们解决房间里的大象。ChatGPT 会抄袭其输出吗?剽窃是指将别人的作品作为自己的作品呈现的做法。虽然对于人工智能聊天机器人来说不是问题,但它会给专业人士和学生带来许多问题。因此,让我们做一些测试来检查 ChatGPT 是否抄袭了它的回复。让我们开始吧。
测试 1:提示输入已发布的内容
让我们首先测试一些我们自己发布的内容。让我们从我们网站上最近发布的帖子开始。我们将向 ChatGPT 提供标题作为提示,然后检查结果是否存在抄袭。让我们使用帖子“如何在Chrome上使用Bing Chat”。
如您所见,来自 ChatGPT 的大约 17% 的文本确实被标记为抄袭。
但是,如果您注意到,内容会被标记为与该主题无关的随机网站的抄袭。因此,根据您的客户或您当前的需求,ChatGPT 生成的内容确实可以通过。
测试 2:提示输入已发布的故事
接下来,让我们测试一个流行的、已发布的故事。这将使我们能够根据大多数网站内容检查 ChatGPT 的响应,因为这个故事将非常受欢迎,目前应该被许多网站覆盖。让我们看看此示例中的“最佳iOS 15功能”。
注意:我们正在使用 ChatGPT 的免费版本,该版本使用 GPT 3.5,该版本已在 2021 年之前发布的内容上进行训练,这就是为什么我们选择了一个较旧的热门故事。
现在让我们检查一下 ChatGPT 对抄袭的回应。
这是使用 Grammarly 的抄袭检查器检查内容时的结果。如您所见,内容似乎非常原始。但是,为了安全起见,让我们也通过Quetext运行它。
Quetext似乎将大约5%的内容检测为抄袭,这是非常真实的。但这并不是通过一些编辑无法解决的。目前,ChatGPT 似乎正在生成无法标记为抄袭的原创内容。
测试 3:提示发布新闻文章
现在让我们尝试2020年发布的新闻故事。这将有助于我们确保我们可以针对 ChatGPT 的知识库对其进行测试,因为它在 2021 年之前只经过公开内容的训练。让我们让 ChatGPT 为我们在 1 年发布的“什么是 1v2020.lol 游戏以及为什么它很特别”帖子生成响应。
现在让我们检查一下 ChatGPT 生成的内容是否存在抄袭。
这是事情往往不同的地方。ChatGPT 生成的 10% 的内容似乎被 Grammarly 标记为抄袭。让我们检查一下Quetext,看看ChatGPT的内容如何表现抄袭。
不幸的是,根据Quetext的说法,ChatGPT生成的内容中约有15%是抄袭的。这可能是一个问题,具体取决于您的客户;但是,如果您注意到,匹配的短语似乎非常通用。找到匹配内容的网站并没有专门解决 1v1。
测试 4:提示输入已发布的产品描述
测试抄袭的另一种方法是测试产品描述。由于产品规格保持不变,产品描述可能非常困难,这可能会使 ChatGPT 更难生成原始响应。让我们尝试iPhone 12 Pro的产品描述。
现在让我们使用 Grammarly 检查生成的内容是否存在抄袭。
这一次 ChatGPT 似乎相当公平,没有检测到任何内容抄袭。但是,为了安全起见,让我们也检查一下Quetext上的内容。
这就是事情变得有点复杂的地方。根据Quetext的说法,大约14%的文本似乎是抄袭的。但是,与之前的结果一样,似乎只有通用陈述与发布的内容相匹配,发布的内容根本不是关于iPhone 12 Pro的。现在让我们也尝试iPhone 12 Pro的技术规格,看看ChatGPT的表现如何。
让我们通过语法的抄袭检查器运行 ChatGPT 生成的内容。
在技术规格方面,大约 14% 的内容似乎是抄袭的。这是意料之中的,因为同一产品的功能和技术规格最终将在各个帖子中相同。让我们看看使用Quetext检查时内容的表现如何。
这是事情趋向于变得更加透明的地方。在技术规格方面,大约 61% 的内容似乎是抄袭的。这很多,可能会让您陷入麻烦,具体取决于您的客户及其要求。
测试5:测试ChatGPT对自己的抄袭检查器的回应
这有点狡猾,但为什么不呢?让我们让 ChatGPT 分析自己对抄袭的反应,然后让我们检查一下它与流行的抄袭检查工具 Quetext 相比的表现如何。让我们尝试提示“如何在Windows PC上使用Google Duo”。
现在让我们使用 ChatGPT 检查响应是否存在抄袭。
最后,让我们使用 Grammarly 的抄袭检查器检查响应。
大约 18% 的内容被检测到抄袭。这一次,网站似乎是相关的,ChatGPT使用的短语似乎与发布的内容完全匹配。让我们看看使用Quetext检查内容时的表现如何。
Quetext还发现内容被抄袭。如果得分为 42%,则内容可能会被您的客户拒绝,除非您决定对其进行编辑或删除匹配的短语。
ChatGPT 会被 AI 检测工具标记吗?
是的,ChatGPT 会被 AI 检测工具标记,尤其是在使用 OpenAI 自己的分类器时。这是因为这些检测工具是专门为检测 AI 生成的内容而制作和生成的。人工智能生成的内容一直是世界各地组织和教育机构非常关注的问题,因为许多教师希望确保他们的学生在此过程中学习重要课程的同时生成原创内容和报告。
AI 检测工具的准确性如何
最近,这引起了激烈的争论,因为许多内容创作者和作家认为他们的内容可能会被人工智能检测工具不恰当地标记。那么这是真的吗?让我们在几个测试中找出答案。
测试 1:测试 ChatGPT 的输出
让我们首先测试一个 ChatGPT 输出,看看它与流行的 AI 检测工具相比如何。我们将使用“如何制作蛋糕”作为此示例的提示。
这是 ChatGPT 生成的响应。现在让我们对照 OpenAI 分类器检查一下。
现在让我们检查一下在 CopyLeaks 上生成的响应。
结果相当令人惊讶。虽然您希望OpenAI分类器能够检测ChatGPT生成的内容,但事实并非如此。根据分类器,内容很可能是由人类生成的。另一方面,Copyleaks非常准确,最终将大部分内容检测为AI生成的。
测试 2:测试在 ChatGPT 发布之前发布的帖子
现在我们已经熟悉了 ChatGPT 生成的内容会发生什么,让我们检查一下我在 2020 年最初发布的作品。当时这些AI工具都不可用,因此看看这些内容与这些流行的AI检测工具相比如何将会很有趣。让我们用这个“’糖豆人’可以免费玩吗?”的文章来做这个例子。让我们首先使用 OpenAI 分类器来检查它。
现在让我们用CopyLeaks检查一下。
这就是结果似乎反映了我们的期望的地方。Copyleaks和OpenAI分类器都发现内容是由人类而不是AI生成的。
如果您是作家,那么在专业撰写内容时,您可能会意识到抄袭的问题。即使您从头开始编写内容,有时也会检测到您的某些内容存在抄袭。ChatGPT的情况似乎也是如此。在生成有关新主题的内容时,ChatGPT 似乎主要生成原创内容。虽然为较旧或利基主题生成内容会导致更多的抄袭。所以是的,ChatGPT 生成的内容可以被检测为抄袭,通过可靠的来源检查它总是一个好主意,以防这对您来说是一个因素。