存在 AI 内容检测工具——但您需要它们吗(您是否可以信任它们)?

已发表: 2023-06-08

许多行业都在不知不觉中使用人工智能生成的内容。

例如,在高等教育中,教育工作者希望学生编写原创内容,以便他们能够评估学生的独立技能。 因此,他们使用 AI 内容检测工具是有道理的。

但是营销呢? 作家是否使用生成式人工智能(例如 ChatGPT、谷歌的 Bard、微软的 Bing 或其他)是否重要? 如果自由职业者交出由生成式 AI 工具编写的作品怎么办? 他们应该得到与从头开始编写的一样的报酬吗? 如果他们使用 AI 作为辅助并重新制作内容怎么办?

AI 生成的文案的缺点已被详细地描述和讨论。 AI 写作工具的亮点包括:

  • 依赖现有信息——已经创建的内容。 他们没有开发出有创意的新东西,为读者提供的价值较低。
  • 可以生成虚假信息。 如果不进行彻底的事实核查,您就不能发布内容。
  • 如果人工智能系统收到太多类似的请求,就会产生重复的内容和版权问题。 相同的内容会损害搜索引擎优化 (SEO)、电子商务 CRO 和出版商的声誉。

谷歌称 AI 材料为垃圾邮件时引起了一些混乱。 但其搜索倡导者约翰·穆勒 (John Mueller) 澄清说,如果机器创建的内容写得不好、关键字堆砌且质量低下,则会受到处罚——同样的处罚也适用于具有这些属性的人工创建的内容。

最近,一位自由撰稿人在 Twitter 上发起了一场讨论,以阐明这些人工智能工具如何影响客户关系。 它强调了客户如何拒绝付款,因为他们指责自由职业者使用 AI 编写工具(即使他们没有使用。)

但这些公司是如何断定这些创作来自人工智能的呢? 他们很有可能使用了人工智能检测工具。 它们可能看起来像一个方便的检查器,但它们是最好的方法吗? 是的,它们可以防止错误信息和剽窃。 但正如那些自由职业者所发现的那样,它们也可能会引发毫无根据的剽窃指控。

如果您使用 AI 检测器,请考虑这两种观点,并确保您了解其局限性。

测试 AI 内容检测工具

旨在区分人类和人工智能生成的内容的工具可以执行语言分析,以查看内容是否存在语义或重复问题(人工智能参与的指标)。 他们还可以进行比较分析——系统使用已知的人工智能生成的文本并评估内容以查看是否相似。

#AI-content 检测工具查看文本是否存在语义或重复问题。 Kate Parish 通过@CMIContent 表示,他们还会根据现有的 AI 内容对其进行检查。 点击鸣叫

对于本文,我通过提交两份内容测试了四种流行的人工智能检查器——一份是人工智能生成的,一份是人工创建的。 这是我发现的:

1. 人工智能分类器

ChatGPT 的开发者 OpenAI 还创建了 AI 分类器来区分 AI 生成的文本和人工编写的文本。 用户将文本粘贴到打开的框中,然后单击提交。 但是,它至少需要 1,000 个字符才能完成评估,并且仅适用于英文文本。

图片来源

OpenAI 表示其测试表明分类器的结论仅在 26% 的时间内得出真正的阳性率(可能是 AI 编写的),这使其不可靠。 它还表示,在 9% 的情况下,系统错误地将人工来源的内容识别为人工智能。

@OpenAI 表示其#AIClassifier 仅在 26% 的时间内检测到可能由 AI 编写的#content,Kate Parish 通过@CMIContent 表示。 点击鸣叫

鉴于 OpenAI 收集了用户的反馈,AI 分类器系统可能会得到改进。 现在,让我们看看我的测试发生了什么。

人工智能生成的文本结论:准确。 “分类器认为文本可能是人工智能生成的。”

人工生成的文本结论:准确。 “分类器认为文本不太可能是人工智能生成的。”

价格:免费

2. GPTZero

GPTZero 自称是世界第一的 AI 检测器,拥有超过 100 万用户。 它根据文本复杂性(困惑度)和句子变化(突发性)来衡量 AI 的参与度。 越复杂和多变,越有可能是人写的文本。

GPTZero 仍然有其局限性。 它在较长的帖子而不是短篇文章中效果更好。 它还侧重于成人写的英语,因此它对其他语言的结论可能更不准确。

用户将他们的文本粘贴到框中或上传文件,然后单击“获取结果”按钮。

图片来源

人工智能生成的文本结论:不准确。 它突出显示了它认为是人工智能生成的文本,但错误地认为前四段是人类开发的。

人工生成的文本结论:准确。 这并不表示任何句子更有可能由 AI 编写。

价格:免费

3. 复制泄露

Copyleaks 检测 AI 和剽窃的内容。 它可以在其网站上使用,作为浏览器扩展,或集成到您的网站或学习管理系统中。

它支持 100 多种语言。 Copyleaks 返回其检测 AI 生成内容的置信度的百分比概率。

AI 源文本(工具成功完成任务):

图片来源

人工智能生成的文本结论:准确。 它以红色突出显示所有文本以指示检测到的 AI 内容(显示 AI 的概率为 96.5%)。

人工生成的文本结论:准确。 正如它所说,“这是人类文本”(人类的概率为 98.2%)。

价格:免费

4.GPTR雷达

GPTRadar 有一个简单易用的界面。 它的评估包括一个结论和一个文本困惑度分数,以表明它对单词的预测能力。

@GPTRadar 得出结论#content 可能是人类还是人工智能生成的。 Kate Parish 通过@CMIContent 表示,它还为评估增加了一个困惑分数。 点击鸣叫

困惑的范围从一到无穷大。 困惑度得分越低,文本越有可能来自 AI。 该系统还将部分文本分开,并将它们标记为人工或人工智能生成的。

图片来源

人工智能生成的文本结论:错误。 它将其标记为“可能是人类生成的”,并给出了 82 分的困惑度。

人工生成的文本结论:准确。 它将文本识别为“可能是人类生成的”,并给出了 102 的困惑度分数。

价格:免费赠送2000个代币(约2500字); 每 100 个代币两美分

前方有什么

随着 AI 开发的内容工具的增加,更多检测它的解决方案将随之而来。 但需要注意的是——没有工具可以 100% 准确。

您必须评估检测工具是否是您的内容营销所必需的。 你会像谷歌一样,认为内容的质量、准确性和相关性比 AI 在创作中的作用更重要吗? 还是您会决定 AI 的参与对您的目标更重要?

文章中提到的所有工具均由作者标识。 如果您有推荐的工具,欢迎在评论中补充。

注册参加华盛顿特区的 Content Marketing World 使用代码 BLOG100 节省 100 美元。

精心挑选的相关内容:

  • 与 ChatGPT 的坦诚交谈如何让资深编辑感到惊讶
  • 如何正确使用 AI 生成的内容(并避免缺点)
  • 品牌应该遵循人工智能使用的道德准则吗? 公关委员会同意

封面图片由 Joseph Kalinowski/Content Marketing Institute 提供