自推出以来,OpenAI 的 ChatGPT 已成为全球教育机构关注的焦点,因为学生开始使用它来写论文和考试作弊。考虑到聊天机器人生成的文本看起来多么自然,教师很难确定学生的作业是否是原创的。
为了帮助老师评估学生的作业,一名计算机科学毕业生开发了 GPTZero,这是一种人工智能检查工具,可以确定文本是否是人工生成的。
这一切听起来都很好,但是 GPTZero 可以检测人工智能创建的内容吗?它的准确度如何?
GPTZero 是由计算机科学专业毕业生 Edward Tian 开发的人工智能文本分析工具,用于帮助教师区分抄袭文本和原创作品。该工具检查文本中的复杂性和突发性,以确定它是人工生成还是由人类制作。
无需详细介绍,让我们看看这些术语的含义:
Perplexity 衡量自然语言处理 (NLP) 中的文本随机性。人类编写的文本往往结构性较差且更不可预测,因此其困惑度值应该更高。相比之下,人工智能生成的文本应该具有较低的困惑度分数。突发性考虑了困惑度中未考虑的其他变量,以改进文本分析。该术语指的是随机簇中不常见项目的出现。人工智能生成的文本往往比人类编写的文本具有更一致的结构。突发性帮助我们识别这一点。GPTZero Classic 自 2023 年初开始向公众开放,并且免费使用。但是,免费版本的每个文档的字符数限制为 5,000 个字符,并且您一次只能批量分析三个文档。
GPTZero 提供三个高级版本,以满足希望每月分析数百万单词的用户的需求:Essential(价格为每月 10 美元)、Premium(价格为每月 16 美元)和 Professional(价格为 23 美元)每月)。高级版本中每个文档的字符数限制比免费版本更高,并且除其他好处外,它们还允许您每小时执行更多扫描。
请按照以下步骤订阅这些高级版本:
导航到 GPTZero 的网站。 单击页面右上角的仪表板选项卡。 使用您现有的帐户登录或创建一个新帐户。 登录后,您可以比较可用的计划并升级到最适合您需求的计划。或者,当您在 GPTZero 主页上时,单击文本框底部的升级按钮即可查看,比较并购买付费计划。
与 ChatGPT 不同,GPTZero 不需要注册。您可以通过网站访问该工具。
转到 GPTZero。 将要分析的文本复制并粘贴到框中或上传文件。 单击“检查来源”框。扫描完成后,GPTZero 将告诉您该文本是由人类编写还是由人工智能生成。
通过在 Chrome 浏览器上下载 GPTZero 的免费 Origin 扩展,您可以扫描整个网页和 Google 文档以查找 AI 生成的文本。这一新功能简化了在线验证信息的过程。
导航至 Chrome Web Store 上的 Origin 扩展页面。 单击“添加到 Chrome”以下载扩展程序。 接下来,确认安装以继续。 安装扩展程序后,您可以使用 Google 帐户登录或创建新帐户。 要扫描网页或 Google 文档,请单击屏幕上的“来源”按钮,然后选择“扫描整页”。您现在可以查看结果并确定内容是由人编写还是生成通过人工智能。
GPTZero 与其他几个 AI 检测工具不同的一个功能是它可以分析您的写作模式。该平台提供扫描历史记录,您可以使用它来查看使用该工具扫描的任何文本。
此外,单击特定的搜索结果会调出有关您的写作的更详细的数据。从本质上讲,您将能够了解为什么您的写作被认为是人类或人工智能生成的。
因此,例如,如果 GPTZero 将您编写的内容标记为 AI 生成,则访问写作分析将告诉您原因,例如该内容具有低复杂性和高突发性。您可以纠正这些问题,以提高内容的质量、可读性和真实性。
为了测试 GPTZero 检测 AI 生成文本的准确度,我们将分析该工具中的三种文本:AI 生成的文本、人工编写的文本以及已由其他工具转述的 AI 生成的文本。让我们看看 GPTZero 如何响应每个输入。
为了分析人工智能生成的文本,我们首先使用 ChatGPT(一个由 GPT 技术支持的人工智能聊天机器人)生成文本。为此,请按照以下步骤操作:
转到 OpenAI。 单击尝试 ChatGPT 按钮。 登录或注册以创建帐户。 输入任何提示以生成一段文本。 完成后复制该工具生成的文本。 正如我们之前所解释的,分析 GPTZero 中的文本。当我们执行此测试时,GPTZero 对一系列人工智能编写的文本给出了不同的结果。有时,它无法以任何方式判断文本是人工智能生成的,而有时,它正确地推测大部分文本是人工智能生成的。
您还可以使用其他AI写作工具来生成您想要分析的文本。
您可以从数百种释义工具中进行选择来释义文本。在本例中,我们使用了 Scribbr。如果您想使用相同的工具,请按照以下步骤操作:
转到 Scribbr。 复制我们之前在 GPTZero 中分析的 AI 生成文本并将其粘贴到该工具中。 单击“释义”按钮。 让 Scribbr 为您释义文本。 释义后再次运行 GPTZero 测试。我们发现轻微的释义让 GPTZero 确定文本是否是 AI 生成变得更加困难,但总体来说是一个混合体。我还要补充一点,转述的输出质量很差。左边的文字是原文,右边的文字是转述版本。
在某些情况下,GPTZero 等工具会返回误报结果,这意味着它们认为某些内容是不正确的。不是。为了确定 GPTZero 是否也会产生误报,我们在该工具中进行了多次测试,分析了不同的人类编写的文本片段。
GPTZero 的结果在大部分情况下都是准确的,尽管将一个句子识别为可能是人工智能编写的。
根據我們的測試,僅依賴此工具的結果可能有風險。事實上,每次使用該工具產生結果時,都會出現免責聲明,警告教育工作者不要依賴該工具的結果。
因此,除非該工具的開發人員保證其結果萬無一失,否則教育工作者不應完全依賴它。為什麼?因為僅僅因為 GPTZero 回歸誤報,學生就獲得較差的成績,這是不公平的。
雖然還有很長的路要走,但 GPTZero 在減少誤報方面已取得了重大進展。該公司部署的新深度學習模式推動了這些努力,使人工智慧檢測工具比競爭對手的服務更加可靠。
新的深度學習模型使用更多樣化的驗證資料集,借鑒了教育文本、報紙文章、社群媒體貼文和問答內容等來源。這種擴展且多樣化的數據集使 GPTZero 能夠更好地區分人類生成的數據和人工智慧產生的數據。而且,該公司還聲稱,GPTZero的預測比以前更有信心」。
作為OpenAI GPT技術的潛在解藥,GPTZero具有巨大的潛力;然而,它還有很長的路要走。在這一點上,它並不完全值得信賴。但GPTZero的主版本能否克服所有限制並準確捕捉AI內容呢?我們只需要等待就知道了。
以上是什么是 GPTZero?如何使用它来检测人工智能生成的文本的详细内容。更多信息请关注PHP中文网其他相关文章!