意想不到的合作伙伴利用ChatGPT 維護學術誠信

文／阿諾·盧瓦（Arno Louw）

ChatGPT 及其文本生成人工智能在南非大學和世界各地引起了軒然大波。人們普遍認為，學生可能會濫用人工智能來撰寫書面作業，教師則難以驗證作業的真實性。然而，作為協同評估者，ChatGPT 實際上可以進一步確保學術誠信。

ChatGPT 是OpenAI 研發的大型語言模型，使用深度學習算法來生成類似人工的文本以回應提示或問題。雖然先進的人工智能語言生成器對學術和專業寫作很有用，但如果學生不小心或惡意地使用這些工具，可能引發學術誠信問題。令人擔憂的是，ChatGPT 可能會顛覆傳統的評估方法，因為它可以生成高質量的書面作業，而這些作業很難被識別為是機器創作的，從而更難以確保學術誠信。隨著預測文本和語言生成器復雜性的增加，教育機構領導必須保持警惕，要采取策略以防止出現學術不端行為。那么，如何有效利用ChatGPT 來改進學術評估呢？

生成式人工智能 日益增長的力量和影響力

預測文本技術已廣泛應用于各種設備和應用程序，它利用機器學習來推薦常用的單詞和短語，以加快文本輸入的過程。OpenAI 最初是一家專注于強化學習研究和元學習機器人的非營利組織，于2019 年發布了GPT-2，后于2020 年發布了GPT-3，并于2023 年3 月發布了GPT-4。這些語言模型展示了前所未有的自然語言處理能力。GPT-3 擁有超過1750 億個機器學習參數，可以生成各種格式的文本并執行復雜的任務。

“有效利用ChatGPT，能夠進一步改進學術評估并維護學術誠信”

盡管越來越先進，但預測文本軟件仍然容易出錯。模仿人腦結構的神經網絡是一種機器學習模型。GPT-3 使用的架構通過注意力機制概括序列，從而避免了以前循環神經網絡架構的順序局限性。ChatGPT 采用深度學習算法生成與人工寫作極為相似的文本，這樣的人工智能語言生成器為學術和專業寫作帶來了潛在的好處。ChatGPT 是一種備受期待的寫作和語言交流的工具，有可能徹底改變我們交流和學習的方式。

然而，人們擔心ChatGPT 可能會通過生成高質量的文本挑戰傳統的評估方法，從而使學術工作的真實性受到質疑。這種擔憂是基于這樣一種假設：學術評估在過去幾十年中保持不變，只強調寫作風格和學術趨勢，而忽視了經過驗證的研究和邏輯對支持論點的重要性。若是因此而忽視ChatGPT，就忽略了該技術在教育環境中的潛在優勢和應用。為了確保學術作品的真實性，一種有效策略是調查一篇學術文章是否與另一篇已知作者的文章有相同作者。在這種情況下，ChatGPT 可以成為一個有用的工具。

利用ChatGPT 進行評估

當被要求列出十種確定學術文本真實性的方法時，ChatGPT 提供了一系列方式，包括抄襲檢測、風格分析、主題分析、時限分析、句法分析、詞匯分析、抄襲對比、語法分析、內容分析和語義分析。此外，ChatGPT 提出了一套評估標準，包括論點清晰度、原創性和抄襲、語言熟練程度、凝聚力和連貫性以及是否符合學術規范等。每個標準都可以用1 到5 的等級來評估，通過計算總分，可以確定論文的整體質量。

雖然ChatGPT 是幫助確定真實性的重要工具，但它應該與其他評估方法相結合，以確保學術誠信。教育工作者也是學術評估者，他們有責任維護學術誠信。技術使學術評估更加高效和有效，但人類智慧在確保評估的公平性和準確性方面仍然至關重要。因此，評估者在評估學術工作的質量和有效性時應保持警惕。

相似性、語法和教學法

相似性檢查器是一種工具，用于將提交的文本與已知內容進行比較，以檢測抄襲情況。許多機構已經制定了包括相似性檢查在內的政策和協議。然而，相似性報告不應作為確定抄襲的唯一標準，因為它們有時會產生爭議。ChatGPT 也可以充當相似性檢查器。作為一種語言模型，ChatGPT 能夠超越精確的文本匹配，發現內容的相似性，從而有效識別潛在抄襲。它能夠對文本進行更深層次的分析和評估，這增強了其作為高效和準確的相似性檢查器的能力，為教育機構維護學術誠信提供了有價值的見解。

語法檢查器是功能強大的寫作助手，可以檢查文章的拼寫、語法、標點符號、風格和語氣。它們可以幫助識別句子結構和語法錯誤，并提出修改建議，以提高文章的清晰度和可讀性。語法檢查器是校對和提高整體寫作質量的絕佳工具。作為一種可以對各種查詢生成類似于人類回復的語言模型，ChatGPT 能夠就各種主題（從基礎知識到復雜想法）提供見解。它可以幫助你進行頭腦風暴、研究和構思。ChatGPT 還可以指導文章內容，建議替代方法，并提供例子來幫助闡明觀點。在檢查學術論文時，ChatGPT 和語法檢查器都很有幫助，但它們的作用和優勢各不相同。語法檢查器可以幫忙找出可能影響文章清晰度和連貫性的錯誤。而ChatGPT 可以提供見解和建議，幫助你發展和完善論點。將ChatGPT 作為檢查抄襲和語法的額外工具進行協同使用，可以助力學術評估。

將相似性和語法檢查器、ChatGPT 與人工評審員的能力結合使用，可以更徹底地審查文本的真實性。首先，ChatGPT 可以高效掃描大量文本，識別潛在相似之處，提供改進寫作風格的建議，并標出可能存在問題的地方。其次，ChatGPT 具備深入分析語言的能力，能夠檢測意義和意圖的相似性，從而對文本進行更細致的評估。此外，ChatGPT 可以提供關于寫作質量、語法和連貫性的寶貴反饋，從而加快整體評估過程。人工評審員則將其專業技能、知識和對主題的理解引入評估，他們能夠整合ChatGPT 和其他相似性檢查器提供的信息，解釋結果，并對學術工作的質量和原創性做出明智的判斷。人工評審員可以識別逐字復制或近似轉述之外的抄襲情況，利用他們的批判性思維來檢測ChatGPT 可能遺漏的更微妙的抄襲形式。此外，他們還能評估作品所用資源的相關性和適當性，以及文章的整體連貫性和凝聚力。

將人類智慧與諸如ChatGPT 等人工智能相結合，可以對學術工作進行更全面、更準確的評估。雖然技術工具可以加快相似性檢查并提供有價值的見解，但人工評審員可以運用批判性思維、專業知識和道德判斷，以確保評估公平透明，同時維護學術誠信。在學術環境中，ChatGPT 和類似的人工智能技術共同構成了一種協作的實用方式，來維護學術誠信。

可以通過創造性的教學法和互動來充分利用ChatGPT 改進評估流程。例如，從視頻生成的文本中提取文字并使用ChatGPT 設計實驗，就是一種評估學生對學習內容理解程度的實用策略。另一個例子是要求學生重新閱讀和修改他們的作業，添加引用注釋和參考文獻并明確指出論點的來源。這種機制可以從學習的第一年開始引入，以確保學生了解正確的引用規范。此外，在書面作業中添加幻燈片摘要也可以加強理解和邏輯性。對于持續評估來說，更好的做法是通過一系列作業完成最終作業，并提供明確的預期說明。應在處理學術不端行為和充分利用ChatGPT的功能這二者中尋求平衡。

通過評估提高寫作水平

ChatGPT 還能發現寫作中可以改進的地方。傳統的相似性檢查器可能只專注于檢測文本相似度，但ChatGPT 可以分析寫作的整體質量，并就寫作質量、語法和連貫性提供反饋。它能對寫作風格、措辭和句子結構提出改進建議，有助于提高文章的清晰度，能極大幫助希望提高寫作技能和學術成果質量的學生。這對于寫作母語非英語的學生和希望對學生的寫作提供更全面反饋的教師來說也尤為有用。

此外，ChatGPT 還能提供改進文本清晰度和連貫性的建議，這對于要求高精度和清晰度的學術寫作很有價值。它還可以分析文章的結構和組織，幫助作者改進思路和結構。ChatGPT 生成類人回復的能力還能促進互動式學習體驗。學生可以把它視為寫作伙伴，激發創造力并促進原創性。ChatGPT 不僅可以標記潛在的問題，還可以充當合著者，鼓勵學生在提交之前重新閱讀和完善自己的作品。

ChatGPT 可以在寫作質量、抄襲和真實性方面提供更詳盡和全面的反饋，從而徹底改變學術作品的評估方式。但值得注意的是，應將ChatGPT 與道德準則和問責措施結合，以確保其得到負責任和公平的使用。

學術評估中的人為干預

盡管ChatGPT、相似性檢查器和語法檢查器等技術和工具不斷進步，但在確保學術論文和作業評估的準確性和公平性方面，人類智慧仍然發揮著關鍵作用。技術工具在理解人類感知語言的細微差別和復雜性方面存在局限性，而人工評審員能對這些工具提供的信息進行語境分析和解讀，這對于對書面工作的質量做出明智判斷至關重要。此外，要識別這些工具可能遺漏的剽竊情況，人類智慧也是必要的。

用于檢驗真實性的研究實驗

我使用了兩種策略來驗證ChatGPT 的評估真實性。第一種策略是要求ChatGPT將學生提交的書面作業與已知由該學生撰寫的另一篇文章進行比較。第二種策略則是要求ChatGPT 將學生提交的作業與已知由他人撰寫的另一篇文章進行比較。在每種情況下，ChatGPT 都會分析被審查文件的寫作風格，并就兩者由同一個人撰寫的可能性提供反饋，同時提供支持分析的具體證據。

策略1

這個策略是詢問ChatGPT 兩個文本是否為同一個作者所寫。學生需要在完成正式作業之前提交一份書面作業。傳記文本就是此類書面文本的一個例子。若發現后來提交的作業有可疑之處，教師可以使用ChatGPT將作業文本與傳記文本進行比較。當我進行這個實驗時，ChatGPT 給出了以下回答：

這兩段很可能是同一個人寫的。這兩段討論了同一個機構——約翰內斯堡大學（UJ），并涉及教育和技術。此外，第一段提到了作者在約翰內斯堡大學學術技術中心（CAT）的工作，而第二段描述了信息和通信技術（ICTs）對約翰內斯堡大學評估工作的影響。另外，第一段還提到了作者的名字【作者】，并介紹了他在CAT 擔任教學和電子學習高級專家的情況。這些細節表明，這兩段的作者很可能是同一個人。

為了進一步測試，我提交了第三個文本，并讓ChatGPT 將其與另外兩篇文章進行比較。

ChatGPT 的回答如下：

這有可能是【作者】寫的。它討論了約翰內斯堡大學如何利用信息和通信技術來提升學生的參與度，這與【作者】在約翰內斯堡大學學術技術中心擔任教學顧問（教學設計）的專業領域相關。本段還使用了與前幾段類似的術語，如“信息和通信技術”和“在線調查”。然而，如果沒有進一步的信息，就無法確定【作者】是該段落的作者。

策略2

在第二個實驗中，我在網上搜索了關于學生作業中某個特定主題的文章，選擇了一些由可信作者撰寫的文本，并復制粘貼到ChatGPT 中。然后，我又粘貼了一名學生就該主題創作的文章，并讓ChatGPT比較兩篇文章的寫作風格。同樣，評審員也可以將學生的寫作與其他學生的寫作進行比較，以發現可疑的相似之處。

結果如下：

這兩段不太可能是同一作者所寫。第一段討論了學生需要完成的具體練習，以比較他們的寫作風格，這與教學設計和學習有關，而第二段討論了信息和通信技術對學生的好處，這與教育和技術有關。此外，第一段使用了與電子投稿有關的技術語言和術語，而第二段使用了更籠統的語言，沒有提到任何具體的技術或方法。這些差異表明，這些段落是由不同的作者撰寫的，他們擁有不同的專業領域和寫作風格。

作為人工智能語言模型，在沒有進一步信息的情況下，我無法確認文本的作者身份。根據該段的內容以及它討論的話題與【作者】的專業領域相關，他或她有可能是該段作者。然而，要確定文章的真正作者，還需要進一步的調查。

這些實驗結果都表明了ChatGPT 可以得出可接受的結論和比較結果，有助于在評估過程中協助驗證并確保學術文件的誠信。因此，最后一個關于真實性的問題應該是是否需要人工評審員。

結論

ChatGPT 可以成為促進原創性和提高學術寫作整體質量的重要工具。但是，只有道德和公正地使用它，才能更好地確保學術評估的誠信。學術機構在接受ChatGPT 的同時也要采取措施降低其相關風險。建議采用評估策略以提高抄襲檢測的準確性，例如添加參考文獻，并對寫作質量進行更全面的分析。通過使用ChatGPT作為合著者，學生可以從中受益，從而提高其學術書面作品的完整性和真實性。

然而，值得注意的是，人類智慧在識別相似性檢查器可能遺漏的抄襲情況中仍然發揮著至關重要的作用。人工評審員可以利用他們在評估主題方面的知識和專業技能來檢測涉及文本改寫或使用同義詞的抄襲情況。此外，雖然語法檢查器可以識別錯誤并提出修改建議，但最終判斷應由人工評審員根據文本的上下文和預期含義來做出。

雖然ChatGPT 和其他人工智能技術有助于評估和提高學術寫作，但它們應該作為輔助寫作工具與人類智慧一同使用，如此可確保評估過程公平和透明。學生和學術機構有責任維護和促進學術誠信。通過道德和公正地使用ChatGPT，學術機構可以提高學術寫作的質量，確保學術誠信。