比「GPT 偵探」更重要的是，AI 生成內(nèi)容在不同行業(yè)的「忍度」。最近兩個月科技圈最熱的話題，疑是 OpenAI 推出的對話式 AI 應用 ChatGPT，不僅可以讓它給你一首詩、回答你的任問題，甚至可以讓它忙寫沒那么復雜的代。業(yè)內(nèi)甚至認為，ChatGPT 甚至有取代谷歌的潛力。為 ChatGPT 歡呼的還有另一群人，就是社畜」和學生 —— 他們發(fā)現(xiàn)月度總結、校論文和作業(yè)這樣的務，也可以讓 ChatGPT 代勞了，后者甚至寫得有模有樣不比真人寫得差多少ChatGPT 似乎讓學生們的日子更輕了，但卻讓教師更「疼」了，因為后者很確認，眼前這些文字到底是學生寫的，還出自 OpenAI 的產(chǎn)品之手。為此，約教育部甚至禁止公學校使用 ChatGPT。在這樣的混亂中，一位普林斯堤山大學學生，Edward Tian 推出了一個專殺 ChatGPT 的應用 ——「GPTZero」，有了這面「照妖鏡」，內(nèi)容人寫的，還是機器寫，真相馬上就揭曉。GPTZero」在網(wǎng)絡迅速爆紅，吸引了 a16z 在內(nèi)的硅谷創(chuàng)投的目光。但是應創(chuàng)造者本人 Tian 卻認為，最重要的事，是「讓 AI 更加透明」。01、「ChatGPT 殺手」在 ChatGPT 成為學生們「偷懶」的器后，教育和科研機不得不開始抵制這個的噩夢。紐約教育部布禁止學生在公立學使用 ChatGPT ；全球知名機器學習會議之一的 ICML 也宣布禁止發(fā)表包含由 ChatGPT 和其他類似系統(tǒng)生成容的論文，以免出現(xiàn)意外后果」。出于對術界，使用 ChatGPT 相關道德問題的擔憂，華人小哥 Edward Tian 在一家當?shù)氐目Х鹊昀?，花了一天犬寒假?間，研發(fā)了 GPTZero，希望能讓學術界恢復嚴謹性。Tian 年僅 22 歲，目前仍是美國普林斯大學的大四學生，主計算機科學專業(yè)，專研究自然語言處理，時輔修認知科學和新學。GPTZero 的開發(fā)者 Edward Tian｜網(wǎng)絡他還曾是英國廣播公司開源情報網(wǎng)站 Bellingcat 的研究員，也曾是被微軟購的反恐初創(chuàng)公司 Miburo Solutions 的分析師。在那里，他監(jiān)測虛信息和機器人檢測。Tian 說，「所有的這些經(jīng)歷，都是他研 GPTZero 的動力」。2023 年 1 月 2 日，Tian 將 GPTZero 發(fā)布到網(wǎng)絡，預計只會有幾十個人試它，完全沒有想過這會掀起一場世界級的軒然大波。在他把款軟件上傳到互聯(lián)網(wǎng)的幾個小時內(nèi)，竟有過?2000 人在 Steamlit 上測試了 GPTZero 的公開版本。1 月 5 日，也就是發(fā)布的第三天，Tian 對 GPTZero 做出了更新和改善，還顯著降低了誤報率此時，新程序已有超?1 萬的用戶量了！Tian 也不禁對它的「爆炸性增長」和病毒式傳播」感到震。據(jù) NPR 報道，一周內(nèi)有?3 萬多人試用了 GPTZero，甚至「導致該應用由于出乎意料的高網(wǎng)流量」而崩潰，托管 GPTZero 的免費平臺 Streamlit 此后介入，以更多的內(nèi)存和資源支 Tian，以處理網(wǎng)絡流量。Edward Tian 通過在視頻中展示其對一篇《約客》文章和 LinkedIn 上的 ChatGPT 生成器的帖子的分析，展示該應用如何區(qū)分人類人工智能撰寫的文本GPT Zero 的工作原理就是檢測文的「困惑性」（Perplexity）和「突發(fā)性」（Burstiness）這兩項指標，并分別對其打分根據(jù)統(tǒng)計學特征來確，文本是由人工智能的還是人類寫的?？?來說，如果這兩項參得分都很低，那么該本很有可能出自 AI 之手。這里所說的「困惑性」，是指來自類所寫作品的語言的雜性和隨機性。這個標主要是衡量文本在個句子中的隨機程度以及一個句子的構造式是否會讓 GPTZero 感到困惑。每當用戶在 GPTZero 輸入一段測試內(nèi)容，它就會分別計算：「文字總困惑度」「所有句子的平均困度」、「每個句子的惑度」。這些數(shù)值越，越能說明這個文本 GPTZero 來說是非常「熟悉」的那么它很可能是 AI 生成的；相反，如果這些數(shù)值越高，就越說明文本中句子的構或用詞方式讓 GPTZero 感到「驚訝」，那么它就更可能出自人類之手。這是為，人工智能接受過據(jù)庫的訓練，生成的本在一段時間內(nèi)，表出的困惑度會更均勻恒定，選詞的可預測也更高；而人類書寫文本則不會這樣，真的遣詞造句一般會比隨機，比機器更容易比較出乎意料的詞句使用 GPTZero 檢測文字是否由 ChatGPT 生成｜Twitter而「突發(fā)性」，則是指來自類使用的句子結構的化。這個參數(shù)主要是較句子復雜性的變化度，衡量它們的一致。這是因為，人類傾于寫高度復雜的文本而人工智能產(chǎn)出的文則是低復雜度的；此，由于人類的思維結不是線性的，他們的子結構也遵循類似的式。這意味著，人類用句子結構，會在長復雜的句子，和短而單的句子之間搖擺不，有著更多的句式變，比如復雜和簡單交并存，一個長難句之接著出現(xiàn)更簡短的句；而機器生成的句子傾向于更加統(tǒng)一，很會有一系列長度相差大的句子。簡而言之在選詞上「簡單」而熟悉」，并使用「統(tǒng)整齊」的句子，是人智能生成作品的標志征，而更復雜和多樣東西，則表明是人類的。這也是「困惑性和「突發(fā)性」這兩項標可以作為衡量標準原因。除了 Edward Tian 本人對 GPTZero 進行測試之外，也有少網(wǎng)友用它對 ChatGPT、一些 GPT-3 衍生工具生成的內(nèi)容進行了多次測。最終結果顯示，GPTZero 每次都能抓住 AI 生成的文本，并在十多個案例正確識別了人類寫的本。GPTZero 的一炮而紅，讓 Tian 獲得了來自 a16z、 Menlo Ventures 和 Red Swan 等知名風投的青睞。不過，面對推繡山私信電話轟炸，Tian 卻顯得異常冷靜，他遜地表示自己不會拒投資者打來的電話，他不會忘記自己仍然一位即將畢業(yè)的大四生。同時，他還表示己的 GPTZero 尚未完成，仍需改進和進一步地開發(fā)，甚計劃讓大家繼續(xù)免費用他的程序，用來支各地新晉英文老師的作。02、急需的「AI 透明」對于 GPTZero 這一甄別文字是否是 AI 寫作的新程序，推特上輿論褒貶不一，以教為代表的成年人大多聞樂見，而學生卻諷 GPTZero 的創(chuàng)造者 Tian 是「學術緝毒警察」。確，當 GPTZero 推出時，Tian 收到了眾多教師對該應用程序在檢測 AI 寫的文章方面的積極反饋，來自世界各地無數(shù)教師也都對 Tian 表達了他們的感激之情 —— 這讓他們的教學難度大大減了。當然，也不難理，不少學生并不看好 Tian 這款打擊學術偷工減料、不勞而的軟件。事實上，不是 Tian，就連 ChatGPT 的開發(fā)商 OpenAI 自己，也已經(jīng)表明了防止人工智能剽竊的諾。2022 年 12 月，OpenAI 專注于人工智能安全的研究員 Scott Aaronson 透露，該公司正在努開發(fā)「緩解措施」，一種「不易察覺的秘信號」對 GPT 生成的文本打上「水印，以識別其來源，從打擊作弊的系統(tǒng)。這技術將通過微妙地調(diào) ChatGPT 選擇的特定單詞選擇來揮作用，讀者不會注到這種方式，但對于何尋找機器生成文本象的人來說，這在統(tǒng)上都是可預測的。公發(fā)言人表示，「我們 ChatGPT 作為新研究的預覽技術希望能從現(xiàn)實世界的用中進行學習。我們為這是開發(fā)和部署功強大、安全的 AI 系統(tǒng)的關鍵部分。我會不斷吸取反饋和經(jīng)教訓，」。GPTZero 首頁｜GPTZero此外，OpenAI 還聯(lián)合哈佛等高校機構聯(lián)合打造了一檢測器：GPT-2 Output Detector。作者們先是發(fā)布了一個「GPT-2 生成內(nèi)容」和 WebText 數(shù)據(jù)集，幫助 AI 理解機器語言和人類語言間的差異。隨后，用個數(shù)據(jù)集對 RoBERTa 模型進行微調(diào)，就得到了這個 AI 檢測器。其中人類語言一律被識別為 True，AI 生成的內(nèi)容則一律被識別為 Fake。值得一提的是，RoBERTa 是 BERT 的改進版。原始的 BERT 使用了 13GB 大小的數(shù)據(jù)集，但 RoBERTa 使用了包含 6300 萬條英文新聞的 160GB 數(shù)據(jù)集。盡管如此，還是有不少人認為，AI 文本檢測器」注定是一場失敗的肥遺軍競賽」，其實際效果不理想，更無法阻擋 ChatGPT 等 AI 語言模型的發(fā)展。然而，盡管 Tian 建立了 GPTZero，他并不反對使用 ChatGPT 等人工智能工具，他為 GPTZero 應用程序的目的不是止這些新技術的使用而是提供一種負責任使用這些技術的方法并提供必要的保護。時，相對于對抗或者止一項技術，也許更要的是如何為其使用下規(guī)范和標準。例如在廣告、影視及娛樂行業(yè)，對于 AI 生成類內(nèi)容的容忍度可適當提高一些；而在術、教育和科研領域非常強調(diào)準確性和原性，毫無疑問，對于 AI 生成內(nèi)容的容忍度就要低一些。而如確定 AI 工具使用的「透明度」，可能比研究如何「反 AI」，要更有效，也更意義一些。本文來自信公眾號：極客公園 （ID：geekpark），作者：美漪