Cos'è GPTZero? Come usarlo per rilevare il testo generato dall'intelligenza artificiale

Dal suo lancio, ChatGPT di OpenAI è diventato una preoccupazione per le istituzioni educative di tutto il mondo poiché gli studenti hanno iniziato a usarlo per scrivere saggi e barare nelle valutazioni. Dato quanto sembra naturale il testo generato dal chatbot, gli istruttori hanno difficoltà a determinare se il lavoro degli studenti è originale.

Per assistere gli insegnanti nella valutazione dei compiti degli studenti, un laureato in informatica ha sviluppato uno strumento chiamato GPTZero, che determina se un testo è stato generato artificialmente. Questo articolo spiegherà come funziona lo strumento, come utilizzarlo e se è in grado di rilevare i contenuti generati dall'intelligenza artificiale.

Cos'è GPTZero e come funziona?

GPTZero è uno strumento di analisi del testo AI sviluppato da Edward Tian, ​​un laureato in informatica, per aiutare gli istruttori a distinguere il testo plagiato dal lavoro originale. Lo strumento controlla la perplessità e la prontezza di un testo per determinare se è stato generato artificialmente o creato da un essere umano.

Senza entrare nei dettagli, vediamo cosa significano questi termini:

• Perplessità è una misura della casualità del testo nell'elaborazione del linguaggio naturale (NLP). Il testo scritto da un essere umano tende ad essere meno strutturato e più imprevedibile, quindi il suo valore di perplessità dovrebbe essere più alto, mentre un testo generato dall'intelligenza artificiale dovrebbe avere un punteggio di perplessità basso.
• Burstosità tiene conto di altre variabili non considerate nella perplessità per migliorare l'analisi del testo. Il termine si riferisce alla comparsa di elementi non comuni in gruppi casuali. Il testo generato dall'intelligenza artificiale tende ad avere una struttura più coerente rispetto al testo scritto dagli umani. Burstiness ci aiuta a identificarlo.

GPTZero Classic è pubblicamente accessibile dall'inizio del 2023 ed è gratuito da marzo 2023. Tuttavia, la versione gratuita ha un limite di caratteri di 5000 per documento e puoi analizzare in batch solo tre documenti alla volta.

GPTZero offre due versioni premium per soddisfare le esigenze degli educatori e degli utenti che desiderano analizzare milioni di parole al mese: GPTZero Educator e GPTZero Pro. Il limite di caratteri per documento è più alto nelle versioni premium rispetto a quella gratuita e ti consentono di analizzare file illimitati in modalità batch.

Segui questi passaggi per iscriverti a queste versioni premium:

1. Vai a Cruscotto GPTZero.
2. Accedi con il tuo account esistente o creane uno nuovo.
3. Dopo aver effettuato l'accesso, puoi eseguire l'upgrade a una versione premium di tua scelta.

Come utilizzare GPTZero per rilevare il testo generato dall'intelligenza artificiale

A differenza di ChatGPT, non è richiesta alcuna registrazione su GPTZero. Puoi semplicemente accedere allo strumento attraverso il sito web. Vediamo come puoi accedervi e utilizzarlo:

1. Vai a GPTZero.
2. Copia e incolla il testo che desideri analizzare nella casella o carica un file.
3. Seleziona la casella accanto Accetto i Termini del servizio.
4. Clicca sul Ottieni risultati scatola.

Al termine della scansione, GPTZero ti dirà se il testo è stato scritto da un essere umano o generato dall'intelligenza artificiale.

GPTZero può riconoscere correttamente il testo generato dall'intelligenza artificiale?

Per verificare la precisione con cui GPTZero rileva il testo generato dall'intelligenza artificiale, analizzeremo tre testi nello strumento: testo generato dall'intelligenza artificiale, testo scritto dall'uomo e testo generato dall'intelligenza artificiale che è stato parafrasato da un altro attrezzo. Vediamo come GPTZero risponde a ogni input.

Includeremo le istruzioni su come abbiamo condotto questi test in modo che tu possa eseguirli tu stesso.

1. L'analisi del testo generato dall'intelligenza artificiale in GPTZero

Per analizzare il testo generato dall'intelligenza artificiale, generiamo prima il testo utilizzando ChatGPT, un chatbot basato sull'intelligenza artificiale basato sulla tecnologia GPT. Per farlo, segui questi passaggi:

1. Vai a OpenAI.
2. Clicca sul Prova ChatGPT pulsante.
3. Accedi o registrati per un account.
4. Immettere qualsiasi richiesta per generare un testo.
5. Copia il testo generato dallo strumento una volta terminato.
6. Analizza il testo in GPTZero, come spiegato in precedenza.

Puoi anche usare altro Strumenti di scrittura AI per generare il testo che vuoi analizzare.

GPTZero ha restituito il seguente output quando abbiamo analizzato il testo generato dall'intelligenza artificiale nello strumento:

Dato che il testo è stato generato dall'intelligenza artificiale, GPTZero ha previsto correttamente che è probabile che sia stato generato dall'intelligenza artificiale. Per rendere il test più impegnativo, abbiamo parafrasato il testo generato da ChatGPT.

2. L'analisi di un testo generato dall'IA parafrasato in GPTZero

Puoi scegliere tra centinaia di strumenti di parafrasi parafrasare il testo. Per questo caso, abbiamo usato Scribbr. Se desideri utilizzare lo stesso strumento, segui i passaggi:

1. Vai a Scribbr.
2. Copia il testo generato dall'intelligenza artificiale che abbiamo analizzato in GPTZero in precedenza e incollalo nello strumento.
3. Clicca sul Parafrasi pulsante.
4. Lascia che Scribbr parafrasi il testo per te.
5. Esegui di nuovo il test GPTZero dopo aver parafrasato.

Ecco l'output di GPTZero quando abbiamo analizzato il testo generato dall'IA parafrasato:

Una leggera parafrasi ha reso difficile per GPTZero determinare se il testo è tutto generato dall'intelligenza artificiale.

3. L'analisi del contenuto scritto umano in GPTZero

In alcuni casi, strumenti come GPTZero restituiscono un risultato falso positivo, nel senso che considerano qualcosa non corretto quando non lo è. Per determinare se GPTZero produce anche falsi positivi, abbiamo eseguito tre test nello strumento, analizzando tre diversi testi scritti da persone.

Di questi tre test, lo strumento ha restituito un falso positivo affermando che un testo originale era stato generato dall'intelligenza artificiale; una volta, non è riuscito a trarre una conclusione e una volta ha identificato correttamente il testo come scritto dall'uomo.

Se vuoi testare il contenuto scritto da persone, puoi copiarlo da una fonte autentica o scrivere tu stesso alcuni paragrafi.

Dovresti fidarti dei risultati di GPTZero?

Sulla base dei nostri test, fare affidamento esclusivamente sui risultati di questo strumento può essere rischioso. Infatti, ogni volta che si genera un risultato utilizzando lo strumento viene visualizzato un disclaimer che avverte gli educatori di non fare affidamento sui risultati di questo strumento.

Quindi, a meno che lo sviluppatore dello strumento non garantisca che i suoi risultati siano infallibili, gli educatori non dovrebbero fare affidamento su di esso. Perché? Perché sarebbe ingiusto per uno studente ricevere un voto basso semplicemente perché GPTZero ha restituito un falso positivo.

I test di cui sopra sono stati condotti nel febbraio 2023. GPTZero è uno strumento abbastanza nuovo al momento, quindi la sua precisione potrebbe cambiare nel tempo.

Non fidarti sempre dei risultati del rilevamento AI

Come potenziale antidoto alla tecnologia GPT di OpenAI, GPTZero ha un grande potenziale; tuttavia, è ancora agli inizi. A questo punto, non è del tutto affidabile. Ma la versione principale di GPTZero sarà in grado di superare tutti i limiti e catturare i contenuti AI con precisione? Per scoprirlo non ci resta che attendere.

Oltre a dare agli studenti un altro motivo per imbrogliare sulle valutazioni, ChatGPT rappresenta anche una seria minaccia per la sicurezza informatica.