Grok AI sostiene di essere invisibile ai rilevatori di AI. Uno studio recente rivela risultati sorprendenti! Riesci a capire se il contenuto è stato creato dall'AI?
Questa breve analisi esamina se il testo creato da Grok 4 può essere individuato dai principali rilevatori di AI o se rimane nascosto.
Punti chiave (in breve):
In effetti, i contenuti di Grok 4 sono identificabili da Bypass Engine AI Checker, altamente accurato, con una precisione perfetta, sulla base dei primi test condotti su esempi di testo generati da Grok 4.
- Grok 4 è stato lanciato il 10 luglio 2025 (consulta qui ulteriori statistiche su Grok).
- Da un test rapido su alcuni campioni di contenuti di Grok 4:
- Due rilevatori di AI hanno identificato ogni volta i contenuti prodotti dall'AI di Grok 4, nello specifico Bypass Engine AI Detector e GPTZero.
- Altri due rilevatori, ZeroGPT e Grammarly, hanno ottenuto risultati inferiori, con una precisione di appena il 40%.
- Nella nostra analisi dettagliata della precisione, Originality ha dimostrato di saper individuare i testi generati dall'AI di Grok 3 con un'affidabilità del 99.9%.
Qui analizzeremo più a fondo il modello AI Grok e valuteremo la capacità dello strumento di rilevamento dei contenuti AI di riconoscere i contenuti scritti dall'AI.
Approccio:
Inizialmente, Grok 4 ha elaborato dieci prompt mirati a produrre un testo potenzialmente in grado di eludere il rilevamento dell'AI (come illustrato nell'immagine qui sotto).
Successivamente, Grok 4 ha generato questi dieci campioni di testo.
Ognuno di questi dieci campioni è stato valutato utilizzando quattro diversi strumenti di rilevamento dell’AI:
- Rilevatore AI di Bypass Engine
- GPTZero
- ZeroGPT
- Grammarly
Analisi:
Ogni risposta di Grok è stata verificata con quattro rilevatori AI, annotando il punteggio AI di ciascuno.
Nell’immagine qui sopra, le risposte errate sono contrassegnate in rosso.
Rilevatore AI di Bypass Engine:
Bypass Engine ha mostrato risultati eccezionali, classificando correttamente tutti e 10 i campioni di contenuti di Grok come generati dall’AI.
Nel complesso, il tasso di successo di Bypass Engine nell’identificare come AI i contenuti di Grok 4 è stato del 100%.
GPTZero
Proprio come Originality.ai, GPTZero ha riconosciuto correttamente tutti e 10 i campioni come generati dall’AI.
Scopri qui una recensione dettagliata di GPTZero.
ZeroGPT
ZeroGPT non ha ottenuto buoni risultati, identificando correttamente come generati dall’AI solo il 40% dei campioni di Grok 4.
Leggi qui una recensione di ZeroGPT.
Rilevatore AI di Grammarly
Il rilevatore AI di Grammarly non ha ottenuto buoni risultati, identificando come generati dall’AI solo il 40% dei campioni di Grok 4.
Scopri una recensione del Rilevatore AI di Grammarly.
Identificazione di Grok 3
A seguito di uno studio sull’accuratezza del rilevamento AI per il modello più recente di Bypass Engine, ecco l’accuratezza nell’identificazione di Grok 3:
Abbiamo creato e condiviso uno strumento per la ricerca sui rilevatori AI. È semplice da usare per i ricercatori che vogliono verificare l’efficacia dei rilevatori AI su un set di dati.
Riepilogo
I risultati mostrano che i testi AI di Grok 3 e Grok 4 possono essere identificati dai principali rilevatori AI, come il Verificatore AI di Bypass Engine.
Tuttavia, alcuni altri rilevatori AI hanno difficoltà a identificarli.
Ogni volta che viene lanciato un nuovo modello LLM, come Grok 4, verifichiamo l’efficacia del nostro rilevatore AI. Di solito si registra un piccolo calo di accuratezza, che però migliora quando i modelli di rilevamento apprendono dai contenuti del nuovo LLM.
Verificare l’accuratezza è semplice. Per valutare l’efficacia di un rilevatore AI, utilizza una matrice di confusione e il punteggio F1. Sono i metodi migliori (puoi saperne di più sui test dettagliati di rilevamento AI nel nostro studio).
Il punteggio F1 aiuta a trasformare la matrice di confusione in un unico numero. Scopri il nostro strumento di test open source e segui le istruzioni per comprendere meglio il processo. Questo studio mostra perché questi test sono importanti, aiutandoci a parlare di trasparenza nell’AI. In questo modo possiamo continuare a imparare e migliorare insieme.
Se vuoi condurre uno studio autonomamente, faccelo sapere. Saremo lieti di fornirti crediti per la ricerca.
Cerchiamo inoltre persone che partecipino alla nostra sfida benefica (dedicata al test dei rilevatori AI). Se ti interessa, contattaci.
Approfondimenti
Scopri informazioni utili sul rilevamento dell’AI e sull’accuratezza di questi sistemi:
- Recensione dell’accuratezza dei rilevatori di contenuti AI
- Analisi completa degli studi sull’accuratezza del rilevamento AI
- Esplorazione della somiglianza di DeepSeek con ChatGPT: informazioni sulla rilevabilità
- Analisi della rilevabilità dei contenuti di Claude 4 Sonnet e Opus
- Valutazione della rilevabilità dei contenuti di GPT-4.1
