Porównanie 16 najlepszych detektorów treści AI i ChatGPT

Ponieważ codziennie pojawiają się nowe alternatywy ChatGPT, wykrywacze treści AI również zyskują na popularności.

W tym artykule podzielę się 16 z tych detektorów i pokażę, jak oceniają niektóre akapity mojego oryginalnego, niepublikowanego tekstu w porównaniu z kilkoma akapitami na ten sam temat z ChatGPT.

Omówię również typy funkcji, do których detektory AI są (i nie są) odpowiednie oraz jak marketerzy, redaktorzy i SEO powinni o nich myśleć.

Jakie narzędzia do wykrywania są dobre (a które złe).

Jak szczegółowo opisałem w innych artykułach, generatywna sztuczna inteligencja i zawartość ChatGPT stwarzają kilka problemów:

• Informacje generowane przez sztuczną inteligencję mogą być niezgodne ze stanem faktycznym, niebezpieczne, nieaktualne lub wprowadzać w błąd.
• Wyjścia zapisu AI mogą być poniżej normy.
• Chociaż nie ma wyraźnej kary za treści AI, Google może nie zawsze im ufać i postrzegać je jak treści stworzone przez ludzi.
• Treści AI mogą być w stanie „oszukać” redaktorów lub firmy, które myślą, że płacą za treści tworzone przez ludzi.
• Treści AI mogą wykorzystywać pracę twórczą ludzi i zmieniać jej przeznaczenie bez przypisania.

Należy zauważyć, że obecne detektory AI nie rozwiązują wszystkich tych problemów.

Przeważnie narzędzia te nie sprawdzają treści sztucznej inteligencji, nie poprawiają ani nie kontrolują jakości treści ani nie dostarczają cytatów dla informacji pobranych z innych źródeł.

To powiedziawszy, obszary, w których detektory AI mogą pomóc, obejmują:

• Plagiat : wiele z tych narzędzi ma wbudowaną funkcję wykrywania plagiatu, więc można sprawdzić, czy treść AI została w dużej mierze pobrana z innego źródła.
• Zapobieganie karom : jeśli martwisz się, że treści AI są w jakiś sposób dewaluowane w wynikach wyszukiwania, te narzędzia mogą pomóc Ci zorientować się, jak łatwo można wykryć treści AI. (Oczywiście Google bez wątpienia będzie mieć różne narzędzia i kontrole).
• Audyt wykorzystania sztucznej inteligencji : jeśli masz określone zasady lub sposób wynagradzania autorów za oryginalne treści w porównaniu z treściami generowanymi przez sztuczną inteligencję, te narzędzia mogą dać ci przybliżony obraz tego, czy autor wykorzystuje sztuczną inteligencję do generowania treści. (Zauważ, że mogą również zwracać fałszywe negatywy i pozytywy).
• Zrozumienie wyników wyszukiwania: niektóre z tych narzędzi oferują rozszerzenia Chrome, które mogą pomóc Ci zrozumieć, czy konkurenci i inne witryny korzystają z treści AI, czy nie.

Jak działa oprogramowanie do wykrywania AI

Każde narzędzie jest inne i ma swoje podejście do problemu. Jednak w większości narzędzia do wykrywania ChatGPT oceniają treści na podstawie przewidywalności wyborów fraz w ramach treści.

Innymi słowy, prawdopodobieństwo, że treść zostanie oceniona jako sztuczna inteligencja w porównaniu z człowiekiem, ma wiele wspólnego z tym, czy oprogramowanie wykrywające uzna, że ​​pismo jest zgodne z prawdopodobnym wzorcem, według którego AI generowałaby treść.

Dwie podstawowe koncepcje związane z tym procesem to:

• Burstiness : przewidywalna długość i tempo struktury zdania.
• Zakłopotanie : przypadkowość słów wybranych w zdaniu lub zbiorze zdań.

Na przykład w eseju o powstaniu Ameryki jest wysoce nieprawdopodobne, aby generatywna sztuczna inteligencja zawierała przypadkową, nierównomiernie napisaną anegdotę o tym, jak po raz pierwszy zobaczyli pingwina, więc prawdopodobnie wyglądałoby to na pismo ludzkie dla narzędzia wykrywającego.

Podobnie do tego, jak detektory ChatGPT pojawiły się w celu wykrycia generatywnego pisma AI, opracowywane są już narzędzia do obejścia detektorów. (I oczywiście: detektory prawdopodobnie już myślą o tym, jak wykryć obejście i tak dalej).

Narzędzia takie jak Niewykrywalny lub Quillbot przepiszą Twoje treści, czasami utrudniając ich wykrycie w przypadku niektórych narzędzi do wykrywania sztucznej inteligencji.

Ponadto kilka osób znalazło różne wskazówki, aby uzyskać ChatGPT i inne narzędzia do pisania oparte na sztucznej inteligencji, aby wyświetlały treści, które są „bardziej ludzkie” w skali człowieka do sztucznej inteligencji, używając podpowiedzi definiujących rozerwanie i zakłopotanie oraz mówiących ChatGPT, aby pisał z większą ilością każdego z nich.

Czy dokładność wykrywania ma dla Ciebie znaczenie?

Ważnym pytaniem, na które należy odpowiedzieć, zanim zagłębisz się w te narzędzia, jest:

Jak bardzo zależy Ci na wykryciu, czy treść jest napisana przez sztuczną inteligencję? I dlaczego?

Jeśli używasz ChatGPT do przepisywania tagów tytułu lub generowania kopii wiadomości e-mail, być może nie ma to żadnego znaczenia, czy ta treść „przejdzie” testy pisania AI.

Dodatkowo, jeśli pisarz używa sztucznej inteligencji do wygenerowania kopii, a kopia jest świetna, być może wynik nie jest wcale ważny.

Te narzędzia do wykrywania prawdopodobnie będą zaangażowane w „wyścig zbrojeń do wykrywania” z narzędziami do wykrywania i monitami, o których wspomniałem powyżej.

Porównanie najlepszych detektorów pisma AI

Jeśli nadal szukasz detektora treści AI/ChatGPT, przejrzymy każdy z nich i ich „punktację” w ocenie kopii wygenerowanej przez człowieka w porównaniu z kopią AI w porównaniu z kopią AI, która wykorzystała ten monit, aby spróbować „pokonać wykrywanie ”.

Uwaga : Wykrywanie w porównaniu z kilkoma akapitami treści niekoniecznie jest dokładnym testem możliwości wykrywania tych narzędzi. Mamy nadzieję, że da ci to ogólne wyobrażenie o tym, w jaki sposób oceniają różne treści, i wgląd w zakres wyników, jakich można oczekiwać od tego rodzaju narzędzi.

(Możesz zobaczyć rzeczywiste próbki wprowadzone do narzędzia – próbkę „ludzką” napisaną przeze mnie, próbkę „AI” napisaną przez ChatGPT za pośrednictwem GPT-4 oraz zaktualizowaną kopię opartą na tym samym temacie tutaj.)

W poniższej tabeli możesz zobaczyć, jak każde narzędzie oceniło kopię, którą napisałem od zera, kopię, którą pobrałem bezpośrednio z ChatGPT bez natychmiastowej modyfikacji, oraz tę samą kopię poprawioną z monitem „zakłopotanie i rozerwanie”:

Poniżej znajduje się krótki przegląd narzędzi zawartych w tabeli i niektóre z ich kluczowych funkcji.

1. Oryginalność.AI

Originality.AI to płatne narzędzie opisane jako „najdokładniejszy wykrywacz treści AI i narzędzie do sprawdzania plagiatu stworzone dla poważnych wydawców treści”.

Kosztuje 0,01 USD za kredyt, który skanuje 100 słów. Zawiera również skaner antyplagiatowy obok skanera AI.

Jak widać na powyższym wykresie, jest to jedyny skaner AI ze 100% pewnością, że treść ludzka była ludzka, a treść AI była sztuczną inteligencją (przy czym we wszystkich przypadkach jest poprawna).

Moderacja Hive (omówiona w dalszej części artykułu) zasadniczo miała ten sam wniosek z wynikiem 0% sztucznej inteligencji dla zawartości ludzkiej i 99,9% pewności, że dwa teksty wygenerowane przez sztuczną inteligencję to sztuczna inteligencja.

Oprócz rozszerzenia Chrome i ogólnego wyniku, Originality.AI dodała funkcję wyróżniającą określone sekcje wklejanej treści, co do których przewiduje, że będzie i nie będzie sztuczną inteligencją.

Używam tego narzędzia najczęściej do osobistego sprawdzania zawartości AI. Moim najczęstszym przypadkiem użycia jest sprawdzanie treści przesłanych przez niezależnych pisarzy, z którymi współpracujemy, pod kątem sztucznej inteligencji i plagiatu.

2. Pisarz

Writer oferuje darmowy wykrywacz, który działa na maksymalnie 1500 znakach i wymaga dostępu do API, aby uzyskać więcej.

To narzędzie zasadniczo uważało, że wszystkie zgłoszenia prawdopodobnie zostały wygenerowane przez człowieka.

Writer to platforma do pisania AI, a darmowy wykrywacz treści umożliwia również wprowadzenie adresu URL do sprawdzenia.

W tym narzędziu nie ma bezpośrednio funkcji plagiatu, która daje ogólny wynik, ale nie oznacza określonych sekcji jako prawdopodobne lub mało prawdopodobne, aby zostały wygenerowane przez sztuczną inteligencję.

3. Copyleaks AI Content Detector

Copyleaks AI Content Detector ma kilka interesujących funkcji:

• Daje ogólny werdykt (człowiek lub sztuczna inteligencja).
• Jeśli najedziesz kursorem na konkretny tekst, otrzymasz procentowe prawdopodobieństwo, że tekst jest kopią człowieka i sztucznej inteligencji.
• Wstępnie ładuje przykłady z różnych GPT i wyników ludzkich, aby pokazać, jak działa narzędzie
• Jest rozszerzenie Chrome.

Narzędzie jest bezpłatne i chociaż jedno skanowanie nie robi obu tych rzeczy, jest też wykrywacz plagiatu.

Dokładnie zidentyfikował większość treści generowanych przez człowieka jako ludzi, a większość treści generowanych przez sztuczną inteligencję jako sztuczną inteligencję. Jednak nie zawsze było to pewne i było błędne w niektórych poszczególnych sekcjach.

4. Klasyfikator tekstu AI OpenAI

AI Text Classifier to darmowe narzędzie OpenAI, firmy, która stworzyła GPT (na którym działa wiele generatywnych narzędzi AI) i ChatGPT.

Jeśli myślałeś, że firma, która tworzy najpopularniejsze narzędzia AI, będzie miała najdokładniejszy detektor, to nie sprawdziło się to w naszym teście.

Narzędzie określiło, że treść stworzona przez człowieka jest „bardzo mało prawdopodobna” do wygenerowania przez sztuczną inteligencję , ale określiła treść z własnej platformy OpenAI jako „niejasną”, jeśli została wygenerowana przez sztuczną inteligencję i „mało prawdopodobne” wygenerowana przez sztuczną inteligencję z dodatkowym monitem i bez niego.

Narzędzie jest bezpłatne (wymagane jest konto OpenAI). Nie ma wielu dzwonków i gwizdków ani kontroli plagiatu.

Otrzymujesz odkrycie (jak to, co widzisz na zrzucie ekranu), ale nie ma dokładnego wyniku. Nie będzie również wyróżniać określonych sekcji tekstu pod kątem ich indywidualnego prawdopodobieństwa wygenerowania przez sztuczną inteligencję, czy nie.

5. Detektor zawartości AI Crossplag

Crossplag oferuje kilka darmowych skanów bez konta. Po zalogowaniu otrzymasz nieograniczoną liczbę bezpłatnych skanów. Narzędzie daje ogólną ocenę, ale nie oferuje możliwości sprawdzenia plagiatu ani oznaczenia poszczególnych sekcji treści.

Crossplaq zidentyfikował zawartość człowieka i sztucznej inteligencji jako 99% człowieka. Warto zauważyć, że narzędzie wielokrotnie woła, że ​​działa lepiej na dłuższym tekście.

Nasze próbki tutaj były powyżej ich minimalnej rekomendacji 200 znaków, ale po krótszej stronie.

6. GPTZero

GPTZero ma wersje darmowe i płatne. Darmowa wersja daje wynik i zawiera kilka wstępnie załadowanych przykładów.

Wersja płatna oferuje również narzędzie do sprawdzania plagiatu, wyróżnianie treści AI oraz możliwość masowego przesyłania wielu fragmentów treści (które w rzeczywistości są przeznaczone do środowiska szkolnego, podobnie jak wiele z tych narzędzi).

Ceny płatnych narzędzi nie są podane na stronie internetowej, ale możesz wypełnić formularze, aby poprosić o dostęp do płatnego narzędzia i interfejsu API.

Darmowa wersja narzędzia zidentyfikowała wszystkie trzy nasze próbki pisma jako prawdopodobnie całkowicie ludzkie.

7. Detektor sztucznej inteligencji sadzonki

Sapling AI Detector oferuje bezpłatne i płatne wersje, rozszerzenie Chrome, interfejs API, ogólny wynik i wyróżnianie zdań.

Sapling zidentyfikował zawartość ludzką jako głównie ludzką, a zawartość AI jako prawie całkowicie sztuczną inteligencję. Jednak zidentyfikował „zakłopotane” i „wybuchowe” treści ChatGPT jako wysoce prawdopodobne, że pochodzą od ludzi.

8. Treść w Detektorze AI Scale

Narzędzie Content at Scale AI Detector jest bezpłatne i oferuje ocenę z podziałem na różne elementy treści (przewidywalność, prawdopodobieństwo i wzorzec) oraz wstępnie wypełnione przykłady.

Nie ma opcji wykrywania plagiatu, a poszczególne sekcje treści nie są podświetlane.

Content at Scale oceniło wszystkie trzy próbki jako 92% ludzi lub więcej.

Człowiek miał najwyższy odsetek ludzi, a następnie treść GPT zmodyfikowaną pod kątem podpowiedzi i zawartość wygenerowaną przez najprostszą podpowiedź.

9. Zero GPT

ZeroGPT to darmowe narzędzie, które oferuje ogólny wynik i wyróżnianie, ale nie wykrywa plagiatu.

Narzędzie zwróciło niski odsetek prawdopodobieństwa generowanego przez sztuczną inteligencję we wszystkich dziedzinach. Z grubsza odpowiadało to człowieczeństwu próbek, przy czym próbka wygenerowana przez człowieka uzyskała najniższy procent AI, następnie monit o rozerwanie / zakłopotanie, a następnie prostszy monit).

10. GLTR

GLTR, czyli „Giant Language model Test Room”, to bezpłatne narzędzie, które było wspólnym wysiłkiem Hendrika Strobelta, Sebastiana Gehrmanna i Alexandra Rusha z laboratorium MIT-IBM Watson AI i Harvard NLP.

Narzędzie oferuje ogólną punktację, ale głównie pokazuje, czy każde słowo w tekście było jednym z 10, 100, 1000 lub poza 1000 słów, które najprawdopodobniej zostaną wygenerowane przez sztuczną inteligencję na podstawie wcześniejszego kontekstu w tekście. Nie ma tutaj ustawionej funkcji plagiatu.

Narzędzie zwróciło największą liczbę „prawdopodobnych słów” i szczególnie prawdopodobnych słów w pierwszej dziesiątce dla tekstu wygenerowanego przez prostszy monit.

Mimo to rozkład był podobny dla człowieka i dodatkowej szybkiej kopii w tym małym teście.

11. Detektor ChatGPT na przytulającej się twarzy

Jest to darmowy detektor, który daje ogólną prognozę i wynik. Nie ma żadnych cech plagiatu ani wyróżniania.

To narzędzie wygenerowało ponad 99,9% prawdopodobieństwo obecności ludzi we wszystkich trzech próbkach.

12. Wykrywacz zawartości AI korektora

Corrector AI Detector to darmowe narzędzie z limitem 600 słów i wynikiem procentowym. Narzędzie nie zawiera plagiatów ani funkcji wyróżniania.

Narzędzie oznaczyło każdą z próbek z bardzo niskim procentowym prawdopodobieństwem bycia „fałszywym” lub sztuczną inteligencją.

13. Detektor GPT z możliwością zapisu

Writefull GPT Detector to darmowe narzędzie z prostym wynikiem i dostępem do API. Nie ma wyróżniania ani wykrywania plagiatu.

Okazało się, że wszystkie trzy próbki były prawdopodobnie ludzkie, ale zawierały treść ChatGPT z najprostszym monitem z najwyższym prawdopodobieństwem sztucznej inteligencji (19%).

14. Wykrywanie treści generowane przez sztuczną inteligencję w Hive Moderation

Narzędzie Hive Moderation do wykrywania treści generowane przez sztuczną inteligencję jest bezpłatne (z ograniczeniami liczby znaków i koniecznością zalogowania się po kilku użyciach).

Nie oferuje plagiatu ani wyróżniania, ale pozwala podzielić zawartość na sekcje i uzyskać wyniki dla poszczególnych segmentów.

Hive właściwie ocenił każdą próbkę pisma, z 0% prawdopodobieństwem bycia sztuczną inteligencją dla treści ludzkich i 99,9% dla próbek AI.

(Tylko Oryginalność.AI miała podobny poziom ufności przy zachowaniu dokładności we wszystkich próbkach).

15. Narzędzie do parafrazowania AI Content Detector

Narzędzie do parafrazowania jest ponownie autorem i oferuje ten darmowy wykrywacz treści AI z ogólnym wnioskiem i podkreśleniem oraz bez funkcji plagiatu.

Narzędzie do parafrazowania wykazało, że każdy tekst był prawdopodobnie ludzki.

16. Test pisania AI

Sprawdzanie pisania AI to bezpłatne narzędzie, które oferuje wynik, ma maksymalną liczbę słów i nie zawiera podświetlania tekstu pod kątem prawdopodobieństwa AI ani funkcji plagiatu.

Kontrola pisania AI zidentyfikowała wszystkie trzy próbki pisma jako ludzkie.

Kluczowe wnioski z testowania 16 narzędzi do sprawdzania treści AI i ChatGPT

Ponownie, konieczne jest zastrzeżenie tutaj moich kluczowych ustaleń, ponieważ trzy krótkie próbki pisemne to bardzo małe próbki, aby wyciągnąć niezachwiane wnioski na temat poszczególnych narzędzi.

To powiedziawszy, znalazłem kilka interesujących wzorców związanych ogólnie z wykrywaczami pisma AI:

• Kalibracja: większość narzędzi wykazała, że ​​wszystkie trzy próbki pisma były z dużym prawdopodobieństwem lub bardzo mało prawdopodobne, że były to ludzkie. Różne narzędzia będą prawdopodobnie „twardsze” lub „bardziej miękkie” oceniające, jeśli chodzi o ocenianie treści człowieka w stosunku do sztucznej inteligencji, więc zrozumienie sposobu kalibracji narzędzia może pomóc określić, na ile są one przydatne.
• Najrzadsze funkcje : kilka rzadkich funkcji w narzędziach to między innymi przesyłanie zbiorcze, wykrywanie plagiatu, posiadanie rozszerzenia Chrome i wyróżnianie określonych sekcji, w których istnieje prawdopodobieństwo bycia sztuczną inteligencją lub człowiekiem.
• Darmowe vs. płatne : Wszystkie przedstawione tutaj narzędzia, z wyjątkiem Originality.AI, miały co najmniej darmowe wersje. Jednak narzędziami z najdokładniejszymi wynikami i najbardziej „rzadkimi funkcjami” były zazwyczaj narzędzia z wersją płatną.

Polecam mieć oko na co najmniej kilka z tych narzędzi, jeśli uznasz, że wykrywanie AI jest przydatne w twoich projektach.

Tempo innowacji w zakresie generowania, edytowania i wykrywania treści AI może szybko sprawić, że Twoje ulubione narzędzie stanie się przestarzałe.