Sceptycy
Blog

Wykrywacz ChatGPT po polsku i co zrobić z wynikiem

8 min czytania

Raport PDF

Raport z analizy tekstu

Zdanie 388%
Zdanie 752%
Zdanie 911%
Zdanie 1279%

Podpowiedź do rozmowy z autorem. Poproś o wyjaśnienie, skąd pochodzi to sformułowanie.

Wykrywacz ChatGPT po polsku nie rozpoznaje konkretnego programu. Ocenia, czy tekst ma statystyczne cechy pisania modelu językowego: równy rytm zdań, schematyczne przejścia i ogólniki bez konkretu. Dlatego ten sam wynik trafia do kogoś, kto tekst wygenerował, i do kogoś, kto pisze bardzo formalnie. Wartość narzędzia zależy od tego, co zrobisz z wynikiem, a nie od samego procentu.

Co wykrywacz widzi, a czego nie widzi

Widzi tekst. Nie widzi autora, historii pliku ani tego, czy ktoś użył modelu do pomysłów, a potem napisał wszystko sam. Narzędzie dla polszczyzny zwraca uwagę na zmienność długości zdań, różnorodność słownictwa, powtarzające się początki zdań i frazy, których modele nadużywają po polsku, na przykład „warto zauważyć” czy „odgrywa kluczową rolę”.

  • Wykrywa: równy rytm, utarte przejścia, brak osobistego języka w tekście osobistym.
  • Nie wykrywa: kto fizycznie pisał, czy model był użyty do szkicu, czy autor opanował temat.
  • Myli się częściej przy krótkich tekstach, tekstach urzędowych i pisanych w obcym dla autora języku.

Trzy przykłady wyników i co z nich wynika

Weźmy trzy wypracowania na dwie strony, sprawdzone w trybie ostrożnym. Liczby są przykładowe i pokazują sposób czytania, nie statystykę skuteczności.

PrzypadekCo widać w wynikuCo zrobić
A. Jeden akapit wklejony w środekWiększość zdań niska, cztery kolejne zdania wysokie, ten sam rytm i schematyczne przejścieZapytać autora o ten akapit, poprosić o własne słowa i źródła
B. Cały tekst o wysokim wynikuWysokie oceny od początku do końca, brak konkretów i przykładów z lekcjiPorównać z poprzednimi pracami, poprosić o szkic, potem rozmowa
C. Niski wynik, ale styl zmienił się nagleBrak alarmu, za to inne słownictwo niż w ostatnich pracachNie opierać się na samym wyniku, porozmawiać o treści

Przypadek C jest ważny. Brak alarmu nie dowodzi, że pisał człowiek, zwłaszcza gdy ktoś przepisał tekst z modelu i dodał własne przykłady. Szerzej o pomyłkach narzędzi piszemy w artykule <a href="/blog/czy-detektory-ai-sie-myla">czy detektory AI się mylą</a>.

Procedura po alarmie, krok po kroku

  • Zapisz wynik i pobierz raport z oceną zdań, żeby rozmowa opierała się na konkretnych fragmentach.
  • Porównaj styl z dwiema, trzema wcześniejszymi pracami tego samego autora.
  • Poproś o szkice, notatki lub historię zmian dokumentu.
  • Zaproś autora do rozmowy i poproś, żeby własnymi słowami wyjaśnił zaznaczony fragment.
  • Dopiero po rozmowie decyduj o konsekwencjach i zapisz ustalenia w notatce.

Ta kolejność chroni uczciwych autorów, bo wynik detektora jest tylko jednym z trzech źródeł obok porównania z wcześniejszymi tekstami i rozmowy. W szkołach dobrze mieć ją zapisaną w regulaminie, zanim pojawi się pierwszy spór, a przy sprawach spornych warto sięgnąć po stanowisko organu nadzorującego, na przykład <a href="https://www.gov.pl/web/edukacja">Ministerstwa Edukacji</a>. O tym, jak wygląda przeprowadzenie takiej rozmowy z uczniem, piszemy w tekście <a href="/blog/wypracowanie-z-czatu-rozmowa-z-uczniem">wypracowanie z czatu i rozmowa z uczniem</a>.

Najczęstsze błędy przy czytaniu wyniku

Pierwszy błąd to traktowanie procentu jak oceny winy. Wynik 70 procent nie znaczy, że 70 procent tekstu napisał model, tylko że narzędzie jest w dużym stopniu przekonane o sygnałach w ocenianych zdaniach. Drugi błąd to sprawdzanie bardzo krótkich próbek: jedno zdanie lub krótki akapit daje za mało materiału, więc wynik skacze po każdej drobnej zmianie.

Trzeci błąd to wniosek bez porównania. Jeśli uczeń zawsze pisał krótkimi zdaniami z prostym słownictwem, a nagle oddaje elegancki esej o równym rytmie, to więcej mówi zestawienie dwóch prac niż jakikolwiek procent. Czwarty błąd to puszczanie wyniku do autora bez kontekstu. Raport powinien trafić do rozmowy razem z wyjaśnieniem, że jest wskazówką i że to autor ma pierwszą okazję na wyjaśnienie.

Jaki tryb czułości wybrać

Tryb ostrożny zaznacza tylko zdania z wyraźnymi sygnałami, więc ogranicza fałszywe alarmy i jest zalecany przy pracach uczniów i studentów, gdzie pomyłka krzywdzi człowieka. Tryb wysoki wyłapuje więcej i pasuje do wstępnej selekcji dużej partii tekstów, na przykład zleceń od zewnętrznych autorów w redakcji, gdzie i tak przeczyta je człowiek. Jeśli nie wiesz, który wybrać, zacznij od ostrożnego i dopiero potem sprawdź wątpliwe pliki w wysokim.

Dlaczego jedna liczba nie wystarcza

Wykrywacz, który zwraca tylko „63 procent AI”, zostawia pytania: które zdania, dlaczego, w jakim trybie czułości. Autor pracy zapyta o to od razu i bez odpowiedzi cała rozmowa zamienia się w spór o liczbę. Ocena zdanie po zdaniu daje odpowiedź na „gdzie” i „dlaczego”, co zmienia rozmowę w sprawdzanie konkretnego akapitu. Jeśli wybierasz narzędzie, zobacz kryteria w tekście <a href="/blog/program-do-wykrywania-ai-jak-wybrac">jak wybrać program do wykrywania AI</a>, a pełny opis działania w stronie <a href="/detektor-chatgpt">detektor tekstu z czatu AI</a>.

Różne zawody, różne wymagania

Polonista chce zdań do omówienia na lekcji, promotor raportu do notatki z konsultacji, a redaktor szybkiej selekcji partii artykułów. Teksty specjalistyczne, na przykład z kierunków medycznych, bywają z natury bardzo formalne i schematyczne, co zwiększa ryzyko fałszywych alarmów. Promotor prac z elektroradiologii czy fizyki medycznej, której absolwenci szukają później ofert na portalach takich jak <a href="https://radioterapeuci.pl/">Radioterapeuci</a>, powinien więc czytać wynik szczególnie ostrożnie i porównać go z wcześniejszymi pracami autora.

Ile kosztuje wykrywacz tekstu z ChatGPT

Sceptycy kosztują od 99 zł netto miesięcznie przy płatności rocznej albo 199 zł netto miesięcznie przy płatności miesięcznej, plus 23 procent VAT, z fakturą w złotówkach. Plany dla zespołów opisuje <a href="/cennik">cennik detektora AI</a>.

Sprawdź tekst w Sceptykach

Wklej fragment do demo na stronie głównej albo wgraj plik Word lub PDF. Zobaczysz ocenę każdego zdania, sygnały i raport PDF po polsku. Dla pracy zawodowej nauczycieli i promotorów przygotowaliśmy stronę o <a href="/sprawdzanie-pracy-pod-katem-ai">sprawdzaniu pracy pod kątem AI</a>.

Sprawdź tekst zdanie po zdaniu

Sprawdź tekst