Sceptycy
Blog

Czy antyplagiat wykrywa AI i tekst z ChatGPT w pracy dyplomowej

8 min czytania

Wynik ogólny

62%

prawdopodobieństwo tekstu z modelu

Prawdopodobnie AIMieszanyCzłowiek

Rytm zdań: równy. Słownictwo: wąskie. Frazy typowe dla modeli: 5.

Sprawdź swój tekst zdanie po zdaniu i pobierz raport PDF po polsku.

Sprawdź tekst

Klasyczny antyplagiat nie wykrywa AI, bo porównuje pracę z bazą istniejących tekstów, a tekst z czatu jest zwykle nowy i w żadnej bazie go nie ma. Od lutego 2024 roku Jednolity System Antyplagiatowy, z którego korzystają polskie uczelnie, ma jednak osobny moduł oceny AI, a komercyjne systemy, takie jak Plagiat.pl, oferują raport AI obok raportu podobieństwa. Ten wynik jest prawdopodobieństwem, nie dowodem, i ostatecznie ocenia go promotor.

Poniżej rozpisujemy, co dokładnie widzi promotor, jak czytać procenty w raporcie AI, które teksty bywają oznaczane niesłusznie i jak sprawdzić własną pracę wcześniej, kiedy jeszcze jest czas na poprawki.

Dlaczego zwykły raport podobieństwa nie widzi tekstu z czatu

Raport podobieństwa odpowiada na pytanie, czy fragment już gdzieś istnieje: w internecie, w publikacjach albo w innych pracach dyplomowych. Model językowy nie kopiuje zdań z jednego źródła, tylko składa nowe, słowo po słowie. Rozdział wygenerowany przez czat może więc mieć współczynnik podobieństwa bliski zeru i jednocześnie w całości pochodzić z modelu.

Dlatego przez pierwszy rok po premierze ChatGPT uczelnie miały problem: praca przechodziła antyplagiat bez uwag, a promotor czuł, że czyta tekst bez autora. Odpowiedzią są osobne moduły, które nie szukają źródeł, tylko analizują sam styl tekstu.

Czy JSA wykrywa ChatGPT?

Tak, w sensie oceny prawdopodobieństwa. Od lutego 2024 roku JSA sprawdza, czy tekst mógł powstać z pomocą sztucznej inteligencji, na podstawie jego przewidywalności. Według komunikatu Ministerstwa Nauki wynik nie daje stuprocentowej pewności, a decyzję o tym, co z nim zrobić, podejmuje promotor.

Student nie wgrywa pracy do JSA sam. Robi to promotor albo dziekanat przed dopuszczeniem do obrony, więc pierwszą osobą, która zobaczy wynik, jest promotor. Szczegółowo opisujemy to na stronie antyplagiat JSA dla studentów.

Co pokazuje raport AI w Plagiat.pl

Plagiat.pl, z którego korzysta wiele szkół i firm, oznacza fragmenty kolorami. Według instrukcji interpretacji raportu AI zielony oznacza wynik od 0 do 40 procent i prawdopodobny tekst człowieka, żółty od 41 do 60 procent i wynik niejednoznaczny, a czerwony od 61 do 100 procent i prawdopodobny tekst z AI. Ta sama instrukcja zastrzega, że teksty naukowe, specjalistyczne i mocno sformalizowane mogą zostać oznaczone błędnie.

Ważna uwaga z tej instrukcji, którą wielu studentów czyta odwrotnie: 80 procent przy fragmencie nie znaczy, że 80 procent tekstu napisała maszyna. To pewność modelu co do tego jednego fragmentu.

Który system co sprawdza

NarzędzieKto ma dostępPodobieństwo do źródełOcena AIKoszt dla studenta
JSAUczelnia, promotorTak, w tym baza prac dyplomowychTak, prawdopodobieństwoBezpłatne, zleca uczelnia
Plagiat.pl dla osób prywatnychKażdyTakOpcja dodatkowa, kolory 0 do 40, 41 do 60, 61 do 100Od 9,90 zł za token 18 000 znaków plus opcje
Darmowe okienka w sieciKażdyZwykle nieJedna liczba dla tekstu, często bez polszczyznyBez opłaty, limit kilku tysięcy znaków
SceptycyKażdy, konto z planemŹródła w sieci, bez bazy prac dyplomowychKażde zdanie z opisem sygnałów, tryb ostrożnyOd 99 zł netto miesięcznie przy płatności rocznej

Uczciwie: porównania z bazą prac dyplomowych nie zrobi nikt poza JSA, bo dostęp do tej bazy mają wyłącznie uczelnie. Komercyjne narzędzie pokaże Ci natomiast, które zdania mają cechy tekstu z modelu, a to właśnie te zdania promotor będzie chciał omówić. Ceny tokenów rozpisaliśmy w tekście ile kosztuje antyplagiat.

Przykład rozdziału na liczbach

Weźmy rozdział teoretyczny pracy licencjackiej: 18 000 znaków ze spacjami, czyli około 10 stron i 120 zdań. Studentka napisała go sama, ale podrozdział z definicjami, około 25 zdań, poprosiła czat o „uporządkowanie”, a potem wkleiła wynik bez zmian.

Raport podobieństwa pokazuje 4 procent, głównie przy cytowanych definicjach ustawowych z przypisami. Wszystko w porządku. Ocena AI wygląda inaczej:

FragmentZdaniaZdania oznaczone wysokoTypowe sygnały
Wstęp do rozdziału151Brak, jedno zdanie definicyjne
Podrozdział z definicjami po „uporządkowaniu”2519Równa długość zdań, powtarzalny szkielet, ogólne przykłady
Analiza przypadków603Pojedyncze zdania przy przepisach
Podsumowanie rozdziału202Formuła otwierająca zakończenie

Średnia dla całego rozdziału wychodzi niewysoka, 25 ze 120 zdań, czyli około 21 procent. Gdyby narzędzie pokazało tylko jedną liczbę, studentka mogłaby uznać, że problem nie istnieje. Ocena zdanie po zdaniu pokazuje coś innego: jeden podrozdział jest prawie w całości oznaczony, a reszta wygląda jak tekst człowieka. Promotor, który zobaczy taki obraz w JSA, zapyta dokładnie o ten podrozdział. Studentka, która zobaczy go wcześniej, przepisze 25 zdań własnymi słowami i doda przykłady z orzecznictwa, które i tak omawiała na seminarium.

Czy antyplagiat wykryje tekst z AI przerobiony parafrazerem?

Czasem tak, czasem nie. Parafrazer zmienia słowa, ale często zostawia rytm i szkielet akapitu, które detektory biorą pod uwagę. Mocno przerobiony tekst, przepisany ręcznie i uzupełniony własnymi przykładami, może przejść bez oznaczeń. Uczciwie mówiąc, w tym momencie przestaje to być tekst z czatu, bo pracę wykonał autor.

Czy promotor zobaczy, że użyłem AI?

Promotor zobaczy w raporcie fragmenty z wysokim prawdopodobieństwem i sam zdecyduje, co z nimi zrobić. Wynik nie jest automatycznym zarzutem. Zwykle kończy się pytaniem na konsultacji, prośbą o notatki albo poprawką. Problemy zaczynają się, gdy student nie umie wyjaśnić własnego tekstu.

Które prace bywają oznaczane niesłusznie

Detektory mylą się w obie strony. Najczęstsze fałszywe alarmy dotyczą tekstów, w których człowiek pisze przewidywalnie z natury gatunku.

  • Definicje, przepisy i formułki prawnicze, które z założenia brzmią tak samo w każdej pracy.
  • Rozdziały metodologiczne pisane według wzoru z poradnika uczelni.
  • Streszczenia i abstrakty, które mają sztywną budowę.
  • Teksty osób piszących bardzo starannie i podręcznikowo, bez własnych powiedzonek.
  • Krótkie fragmenty, w których jest za mało zdań, żeby ocena była stabilna.

Jeśli Twoja praca ma takie fragmenty, nie przepisuj ich na siłę. Zachowaj wersje pliku, notatki z lektur i szkice. Historia zmian dokumentu jest mocniejszym argumentem w rozmowie z promotorem niż jakikolwiek procent. Więcej o błędach detektorów piszemy w tekście czy detektory AI się mylą.

Jak sprawdzić pracę pod kątem AI przed oddaniem

Najbezpieczniej sprawdzać rozdziały na bieżąco, a nie całą pracę tydzień przed terminem. Wtedy poprawka podrozdziału zajmuje wieczór, a nie ostatni tydzień przed obroną.

  • Wgraj rozdział jako plik Word albo PDF, bez kopiowania tekstu. Jak to działa przy plikach PDF, opisujemy na stronie detektor AI dla plików PDF.
  • Ustaw tryb ostrożny, który ogranicza fałszywe alarmy przy tekstach naukowych.
  • Patrz na skupiska oznaczonych zdań, nie na średnią dla całego rozdziału.
  • Przy oznaczonych fragmentach dopisz własny przykład, odwołanie do konkretnej strony źródła albo polemikę z autorem.
  • Zapisz raport PDF i wersję pliku przed poprawkami. Przydadzą się, jeśli promotor zapyta o historię tekstu.

W Sceptykach każde zdanie dostaje ocenę z opisem sygnałów, a fragmenty zbieżne ze źródłami w sieci są zaznaczone osobno, więc jeden raport pokazuje oba ryzyka. Plan Start kosztuje 199 zł netto miesięcznie albo 99 zł netto miesięcznie przy płatności rocznej i mieści 1,5 mln znaków, czyli kilkukrotne sprawdzenie całej pracy magisterskiej po każdej poprawce. Studenci zwykle biorą go na dwa albo trzy miesiące pisania, a opis dla nich jest na stronie program antyplagiatowy dla studenta.

Dla promotorów i uczelni

Promotor, który chce widzieć problem wcześniej niż przy obronie, sprawdza rozdziały seminarzystów w trakcie roku. Paczka do 10 plików w planie Start albo do 50 w planie Zespół mieści całe seminarium, a raport PDF z oceną zdań pomaga poprowadzić rozmowę bez oskarżeń. Szczegóły są na stronie detektor AI dla promotorów, a ceny wszystkich planów w cenniku detektora AI.

Wgraj fragment swojej pracy w demo na stronie głównej. Zobaczysz ocenę każdego zdania na własnym tekście, zanim zobaczy go ktokolwiek inny.

Sprawdź tekst zdanie po zdaniu

Sprawdź tekst