Wykrywanie użycia ChatGPT w artykułach akademickich poprzez nadmiarowe słownictwo

Nie jest tajemnicą, że obecnie studenci uwielbiają używać ChatGPT do pomocy przy sporządzaniu raportów i innych zadaniach związanych z pisaniem, ale wśród naukowców staje się to również coraz bardziej powszechne. Nasuwa się pytanie, czy za pomocą ChatGPT można w jakiś sposób rozróżnić pisma akademickie. według [Dmitry Kobak] Tak właśnie jest i koledzy, a silną oznaką używania ChatGPT jest dużo dodatkowego kwiecistego słownictwa w tekście. Jak szczegółowo opisano w Ich artykuł przed publikacjąPowtórzenie niektórych stereotypowych słów stanowi zauważalną zmianę słownictwa użytego w badanych publikacjach.

W swoim badaniu przyjrzeli się ponad 14 milionom abstraktów biomedycznych z lat 2010–2024 uzyskanych za pośrednictwem PubMed. Podsumowania te następnie przeanalizowano pod kątem użycia i częstotliwości użycia słów, wykazując naturalny wzrost częstotliwości słów (np. w wyniku pandemii SARS-CoV-2 i wybuchu wirusa Ebola), a także dramatyczny wzrost nadmiaru słownictwa, który zbiega się z publiczną dostępnością ChatGPT i podobnych narzędzia Zależy od LLM.

W sumie dodano adnotacje 774 unikalnych, zbędnych słów. „Nadmiar” oznacza tutaj „poza normą”, zgodnie ze wzorem „nadmiernych zgonów”, w przypadku którego zgony w jednym okresie znacznie odbiegają od wzorców ustalonych w poprzednich okresach. W tym względzie przeszkodą są słowa takie jak: oddechowy To logiczne, ale mutacja stylu słów jest podobna skomplikowane I W szczególności Wydaje się, że wynika to z upodobania absolwentów MBA do tak kwiecistego i nadmiernie dramatycznego języka.

Naukowcy tak mają Istnieje kod analityczny Dla tych, którzy chcą spróbować na innej grupie. Również główny autor skierowany Pytanie, czy ChatGPT może wpłynąć na ludzi, aby pisali bardziej jak LLM. W tym momencie nadal otwartym pytaniem jest, czy ludzie są bardziej skłonni używać słownictwa podobnego do ChatGPT, czy też starają się unikać wyglądania jak studenci LLM.