«Дуже просте дослідження», як назвав його провідний автор Konradin Metze, опубліковане 10 жовтня 2025 року в журналі Journal of Clinical Anesthesia, використовувало чат-боти LLM, такі як ChatGPT, Copilot, Gemini та інші, щоб перевірити, чи зможуть вони успішно ідентифікувати відкликані статті у списку літератури.

Metze та його колеги склали список зі 132 публікацій. Список включав 50 найчастіше цитованих, відкликаних статей Joachim Boldt, плідного німецького дослідника, який також очолює рейтинг відкликаних статей Retraction Watch. Ще 50 були найчастіше цитованими невідкликаними статтями Больдта. Решта були роботами інших дослідників з прізвищем «Boldt» та першою літерою «J». Автори дослідження пропонували кожному чат-боту вказати, які з перелічених посилань були відкликані.

Дослідження 21 чат-бота показує, що моделі великих мов не слід використовувати для відсіювання відкликаної літератури. Чат-боти не лише ненадійно визначали відкликані статті, але й видавали різні результати, коли їм давали однакові запити.

Джерело https://retractionwatch.com/2025/11/19/ai-unreliable-identifying-retracted-research-papers-study/

Ще одна гучна справа зацікавила науковців. Прочитати зараз