ChatGPT дає різні відповіді на однакові запити: у чому проблема стабільності.

Нове дослідження виявило, що ChatGPT може відповідати по-різному на ті самі запитання, навіть якщо вони сформульовані однаково. Попри впевнені й логічні формулювання, відповіді системи не завжди залишаються послідовними.
У межах експерименту дослідник Месут Чічек із Університету штату Вашингтон неодноразово ставив моделі однакові запити, засновані на наукових гіпотезах. Результати показали: ChatGPT здатен змінювати відповіді з «правда» на «хиба» без жодних змін у запитанні.
Хоча загальна точність відповідей у 2025 році виглядала доволі високою — близько 80%, після врахування випадкових збігів вона знижувалася приблизно до 60%. Це свідчить про середній рівень надійності системи.
Найбільше труднощів виникало з непідтвердженими гіпотезами. У таких випадках модель правильно визначала хибність тверджень лише в 16,4% ситуацій. Причиною цього називають схильність ШІ погоджуватися з формулюваннями, які здаються знайомими.
Також дослідження показало проблему нестабільності: лише 72,9% відповідей залишалися незмінними після багаторазового повторення однакових запитів. В інших випадках результати змінювалися.
Фахівці пояснюють це особливістю роботи мовних моделей: вони не перевіряють факти, а прогнозують найбільш імовірні слова на основі великих обсягів тексту. Через це відповіді можуть звучати переконливо, але бути неточними.
Експерти радять використовувати штучний інтелект як допоміжний інструмент, а не як остаточне джерело інформації. Для підвищення надійності варто перевіряти дані, ставити запитання кілька разів і порівнювати результати з авторитетними джерелами.
Попри покращення порівняно з 2024 роком, ChatGPT поки не демонструє достатньої стабільності для складних аналітичних задач. Остаточні висновки, як і раніше, мають залишатися за людиною.
Також відомо про цікавий випадок: австралійський підприємець використав ШІ для створення персональної mRNA-вакцини для своєї собаки. Після цього пухлина почала зменшуватися, що привернуло увагу науковців.
Мітки: ШІ, штучний інтелект