У ChatGPT проблеми з вищою математикою
Дослідницька група запропонувала унікальний набір математичних запитань вищого рівня, щоб оцінити, чи має ChatGPT також навички проходження тестів і вирішення математичних проблем. Вони створили більш складну систему тестування, яка дозволила оцінити реальні можливості ШІ.
Набір питань GHOSTS включав запитання з підручника з математики для університетів, пропонував заповнити порожні перевірочні запитання, ставив складні задачі та просив ChatGPT інтегрувати константи в рівняння, виконувати більше стандартних аналізів для вищих навчальних закладів і дати визначення певним математичним поняттям.
На прохання пояснити, як він отримав свої відповіді, ChatGPT часто наводив нестандартні аргументи — навіть коли він отримував правильну відповідь, він робив це виходячи за межі стандартної практики.
Як зазначає Лія Генріксон, професор цифрових медіа в Університеті Квінсленда, ChatGPT легко проходить лише тести, які спираються на факти, і у цьому ШІ певно виграє у людської пам’яті.