Упс! Не вдала спроба:(
Будь ласка, спробуйте ще раз.

ChatGPT не зміг відповісти на більшість запитань про програмування

Артем Житкевич
Артем Житкевич
8 серпня 2023 1 хвилин читання

Дослідники з Університету Пердью у США вирішили перевірити, наскільки добре один із найпопулярніших генеративних ШІ — ChatGPT — може відповідати на запитання про програмування, повідомляє TechSpot.

Дослідники поставили ChatGPT 517 запитань із Stack Overflow — популярного ресурсу запитань та відповідей для професійних програмістів та ентузіастів. Вони також запросили 12 людей, які мали досвід програмування, оцінити відповіді ШІ за критеріями правильності, послідовності, вичерпаності та лаконічності.

Результати розчарували. ChatGPT дав лише 48% правильних відповідей. При цьому стиль та якість визначень часто переконували фахівців у правильності, хоча це було не так.

Ми помітили, що тільки тоді, коли помилка у відповідь ChatGPT є очевидною, користувач може її ідентифкувати.
стверджують дослідники

Навіть якщо відповідь ChatGPT була явно неправильною, двоє з 12 учасників однаково віддавали перевагу йому через приємний, впевнений і позитивний тон ШІ. 

Підписуйтеся на наші соцмережі

50 UAH 150 UAH 500 UAH 1000 UAH 3000 UAH 5000 UAH
0
Прокоментувати
Інші матеріали

Poe представила Previews, щоб конкурувати з Artifacts від Claude AI.

Микита Терещенко 9 годин тому

Фестиваль ШІ-кіно відбувся у межах Одеського кінофестивалю: хто переміг

Владислав Паливода 22 липня 2024 12:40

GPT-4o mini — нова модель OpenAI, дешевша та розумніша

Сергій Коноплицький 19 липня 2024 15:45

ШІ Gemini від Google буде транслювати Олімпійські ігри в Парижі

Вікторія Рудзінська 19 липня 2024 07:51

OpenAI показав мініверсію ШІ-помічника — GPT-4o minі

Олеся Дерзська 18 липня 2024 21:02