ChatGPT відповідає неправильно на 52% питань, які стосуються програмування, — дослідження

17:00, 28 травня 2024

Дослідники також критикують ChatGPT за надмірно довгі та складні відповіді, що містять більше деталей, ніж потрібно.

ChatGPT відповідає неправильно на 52% питань, які стосуються програмування, — дослідження

Слідкуйте за актуальними новинами у соцмережах SUD.UA

ChatGPT дає 52% неправильних відповідей на питання, які стосуються програмування. Про це йдеться в дослідженні Університету Пердью, яке нещодавно презентували на конференції Computer-Human Interaction.

Для дослідження переглянули понад 517 запитань у Stack Overflow.

Експерти провели аналіз помилок штучного інтелекту та дійшли висновку, що 54% з них виникли через неправильне розуміння контексту з боку ChatGPT. Додатково, 36% відповідей містили фактичні неточності, 28% – логічні помилки, а 12% містили термінологічні неточності.

У деяких відповідях ChatGPT зустрічалися декілька помилок, наприклад, відповідь могла містити логічні недоліки (28%) через неправильно сприйнятий контекст (54%).

Також дослідники критикують ChatGPT за надмірно довгі та складні відповіді, які містять більше деталей, ніж потрібно. Це призводить до потенційної плутанини та відволікання уваги. Однак, за результатами опитування 12 програмістів, третина з них віддали перевагу чітким і схожим на підручник відповідям ChatGPT.

"Оскільки ChatGPT дає велику кількість неправильних відповідей, наші результати підкреслюють необхідність обережності та обізнаності щодо використання відповідей ChatGPT у завданнях програмування", – підсумовують автори дослідження.

Підписуйтесь на наш Telegram-канал t.me/sudua та на Google Новини SUD.UA, а також на наш VIBER, сторінку у Facebook та в Instagram, щоб бути в курсі найважливіших подій.

Читайте також

Контакти