Рубріки: Новини

ChatGPT відповідає неправильно на 52% питань щодо програмування — дослідження

Ігор Шелудченко

Популярний ШІ-сервіс ChatGPT дає 52% неправильних відповідей на питання, які стосуються програмування.

Про це йдеться в дослідженні Університету Пердью, яке нещодавно презентували на конференції Computer-Human Interaction.

Для дослідження переглянули понад 517 запитань у Stack Overflow.

«Ми виявили, що 52% відповідей ChatGPT містять дезінформацію, 77% відповідей більш багатослівні, ніж відповіді людей, а 78% відповідей мають різний ступінь невідповідності», — написали вони.

Особливо непокоїть те, що досить багато програмістів використовують для консультацій саме ChatGPT. Дослідники виявили, що 35% надають перевагу ChatGPT і не помічають помилок 39%.

«Подальші напівструктуровані інтерв’ю показали, що ввічлива мова, сформульовані відповіді в стилі підручника та вичерпність є одними з основних причин, які зробили відповіді ChatGPT більш переконливими, тому учасники схильні йому довіряти», – пишуть дослідники.

Зазначимо, що за півтора роки трафік Stack Overflow впав приблизно на 35%. І помітне падіння почалося після релізу ШІ-чатбота ChatGPT.У відповідь на це Stack Overflow анонсував OverflowAI — комплекс функцій, які працюють на основі штучного інтелекту.

Також Stack Overflow навіть вирішив заборонити використання ChatGPT на платформі, заявивши, що має сумніви щодо точності таких відповідей.

Тим не менш, це не домогло і Stack Overflow звільнив 28% персоналу.

Останні статті

Зарплати розробників продовжують знижуватися, особливо страждає Front-End — дослідження DOU

Медіанна зарплата розробників зросла на $200, але здебільшого затрахунок Tech Lead. При цьому найвищі зарплати…

01.07.2024

Відсутність self-presentation speech та невміння підтримати small talk. Зібрано найпоширеніші помилки кандидатів під час інтерв’ю

Lead Software Engineer та ментор Валентин Тищенко на своїй сторінці в LinkedIn окреслив поширені проблеми…

01.07.2024

Українські геймдев студії люблять Mobile та не бояться мати офіс в Краматорську. Результати дослідження

Одразу 20 з 25 українські геймдев компанії займаються розробкою ігор для мобільних платформ, консолі та…

28.06.2024

«Обрали тактику ігнору та репресій»: UI/UX-дизайнерка звинувачує IT-компанію в 8-місячних затримках зарплати

UI/UX-дизайнерка Марія Абашина заявила, що компанія Infinity Technologies AG видалила її з робочого чату в…

28.06.2024

Мінцифри назвало строки запуску електронного бронювання в «Дії»

Міністерство цифрової трансформації активно працює над електронним бронюванням на порталі «Дія» і планує запустити бета-тест…

28.06.2024

IT-підприємець Пацан скинув шахраям 1 біток: ШІ допоміг їм згенерувати аудіо- та відеоповідомлення

Інвестор і підприємець Михайло Пацан скинув шахраям 1 біткоїн, оскільки повірив в те, що гроші…

27.06.2024