ChatGPT не зміг відповісти на більшість питань про програмування
ChatGPT не зміг відповісти на більшість питань про програмування
Дослідники з Університету Пердью у США вирішили перевірити, наскільки добре один із найпопулярніших генеративних ІІ – ChatGPT – може відповідати на питання про програмування.
Дослідники задали ChatGPT 517 питань із Stack Overflow – популярного ресурсу питань та відповідей для професійних програмістів та ентузіастів. Вони також запросили 12 осіб, які мають досвід програмування, оцінити відповіді ІІ за критеріями правильності, послідовності, вичерпаності та лаконічності.
Результати були такими, що розчаровують. ChatGPT дав лише 48% правильних відповідей. При цьому стиль та якість визначень часто переконували фахівців у правильності, хоча це було не так.
"Ми помітили, що тільки тоді, коли помилка відповіді ChatGPT є очевидною, користувач може її ідентифікувати", - стверджують дослідники.
Навіть якщо відповідь ChatGPT була явно неправильною, двоє з 12 учасників все одно воліли її через приємний, впевнений і позитивний тон ІІ.
У Києві затримали громадянина Вірменії, якого Інтерпол шукав із 2005 року
Співробітники «Миколаївелектротрансу», які загинули в страшній ДТП, їхали на відпочинок на Тилігульський лиман
У День Національної поліції у Миколаєві вшанували пам'ять правоохоронців, які загинули під час виконання службового обов'язку
Тіла людей розкидані на дорозі: поліція опублікувала відео з місця страшної ДТП під Миколаєвом
В академії Міноборони затримали «крота», який передавав секретні розробки ворогові - СБУ
У Миколаєві 20-річний хлопець задушив дівчину: тіло сховав у очереті
П'яний чилієць розстріляв колумбійців у Миколаєві: подробиці подвійного вбивства в автомобілі (відео)
Яхту Путіна Graceful помітили у Балтійському морі під охороною військових кораблів (відео)
Розпочалася сесія Миколаївської міської ради (трансляція)