ChatGPT не зміг відповісти на більшість питань про програмування
ChatGPT не зміг відповісти на більшість питань про програмування
Дослідники з Університету Пердью у США вирішили перевірити, наскільки добре один із найпопулярніших генеративних ІІ – ChatGPT – може відповідати на питання про програмування.
Дослідники задали ChatGPT 517 питань із Stack Overflow – популярного ресурсу питань та відповідей для професійних програмістів та ентузіастів. Вони також запросили 12 осіб, які мають досвід програмування, оцінити відповіді ІІ за критеріями правильності, послідовності, вичерпаності та лаконічності.
Результати були такими, що розчаровують. ChatGPT дав лише 48% правильних відповідей. При цьому стиль та якість визначень часто переконували фахівців у правильності, хоча це було не так.
"Ми помітили, що тільки тоді, коли помилка відповіді ChatGPT є очевидною, користувач може її ідентифікувати", - стверджують дослідники.
Навіть якщо відповідь ChatGPT була явно неправильною, двоє з 12 учасників все одно воліли її через приємний, впевнений і позитивний тон ІІ.
Toyota зіткнулася з трамваєм у центрі Миколаєва: рух заблокований
Два тіла витягли з річки Інгул під Миколаєвом (відео)
Забив молотком двох односельчан та травмував свого батька: у Закарпатській області затримали чоловіка (відео)
Водій електроскутера, який на смерть збив жінку у Миколаєві, отримав 3 роки в'язниці
У центрі Миколаєва зарості чортополоху цвітуть пишним цвітом: «Миколаївські парки» не вживають жодних заходів
В Одесі російський дрон влетів у квартиру на 11 поверсі (відео)
На Одещині водій BMW, який перебував у розшуку, збив прикордонника під час спроби втечі (відео)
На Одещині чоловіка придавило бетонною плитою в покинутій будівлі (відео)
«Амур. Дубль два» - нова робота миколаївської художниці на тему «втечі із міськвиконкому» (фото, відео)