ChatGPT не смог правильно ответить на половину вопросов на экзамене по программированию

Генеративный искусственный интеллект часто ошибается, поэтому даже разработчики не рекомендуют использовать его для создания программного кода. Чтобы проверить общие способности и знания ChatGPT в этой области, система задала более 500 вопросов по разработке программного обеспечения. Ответы более чем на половину из них были ошибочными, пишет TechSpot.

Исследователи из Университета Пердью, Индиана, США, задали ChatGPT 517 вопросов с популярного ресурса для профессиональных программистов и энтузиастов Stack Overflow. Они оценивали ответы не только по правильности, но и по последовательности, исчерпываемости и лаконичности. Также анализировали речевой стиль и настроения ответов.

По результатам эксперимента ChatGPT дал лишь 48% правильных ответов. При этом 77% ответов были описаны исследователями как многословные. Исчерпывающий и учебный стиль написания бота способствовали тому, что фактически ошибочный ответ казался волонтерам правильным.

В исследовании говорится, что даже когда ответ ChatGPT был явно ошибочным, двое из 12 участников все равно предпочитали его благодаря приятному, уверенному и положительному тону ИИ.

Мы также рассказывали, что преподаватели медицинской школы Beth Israel Deaconess в Бостоне, США, начали использовать ChatGPT для того, чтобы студенты овладевали довольно сложным навыком, а именно способностью думать как врачи.

Нещодавні статті

Power BI: какой курс выбрать для начинающих

Power BI (Business Intelligence) Microsoft – это не просто платформа для анализа данных, а ключевой…

15/01/2024

Лас-Вегас: удивительная история города азарта, мафии и головной боли для архитектора

Лас-Вегас — один из самых узнаваемых городов на планете, который ежегодно манит к себе миллионы…

24/11/2023

Более 800 раз. Пограничники подсчитали, сколько взяток им предлагали уклонисты

Из-за широкомасштабного вторжения россии в Украине было введено военное положение и объявлена ​​мобилизация. Военнообязанным мужчинам…

24/11/2023

На 100 отзывов – 100 отказов? Советы рекрутеров, как не терять мотивацию при поиске работы

«Вижу цель – не вижу препятствий». Знакомая фраза? Часто ею руководствуются кандидаты, ищущие работу мечты.…

24/11/2023

Открытый банкинг. В НБУ раскрыли детали предстоящего обмена данными между банками

Национальный банк Украины работает над открытым банкингом. Речь идет о структурированном и безопасном обмене данными…

24/11/2023

Финансовый консультант потратил более $4 млн своего клиента на азартные игры и недвижимость

В США финансовому консультанту предъявили обвинение в растрате около $5 млн, которые принадлежали его клиенту.…

24/11/2023