GPT-4

OpenAI представила GPT-4 – последнюю разработку в линейке языковых моделей искусственного интеллекта. Компания описывает ее как более безопасную, креативную и полезную. А мы разберемся, какие перспективы использования новинка открывает перед простыми пользователями. Редакция MC.today выяснила что такое GPT-4, почему эту модель ИИ называют мультимодальной, чем она отличается от GPT-3.5, какие имеет ограничения и как получить к ней доступ уже сегодня. Что такое GPT-4 GPT-4 – это новейшая модель ИИ от компании OpenAI, которая стала четвертой в линейке языковых моделей GPT и первой мультимодальной. Это значит, что она может обрабатывать не только текст, но и другие виды информации, – например, изображения. https://twitter.com/sama/status/1635687853324902401 «Вот GPT-4, наша самая мощная и согласованная модель, – написал 14 марта в Twitter генеральный директор OpenAI Сэм Альтман. – С этого дня она доступна в нашем API (со списком ожидания) и в ChatGPT Plus» Поисковая система Bing Но, как оказалось, некоторые пользователи получили доступ к новой технологии намного раньше. Так, корпорация Microsoft подтвердила, что последние версии ее поисковой системы Bing тайно работали с GPT-4 еще до официального запуска модели. Когда Microsoft запустила новый Bing, ходили слухи о том, что он уже использует GPT-4. Так что это сложно назвать сенсацией. Интересен тут другой момент: корпорация не побоялась поставить на карту свою репутацию, а значит была полностью уверена в возможностях и перспективах нового детища OpenAI. CEO OpenAI Sam Altman / Источник: Flickr.com В отчете о GPT-4 технические характеристики модели не указаны явно. Некоторые СМИ поспешили процитировать слухи о том, что число параметров увеличилось со 175 млрд. до 100 трлн. Однако сам CEO OpenAI Сэм Альтман назвал их «полной чушью». «В обычном разговоре разница между GPT-3.5 и GPT-4 может быть едва уловимой, — указывает OpenAI в анонсе GPT-4. – Разница проявляется, когда сложность задачи достигает достаточного порога. GPT-4 более надежен, креативен и способен обрабатывать гораздо более тонкие инструкции, чем GPT-3.5». GPT-4 способен понимать, что происходит на картинках, хотя в данном случае это не совсем просто Одной из самых интересных фишек GPT-4 является его способность понимать изображения. Например, если спросить его, что происходит на картинке выше, он ответит: «мужчина гладит одежду на гладильной доске, которая прикреплена к крыше автомобиля». История создания GPT-4 Модель GPT-4 не появилась на пустом месте. Она является самым последним поколением семейства GPT. Аббревиатура расшифровывается, как Generative Pre-trained Transformer – предварительно обученный трансформер для генерации текста. Обучение большой языковой модели Трансформер тут – не название фантастического робота, а архитектура нейронной сети, которую в 2017 году разработали исследователи Google. Именно изобретение Трансформера вывело разработку ИИ из состояния застоя. Главная особенность этой архитектуры в ее гибкости, масштабируемости и способности к параллельной обработке данных. Инженеры из OpenAI первыми доказали, что Трансформер можно использовать для генерации текстов. Их языковая модель GPT-1 легко превзошла всех своих предшественников в умении работать с большими объемами информации. В 2019 году ее сменила GPT-2 с объемом тренировочного датасета в 40 Гб и полутора миллиардами параметров. А еще через год появилась GPT-3 со 175 млрд параметров и увеличенным до 420 Гб объемом данных. Интерфейс ChatGPT После дополнительного обучения GPT-3 с помощью обратной связи от тестеров, языковой модели присвоили индекс GPT-3.5. В сочетании с удобным интерфейсом она стала тем самым ChatGPT, который заслужил титул самой важной инновации XXI века от Билла Гейтса. Для обучения GPT-4 инженеры OpenAI совместно с платформой облачных вычислений Microsoft Azure разработали с нуля специальный суперкомпьютер. Понадобилось 6 месяцев, чтобы с его помощью обучить GPT-4 на еще большем наборе данных и настроить с учетом реального опыта взаимодействия с людьми, который дала эксплуатация ChatGPT. Следует заметить, что сам по себе ChatGPT не является версией языковой модели. И хотя его часто отождествляют с GPT-3.5, он выступает лишь способом взаимодействия с этой моделью. А теперь в версии Plus это еще и способ взаимодействия с GPT-4. Чем GPT-4 отличается от предшественников Чтобы лучше понять разницу между привычным нам чат-ботом и его усовершенствованной версией, перечислим пять основных различий. GPT-4 может понимать изображения Мультимодальность позволяет GPT-4 понимать более одного «модального» типа информации. Все предыдущие модели GPT могли обрабатывать только текст. В отличие от них, GPT-4 способен анализировать изображения и понимать, что на них изображено. ChatGPT анализирует изображения и понимает юмор / Источник: OpenAI В сочетании с возросшими логическими способностями это приводит к удивительным результатам. Например, GPT-4 не только понимает, что на картинке изображен огромный разъем для iPhone, но может объяснить почему это смешно! А ведь юмор долго считали недостижимой для ИИ вершиной. Многообещающим выглядит также сотрудничество OpenAI с платформой Be My Eyes для незрячих людей. Приложение на основе GPT-4 позволит слепым и слабовидящим получить звуковое описание всего, что видит их телефон. Виртуальный помощник определяет содержимое холодильника и предлагает на этой основе рецепты Например, если пользователь отправит фотографию своего холодильника изнутри, виртуальный помощник сможет определить, что в нем находится. Кроме этого он может описать узор на платье, перевести этикетку, прочитать карту и объяснить, как добраться до нужного отдела в магазине. GPT-4 сложнее сбить с толку OpenAI провела огромную работу, чтобы сделать GPT-4 более безопасным. В результате модель на 82% реже предшественницы отвечает на запросы о запрещенном контенте. Существенно изменились в лучшую сторону также ответы на деликатные и неоднозначные запросы. Безопасность – приоритет OpenAI Между тем остается вероятность того, что GPT-4 может сгенерировать вредоносный контент. Условно его можно разбить на 5 групп риска. Советы, которые могут привести к самовредительству. Преследование, унижение и ненависть. Материалы эротического характера. Информация, которая может быть полезной для планирования нападений или насилия. Инструкции по поиску незаконного содержания. GPT-4 может помнить в ходе разговора больше текста Большие языковые модели обучались на миллионах веб-страниц. Но когда вы пытаетесь ввести в ChatGPT страницу текста, может выясниться, что это слишком много. Аналогичным образом ответ чат-бота часто прерывается после 4–5 абзаца. Дело в том, что существует предел количества информации, которую языковая модель может «держать в уме». Кстати, подробнее об этом мы писали в статье про интеграцию GPT-помощника в Google Docs. Для старой версии ChatGPT этот предел составлял 4096 токенов. Это примерно соответствует 8 тыс английских слов, но в разы меньше – при использовании других языков. К примеру, в английской фразе «What is your favorite animal» система выделяет 5 токенов. А в украинской фразе «Яка у тебе улюблена тварина» – 31 токен! В GPT-4 проблема решена: максимальное количество токенов в запросе возросло до 32 768. Это примерно 50 страниц текста. Вполне достаточно для содержательной беседы с ИИ на любую тему. GPT-4 имеет улучшенную многоязычность Изначально ответы ChatGPT на английском были заметно лучше аналогичных на других языках. Поэтому многие пользователи были вынуждены делать двойную работу: сначала переводить запрос на английский, а потом переводить ответ с английского. GPT-4 подучил языки GPT-4 сделал в этом направлении шаг вперед. Теперь ответы на итальянском, украинском, корейском и еще 26 языках почти такие же корректные, как и на английском. GPT-4 может менять свое поведение по требованию Разработчики внедрили в GPT-4 расширенный инструментарий управляемости. Он позволяет отправлять через API системные сообщения, которые меняют стиль работы ИИ, задают тон его ответов и устанавливают определенные сценарии взаимодействия с человеком. GPT-4 может менять тон ответов и сценарии взаимодействия с человеком Например, системное сообщение может выглядеть так: «Вы репетитор, который всегда отвечает в стиле Сократа. Вы никогда не даете ученику ответа, но всегда стараетесь задать правильный вопрос, чтобы помочь ему научиться думать самостоятельно». Ограничения и недостатки GPT-4 «GPT-4, как правило, не знает о событиях, которые произошли после сентября 2021 года, и не учится на своем опыте, – пишет OpenAI. – Иногда он может совершать простые логические ошибки или быть слишком легковерным, принимая очевидные ложные утверждения от пользователя». GPT-4 также по-прежнему имеет социальные предубеждения, склонен к галлюцинациям и враждебным подсказкам. Однако разработчики стремятся расширить возможности участия людей в формировании модели и призывают их активнее оценивать удачные и неудачные ответы ИИ в окне чата. Как получить доступ к GPT-4 Сегодня есть два способа получить доступ к GPT-4. Во-первых, он доступен платным пользователям OpenAI через ежемесячную подписку ChatGPT Plus (с ограничением использования). Стоимость услуги $20. Варианты доступа к GPT-4 / Источник: OpenAI Во-вторых, разработчики могут зарегистрироваться в списке ожидания для доступа к AP новой языковой модели. Цена его использования составляет $0,03 за 1 тыс. токенов «запроса» (около 750 английских слов) и $0,06 за 1 тыс. токенов «завершения». Напомним, что токены запроса – это части слов, которые вы передаете в GPT-4, а токены завершения – это содержимое ответа GPT-4. Возможности и перспективы OpenAI уже сотрудничает с рядом компаний, которые интегрировали GPT-4 в свои продукты. Например, приложение Stripe использует GPT-4 для сканирования сайтов. GPT-4 – Generative Pre-Trained Transformer model 4 Duolingo встроил новейшую модель ИИ в новый уровень подписки на изучение языков. Morgan Stanley создает систему на основе GPT-4, которая будет извлекать информацию из документов компании и предоставлять ее финансовым аналитикам. В дальнейшем таких приложений станет еще больше. А простые пользователи получат более мощного и безопасного GPT-ассистента, который понимает шутки, может запоминать длинные разговоры, заменит для детей репетиторов по любому предмету и станет вторыми глазами для слабовидящих. «Мы надеемся, что GPT-4 станет ценным инструментом для улучшения жизни людей за счет поддержки многих приложений, – пишет OpenAI. – Предстоит еще много работы, и мы с нетерпением ждем возможности улучшить эту модель благодаря коллективным усилиям сообщества».

GPT-4

Подучил украинский и стал понимать шутки: как получить доступ к GPT-4