GPT-4 может генерировать текст и принимать изображения и текст на входе. GPT-3.5, его предшественник, принимал только текст. Как и предыдущие модели GPT от OpenAI, GPT-4 обучался с использованием общедоступных данных, а также данных, лицензированных OpenAI. Возможность распознавания изображений пока доступна не для всех клиентов OpenAI. OpenAI тестирует его с одним партнером — Be My Eyes.

Как и в случае с лучшими моделями генеративного ИИ, GPT-4 не идеален. Он «галлюцинирует» — искажает факты и делает ошибки в рассуждениях, иногда с уверенностью. Чат-бот не учится на своем опыте, терпя неудачи при решении сложных проблем, например, при внедрении уязвимостей безопасности в создаваемый им код.

В будущем OpenAI планирует разрешить разработчикам настраивать GPT-4 и GPT-3.5 Turbo — одну из своих недавних, более мощных моделей генерации текста (и одну из оригинальных моделей, используемых в ChatGPT), с использованием собственных данных. Эта возможность должна быть доступна позже в этом году.

С момента появления GPT-4 в марте конкуренция за генеративный ИИ стала жестче. Недавно Anthropic расширила контекстное окно для Claude — своей флагманской модели искусственного интеллекта, генерирующей текст — с 9000 токенов до 100 000 токенов. GPT-4 ранее считался лидером по размеру контекстного окна, достигая предела в 32 000 токенов. Модели с небольшим окном контекста имеют тенденцию «забывать» содержание даже самых недавних разговоров, что приводит к отклонению от темы.

OpenAI также сообщила, что API DALL-E 2 и Whisper теперь доступны для общего пользования.

DALL-E 2 — это модель генерации изображений от OpenAI, а Whisper — модель преобразования речи в текст. OpenAI планирует отказаться от старых моделей, доступных через свои API, чтобы «оптимизировать вычислительные возможности». В последние несколько месяцев компания столкнулась с трудностями в удовлетворении спроса на свои генеративные модели, в основном из-за взрывной популярности ChatGPT.

С 4 января 2024 года определенные старые модели OpenAI, в частности GPT-3 и его производные, больше не будут доступны, и их заменят новыми моделями «базового GPT-3», которые предположительно эффективнее с точки зрения ресурсных требований. Разработчикам, использующим старые модели, необходимо будет вручную обновить свои интеграции до 4 января. В ближайшие недели OpenAI дополнительно объяснит, что и как нужно будет сделать.