Вышел долгожданный GPT-4.

Это было очень разрекламировано, десятки аккаунтов в Твиттере и технических блогах сходили с ума по слухам о модели.

Мне повезло, что я живу в стране, где доступен ChatGPT Plus, и мне удалось с ним поэкспериментировать.

Как видно на снимке экрана выше, вы можете видеть, что уровень «рассуждений» и «краткости» высок, и OpenAI отмечает, что он превосходно справляется с « задачами, требующими предварительного рассуждения, понимания сложных инструкций и большего творчества».

Что это значит?

И какой из них ВЫ должны использовать для своего приложения?

Сначала я расскажу о достоинствах модели GPT-4 непосредственно из ее white paper.

Возможности ГПТ-4

Результаты GPT-4 на экзаменах

Первое, что бросается в глаза, это невероятно высокие баллы на сложных экзаменах.

GPT-4 получил баллы в 10% лучших участников теста на смоделированной версии единого экзамена на адвоката.

Эта замечательная производительность, по-видимому, связана с процессом предварительной подготовки модели.

Он также получил довольно высокие оценки по чтению/письму и математике SAT.

Тем не менее, чтобы перейти в Лигу плюща, он все еще должен быть выше.

Многоязычные возможности

Одним из ограничений существующих тестов машинного обучения является то, что они преимущественно написаны на английском языке.

Чтобы оценить возможности GPT-4 на других языках, исследователи перевели эталонный тест MMLU на разные языки с помощью Azure Translate — набора задач с несколькими вариантами ответов, охватывающих 57 тем.

Результаты показали, что GPT-4 превзошел англоязычную производительность GPT-3.5 и существующих языковых моделей для большинства протестированных языков, включая языки с низким уровнем ресурсов, такие как латышский, валлийский и суахили.

Улучшенная способность следовать намерениям пользователя

GPT-4 существенно улучшил способность следовать намерениям пользователя по сравнению с предыдущими моделями.

В наборе данных из 5214 запросов, отправленных в ChatGPT и API OpenAI, ответы, сгенерированные GPT-4, были предпочтительнее, чем GPT-3.5, в 70,2% запросов.

Возможности визуального ввода

GPT-4 также принимает подсказки, содержащие изображения и текст, что позволяет пользователям указывать любую зрительную или языковую задачу.

Модель генерирует текстовые выходные данные, учитывая входные данные, состоящие из чересстрочного текста и изображений. GPT-4 обладает теми же возможностями визуального ввода, что и ввод только текста, что делает его пригодным для обработки документов с текстом, фотографиями, диаграммами или снимками экрана.

Стандартные методы тестирования, разработанные для языковых моделей, также эффективны при использовании изображений и текста.

Благодаря своей способности обрабатывать визуальные данные, GPT-4 может произвести революцию в том, как мы взаимодействуем с моделями ИИ и используем их.

Есть еще некоторые ограничения GPT-4 (хотя он и улучшился по сравнению с GPT3.5).

Ограничения GPT-4

Ненадежные выходы

GPT-4, как и его предшественники, ненадежен, так как может «галлюцинировать» факты и делать ошибки в рассуждениях. В результате пользователи должны проявлять осторожность при использовании выходных данных, сгенерированных GPT-4, особенно в контекстах с высокими ставками.

Возможные стратегии смягчения последствий включают проверку человеком, обоснование ИИ дополнительным контекстом или полный отказ от использования с высокими ставками.

Однако вы можете видеть, что оценки gpt-4 выше, чем у предшественников.

Ограниченное знание последних событий

Данные предварительной подготовки GPT-4 в основном поступают из источников до сентября 2021 года, а это означает, что ему не хватает информации о событиях, происходящих после этой даты.

Следовательно, GPT-4 может понадобиться помощь с точной или актуальной информацией о последних событиях.

Предубеждения в результатах

GPT-4 может создавать выходные данные с различными смещениями, которые необходимо решать и управлять ими. Предпринимаются усилия, чтобы полностью охарактеризовать и справиться с этими предубеждениями, стремясь создать системы ИИ с соответствующим поведением по умолчанию, которые отражают широкий диапазон значений пользователей, возможности настройки в широких пределах и общественное мнение в этих пределах.

Тем не менее, многие пользователи говорят, что OpenAI по-прежнему придерживается левых взглядов.

Расходы

Для меня самым важным фактором является стоимость. GPT3.5-turbo намного дешевле (в 15~30 раз) с его токенами API.

• GPT3.5-Turbo: 0,002 доллара США за 1000 токенов.
• GPT4: $0,03 ~ $0,06 за 1000 токенов.

Поэтому вам нужен вариант использования, который требует более сложных рассуждений и может дать положительную рентабельность инвестиций.

Итак, что вы думаете о выпуске GPT-4?

Мы видели много хайпа в социальных сетях. Я уверен, что многие из вас видели эту картину.

Оправдали ли эти обновления вашу рекламу? Или это было больше похоже на обновление iPhone?

Для меня видение причины GPT-4 с данными и числами действительно сногсшибательно. Приложения, которые строятся, уже интересны.

Поскольку LLM (большие языковые модели) продолжают развиваться и совершенствоваться, мы можем ожидать более продвинутых рассуждений, понимания сложных инструкций и повышения креативности их результатов.

Как долго, прежде чем они превзойдут человеческие возможности, у вас будет такая сила за 20 долларов в месяц?

Если вы хотите читать больше подобных новостей, рассмотрите возможность подписки на мою бесплатную рассылку новостей.

Кроме того, вы можете получить подписку на Medium за 5 долларов в месяц. Если вы воспользуетесь этой ссылкой, это поддержит меня.

Подпишитесь на DDIntel здесь .

Посетите наш сайт здесь:https://www.datadriveninvestor.com

Присоединяйтесь к нашей сети здесь:https://datadriveninvestor.com/collaborate