Выжимка с презы Open AI:
– Вышла новая мощная модель GPT4o, доступная для всех пользователей ChatGPT, даже без регистрации. Эта модель занимает лидирующие позиции в тестах по сравнению с другими топовыми моделями, как в задачах с кодом, так и в других.
– GPT4o — это «Омнимодель», обученная одновременно на тексте, изображениях и видео, предоставляя ту самую мультимодальность, которую все ждали.
– GPT4o теперь доступна через API, при этом она вдвое дешевле и быстрее своих предшественников.
– Представили обновлённый аудио-чат: ассистент теперь шутит, распознаёт ваши эмоции, его можно перебивать своим голосом, и он сам выражает эмоции, может даже петь. Переводчик на базе GPT4o работает, как в научно-фантастических фильмах — без ошибок и лишних действий.
– Запускается десктопное приложение, где ассистент может видеть ваш экран, помогать с исправлением кода и давать советы.
Дополнительные детали:
— Новые функции будут доступны через пару недель.
— Теперь можно показывать видео поток, и ассистент будет предлагать решения без необходимости делать снимки.
— Во время демонстрации ассистент немного замедлялся.
Предсказания и их результат:
- Сбылось:
- Демонстрация ассистента, как в фильме «Она».
- Полная мультимодальность: модель обучена на видео, аудио, изображениях и тексте.
- Новая архитектура с поддержкой всех упомянутых функций.
- Обновление GPT4 с улучшенной работой с кодом (версии 4.5 или 4.1).
- Пока не подтверждено:
- Контекстное окно на 1 миллион символов.
- Не сбылось:
- Новая версия Dalle 3 с улучшенным фотореализмом.