Познакомьтесь с GPT-4o от OpenAI: бесплатная LLM с поддержкой текстового, голосового и изображений

Сэм Альтман, мозг OpenAI, запустил новую модель LLM после анонса в прямом эфире в Twitter.

GPT-4o — это последнее улучшение модели LLM, которая может принимать мультимодальные входные данные. Она может легко понимать голосовые, текстовые или визуальные команды.

OpenAI интегрирует GPT-4o в ChatGPT и не ограничивает новую LLM за платным доступом.

Содержание

• Насколько хорош GPT-4o? - GPT-4o бесплатен, но есть нюанс

Насколько хорош GPT-4o?

По сравнению с предыдущими моделями, GPT-4o значительно быстрее. Согласно изображению, представленному Сэмом, модель лучше справляется со всеми рутинными задачами, особенно с кодированием.

Модель получила общий рейтинг 1310 по сравнению с другими старыми моделями GPT и LLM от различных компаний.

Она набрала 1369 в категории кодирования, опередив другие модели на целую милю.

Сэм продолжил демонстрировать новые модели во всех областях. Видеоклип показывает, как ведущий взаимодействует с ChatGPT, работающим на GPT-4o, используя голосовую функцию.

К нашему удивлению, AI-ассистент сохранял человеческий тон и интонацию, когда вы разговаривали с очень старым другом.

Официальная веб-страница утверждает: «Он может отвечать на аудиовходы всего за 232 миллисекунды, в среднем 320 миллисекунд».

Эти цифры указывают на то, что новая модель очень близка к скорости реакции человека в разговоре.

Аудиовзаимодействие не звучало роботизированно или монотонно, как у большинства голосовых помощников.

Сэм отметил огромную разницу и сказал: «Голос и видео в реальном времени ощущаются так естественно».

Ведущий затем переключился в видеорежим и написал уравнение, которое новая модель быстро распознала и решила.

Демонстрация кодирования интерпретировала фрагменты кода, на которые указывали ведущие, без труда.

GPT-4o бесплатен, но есть нюанс

ChatGPT с моделью GPT-4 доступен только для платных подписчиков. Но GPT-4o доступен всем существующим участникам ChatGPT (как бесплатным, так и платным) бесплатно.

Тем не менее, Голосовой режим с GPT-4o в альфа-версии будет доступен только подписчикам ChatGPT Plus.

Разработчики могут получить практический опыт с API новой LLM за половину цены GPT 4. Более того, OpenAI утверждает, что API в два раза быстрее с пятерными лимитами.