ChatGPT Voice появился в настольном приложении ChatGPT

Что произошло

OpenAI добавила поддержку ChatGPT Voice в настольное приложение ChatGPT. Обновление позволяет пользователям разговаривать с приложением, чтобы управлять AI-агентами и выполнять задачи на компьютере.

Новая возможность опирается на семейство голосовых моделей ChatGPT-Live, которое OpenAI представила ранее в этом месяце.

Как это работает

OpenAI заявила, что ChatGPT Voice совместим с ChatGPT Work и Codex. Режим также может использовать навыки работы с компьютером, чтобы искать информацию на сайтах и в приложениях.

На macOS с помощью Appshots пользователи могут разрешить приложению доступ к тому, что отображается на экране, включая альтернативный текст.

По сравнению со смартфонной версией, которая была ориентирована на более плавные разговоры и лучше обрабатывала перебивания, настольное обновление рассчитано на выполнение действий. Пользователи могут диктовать сложные многошаговые команды и отвечать, когда ChatGPT запрашивает ввод.

Контекст

В демонстрационном видео OpenAI показала, как разработчик одной командой просит ChatGPT создать новый тред, оформить pull request и найти первопричину ошибки.

Компания также сообщила, что пользователи могут применять ChatGPT Voice в Codex из iOS-приложения через удаленный доступ.

Anthropic тоже обновила голосовой режим для Claude: он может использовать модели Opus, Sonnet и Haiku для выполнения задач в Gmail, Calendar, Slack, Notion и Canva.