Google добавила в Gemini для Mac режим Computer Use: задачи в фоне

Google добавила в приложение Gemini для Mac функцию Computer Use. По описанию The Decoder, она выполняет многошаговые задачи с локальными файлами, настольными приложениями и сайтами. По словам Google, пользователю достаточно описать цель, а Gemini сам кликает, вводит текст и перемещается по меню и формам.
Всё происходит в изолированном фоновом окне с живым предпросмотром в чате, поэтому экран и курсор остаются свободными и работу на компьютере не нужно прерывать. Пользователь сам выбирает, к каким приложениям у Gemini есть доступ, наблюдает за каждым шагом в реальном времени, может поставить выполнение на паузу в любой момент и заранее подтверждает ключевые действия.
В примерах Google: пакетное редактирование фотографий и 3D-сцен, заполнение форм доставки по локальным PDF-файлам и создание презентаций.
Computer Use выходит на английском языке в США в день публикации, приложение Gemini для Mac доступно для скачивания. В конце заметки The Decoder добавляет от себя, что OpenAI тоже недавно сосредоточилась на Computer Use и, по оценке издания, значительно вырвалась вперёд со своей моделью Astra.
Ключевые факты
- Computer Use в приложении Gemini для Mac выполняет многошаговые задачи с локальными файлами, приложениями и сайтами.
- Работа идёт в изолированном фоновом окне с живым предпросмотром в чате, экран и курсор остаются свободными.
- Пользователь выбирает доступные приложения, видит каждый шаг, может поставить паузу и заранее подтверждает ключевые действия.
- Примеры Google: пакетная правка фото и 3D-сцен, заполнение форм доставки по локальным PDF, создание презентаций.
- Запуск, на английском в США; The Decoder отмечает, что OpenAI с моделью Astra в этой области, по его оценке, ушла заметно вперёд.
Почему это важно
Нейросеть получает возможность работать с обычными приложениями на компьютере так, как это делает человек: кликать, печатать, ходить по меню и формам. Ключевая особенность, фоновое изолированное окно: агент не занимает экран и курсор, и человек продолжает свою работу. The Decoder добавляет, что и OpenAI недавно делает ставку на Computer Use и, по оценке издания, значительно вырвалась вперёд со своей моделью Astra, то есть направление становится конкурентным.
Кому это важно
Пользователям Mac, у которых много рутины в локальных файлах, редакторах и формах: примеры Google, пакетная правка фото и 3D-сцен, заполнение форм доставки по PDF, сборка презентаций. Пока функция доступна только на английском в США, так что остальным придётся ждать; о других языках и странах в источнике ничего не сказано.
Как это применить
Скачайте приложение Gemini для Mac, опишите цель обычными словами и выберите приложения, к которым Gemini разрешено обращаться. Ход работы виден в живом предпросмотре в чате, выполнение можно приостановить, а ключевые действия подтверждаются заранее. В источнике не указаны цена, тарифный план и системные требования функции и приложения.
Можно ли доверять
Источник, короткая заметка The Decoder, которая пересказывает анонс Google; часть формулировок прямо атрибутирована Google («по словам Google»). Результаты тестов, показатели успешности и ограничения функции не приведены, независимой проверки в заметке нет. Утверждение о том, что OpenAI с моделью Astra «значительно вырвалась вперёд», собственная оценка издания, без сравнения с Gemini и без критериев. Какая модель лежит в основе Computer Use, в тексте не названо.
Риски и подводные камни
Агент, который кликает и вводит данные в локальных приложениях, получает широкий доступ к файлам и сайтам, поэтому важен контроль. Google описывает три механизма: выбор доступных приложений, наблюдение за каждым шагом с возможностью паузы и предварительное подтверждение ключевых действий. Других мер защиты в источнике нет. Доступность ограничена английским языком и США, сведений о Windows или других платформах в заметке нет.