Google добавила в Gemini для Mac режим Computer Use: задачи в фоне

Google добавила в Gemini для Mac режим Computer Use: задачи в фоне

Google добавила в приложение Gemini для Mac функцию Computer Use. По описанию The Decoder, она выполняет многошаговые задачи с локальными файлами, настольными приложениями и сайтами. По словам Google, пользователю достаточно описать цель, а Gemini сам кликает, вводит текст и перемещается по меню и формам.

Всё происходит в изолированном фоновом окне с живым предпросмотром в чате, поэтому экран и курсор остаются свободными и работу на компьютере не нужно прерывать. Пользователь сам выбирает, к каким приложениям у Gemini есть доступ, наблюдает за каждым шагом в реальном времени, может поставить выполнение на паузу в любой момент и заранее подтверждает ключевые действия.

В примерах Google: пакетное редактирование фотографий и 3D-сцен, заполнение форм доставки по локальным PDF-файлам и создание презентаций.

Computer Use выходит на английском языке в США в день публикации, приложение Gemini для Mac доступно для скачивания. В конце заметки The Decoder добавляет от себя, что OpenAI тоже недавно сосредоточилась на Computer Use и, по оценке издания, значительно вырвалась вперёд со своей моделью Astra.

Ключевые факты

  • Computer Use в приложении Gemini для Mac выполняет многошаговые задачи с локальными файлами, приложениями и сайтами.
  • Работа идёт в изолированном фоновом окне с живым предпросмотром в чате, экран и курсор остаются свободными.
  • Пользователь выбирает доступные приложения, видит каждый шаг, может поставить паузу и заранее подтверждает ключевые действия.
  • Примеры Google: пакетная правка фото и 3D-сцен, заполнение форм доставки по локальным PDF, создание презентаций.
  • Запуск, на английском в США; The Decoder отмечает, что OpenAI с моделью Astra в этой области, по его оценке, ушла заметно вперёд.

Почему это важно

Нейросеть получает возможность работать с обычными приложениями на компьютере так, как это делает человек: кликать, печатать, ходить по меню и формам. Ключевая особенность, фоновое изолированное окно: агент не занимает экран и курсор, и человек продолжает свою работу. The Decoder добавляет, что и OpenAI недавно делает ставку на Computer Use и, по оценке издания, значительно вырвалась вперёд со своей моделью Astra, то есть направление становится конкурентным.

Кому это важно

Пользователям Mac, у которых много рутины в локальных файлах, редакторах и формах: примеры Google, пакетная правка фото и 3D-сцен, заполнение форм доставки по PDF, сборка презентаций. Пока функция доступна только на английском в США, так что остальным придётся ждать; о других языках и странах в источнике ничего не сказано.

Как это применить

Скачайте приложение Gemini для Mac, опишите цель обычными словами и выберите приложения, к которым Gemini разрешено обращаться. Ход работы виден в живом предпросмотре в чате, выполнение можно приостановить, а ключевые действия подтверждаются заранее. В источнике не указаны цена, тарифный план и системные требования функции и приложения.

Можно ли доверять

Источник, короткая заметка The Decoder, которая пересказывает анонс Google; часть формулировок прямо атрибутирована Google («по словам Google»). Результаты тестов, показатели успешности и ограничения функции не приведены, независимой проверки в заметке нет. Утверждение о том, что OpenAI с моделью Astra «значительно вырвалась вперёд», собственная оценка издания, без сравнения с Gemini и без критериев. Какая модель лежит в основе Computer Use, в тексте не названо.

Риски и подводные камни

Агент, который кликает и вводит данные в локальных приложениях, получает широкий доступ к файлам и сайтам, поэтому важен контроль. Google описывает три механизма: выбор доступных приложений, наблюдение за каждым шагом с возможностью паузы и предварительное подтверждение ключевых действий. Других мер защиты в источнике нет. Доступность ограничена английским языком и США, сведений о Windows или других платформах в заметке нет.