Агент Astra впорався з керуванням повноцінним інтерфейсом Blender через технологію computer use — без API, плагінів чи текстових команд, лише рухами курсора та кліками, як це робить людина за монітором. Саме цей демонстраційний ролик і привернув увагу оглядачів: складний професійний 3D-редактор з десятками панелей, гарячих клавіш і вкладених меню піддався агенту, який просто «дивиться» на екран і клацає мишею.

За даними Techmeme, робота Astra з Blender виглядає настільки переконливо, що видання пов'язує це з можливою четвертою хвилею попиту на AI — після хвиль чат-ботів, reasoning-моделей та agentic coding. Логіка проста: перші три хвилі стосувалися тексту й коду, а computer use відкриває шлях до будь-якого софта з графічним інтерфейсом, включно з тим, що ніколи не матиме API.

Для AI-білдерів це не просто цікавий ролик з таймлапсом рендеру. Це сигнал, куди рухається інвестиційний і продуктовий фокус великих лабораторій — від текстових асистентів до агентів, які буквально сидять за клавіатурою й мишею замість людини. Ба більше, попередні хвилі — reasoning та agentic coding — вже змінили те, як команди наймають розробників і будують продукти; computer use може повторити цей ефект для індустрій, далеких від коду.

Що саме продемонстрував Astra в Blender?

Агент керував Blender через звичайний графічний інтерфейс — той самий, яким користується будь-який 3D-художник: панелі інструментів, viewport, меню модифікаторів. Ключова відмінність від попередніх демо агентів полягає в тому, що Blender — не веброзетка з простою DOM-структурою, а важкий десктопний застосунок з нестандартним рендерингом UI, де немає зручної розмітки для парсингу елементів. Computer use в такому середовищі означає, що модель фактично розпізнає скриншот, вирішує, куди клікнути, і виконує дію — цикл «побачив → подумав → натиснув», повторений десятки разів для однієї задачі.

Чому Techmeme називає це четвертою хвилею AI?

За словами видання, попередні три хвилі попиту на AI виглядали так:

Computer use, на думку Techmeme, логічно продовжує цей ряд: якщо agentic coding автоматизує роботу з текстом і кодом, то computer use-агенти на кшталт Astra зазіхають на все, що досі вимагало людини за екраном, — незалежно від того, чи є у застосунку API.

Що це означає для автоматизації десктопного софта?

Якщо технологія computer use дозріє до продакшн-рівня, вона теоретично здатна автоматизувати будь-який десктопний застосунок — від бухгалтерських програм і CAD-систем до застарілого корпоративного софта, який ніхто вже не підтримує API-інтеграціями. Це особливо цінно для індустрій, де софт історично закритий: дизайн, інженерія, медичне ПЗ, старі ERP-системи. Ймовірно, саме тому великі лабораторії вкладаються в computer use паралельно з agentic coding — ринок «софта без API» набагато більший за ринок кодових репозиторіїв. Серед перших кандидатів на автоматизацію:

Висновок AiiN

Наша теза: computer use — це не заміна agentic coding, а окремий клас агентів для середовищ, де код і API просто недоступні. Успішне демо з Blender важливе не тим, що агент «намалював кубик», а тим, що воно доводить: сучасні мультимодальні моделі вже здатні орієнтуватися в складному, непередбачуваному графічному інтерфейсі без спеціальної підготовки під конкретний застосунок. Для AI-білдерів це привід переглянути продукти, які досі автоматизувалися через RPA-скрипти з крихкими селекторами координат, — computer use-агенти обіцяють стійкіші рішення, що адаптуються до змін інтерфейсу так само, як людина.

Чим computer use відрізняється від звичайних AI-агентів?

Звичайні AI-агенти найчастіше працюють через API або текстові команди в терміналі. Computer use-агенти натомість керують курсором і клавіатурою так само, як людина, орієнтуючись по скриншотах екрана — це дозволяє їм працювати з будь-яким графічним застосунком, навіть без офіційного API.

Чи замінить це RPA-інструменти?

Ймовірно, з часом так, хоча наразі це припущення: класичні RPA-скрипти прив'язані до фіксованих координат і ламаються при зміні інтерфейсу, тоді як computer use-агенти теоретично адаптуються до змін, бо «бачать» екран, а не заздалегідь запрограмовані кроки.