Команда MacPaw представила інноваційну платформу GUIrilla, яка дозволяє моделям штучного інтелекту (ШІ) автономно взаємодіяти з інтерфейсом операційної системи macOS. Розробку було офіційно анонсовано в межах конференції ICLR 2026 – розповідає dev.ua.
До недавнього часу операційна система macOS залишалася найменш доступною платформою для навчання мультимодальних моделей ШІ. Згідно з даними дослідників, у найбільшому відкритому наборі даних для десктопних агентів (OS-ATLAS) частка macOS становила лише 0,06%. Компанія MacPaw ініціювала розробку GUIrilla, щоб усунути цей дефіцит даних та створити фундамент для розробки повноцінних ШІ-агентів.
Ключові складові платформи:
- Датасет GUIrilla-Task: Масштабний набір даних, що включає понад 27 000 сценаріїв взаємодії користувача з інтерфейсом. Дослідження охопило понад 1 100 сторонніх застосунків для Mac.
- Бібліотека macapptree: Інструмент із відкритим кодом, який дозволяє розробникам отримувати структурований опис елементів інтерфейсу (Accessibility Tree) будь-якого застосунку macOS за допомогою мінімальної кількості коду.
- Автоматизація збору даних: Система самостійно встановлює програмне забезпечення, виконує дії в інтерфейсі та синхронізує візуальну інформацію (скриншоти) з технічними метаданими.
Стратегічне значення для галузі
Впровадження GUIrilla вирішує проблему «інформаційного вакууму» в академічному середовищі. Раніше доступ до якісних даних для навчання desktop-агентів на macOS мали лише великі корпорації з закритими внутрішніми ресурсами. Відкриття бібліотеки macapptree та оприлюднення результатів дослідження на конференції ICLR 2026 робить ці інструменти доступними для незалежних розробників у всьому світі.
За словами представників MacPaw, створення складного технологічного IP у сфері ШІ є частиною довгострокової стратегії компанії, спрямованої на посилення конкурентоспроможності українських розробників на глобальному ринку.
«GUIrilla фактично навчає моделі „бачити“ та „розуміти“ інтерфейс так, як це робить людина, перетворюючи статичні зображення екрана на зрозумілу для алгоритмів структуру дій», — зазначають у MacPaw Research.
Видання GALERANEWS зазначає, що ця розробка відкриває шлях до створення нового покоління програмного забезпечення, де ШІ зможе виконувати комплексні завдання користувача — від заповнення форм до складного редагування даних — безпосередньо в середовищі macOS.
