Управляет Mac по текстовой цели: дешёвый классификатор выбирает следующий клик, а дорогая нейросеть нужна редко.
Автоматизация для macOS: система читает экран без скриншотов, лёгкий классификатор TypeSafe выбирает одно из возможных действий с оценкой уверенности, а мощная модель для генерации текста подключается только когда нужно вписать что-то в поле. По данным авторов, один шаг обходится примерно в 155 раз дешевле и выполняется в разы быстрее, чем аналогичное решение на модели вроде Claude Opus.
Описание автора:Computer use for about $0.0002 a step: OCR the screen, classify the next action with TypeSafe, click. macOS.
