Штучний інтелект сам може керувати комп’ютерами

Раніше компанія Anthropic оголосила про розробку ШІ, який зможе виконувати офісні завдання, автоматизуючи значну частину економіки.

А вже сьогодні вони представили оновлену модель Claude 3.5 Sonnet, яка через API може взаємодіяти з будь-яким додатком.

Модель Claude 3.5 Sonnet імітує дії людини: натискання клавіш, клацання мишею та інші жести, пише «Хайтек».

Вона також розпізнає те, що відбувається на екрані, аналізує знімок з екрана та розраховує, як діяти для виконання завдань.

Anthropic називає це «шаром дії-виконання», який дозволяє Claude виконувати команди на рівні робочого столу, використовуючи будь-які програми та сайти.

Для цього користувачі надають доступ, а ШІ використовує його для виконання дій, таких як заповнення форм або взаємодія з програмним забезпеченням.

Такі агенти ШІ, як Claude, обіцяють спростити автоматизацію, але це не нова ідея. Подібні інструменти розробляють Microsoft, OpenAI та інші компанії.

Однак Claude 3.5 відрізняється покращеною продуктивністю: вирішення складних завдань, що вимагають сотень кроків, і коригує свої дії, якщо стикається з проблемами.

Однак, модель постає перед труднощами, такими як прокручування та масштабування екрана, що знижує її ефективність у деяких завданнях.

Питання безпеки також є актуальними. Моделі, що використовують десктопні програми, можуть стати вразливими для атак та витоків даних.

Anthropic визнає ризики, але вважає, що краще контролювати процеси з менш потужними моделями та вивчати потенційні загрози, поступово покращуючи захист.