Виправлення помилок автоматизації циклів (підготовча версія)

[Ця тема є передрелізною документацією та може бути змінена.]

Ця функція використовує Copilot для пошуку та виправлення селекторів потрібних елементів інтерфейсу користувача на екрані. Користувачам просто потрібно переглянути та схвалити пропозиції Copilot. Крім того, користувачі можуть вручну вказувати елементи інтерфейсу користувача на екрані, а Power Automate для робочого столу відповідним чином налаштовує селектори.

вимоги

Доступність по регіонах

Copilot in Power Automate для настільних комп'ютерів пропонує різні можливості, які доступні в середовищах, розташованих у таких країнах/регіонах:

• Сполучені Штати

Доступність за типом рахунку

Наразі Copilot in Power Automate для настільних комп'ютерів доступний лише для користувачів із робочим або навчальним обліковим записом.

Відновлення потоку під час виконання

Як увімкнути цю функцію

• Вам потрібна Power Automate десктопна версія 2.51 (11.2412.xxx.y) або вище. Дізнайтеся, як завантажити останню версію, у розділі Інсталяція Power Automate.

• Для ремонту за допомогою Copilot переконайтеся, що налаштування Copilot у Power Platform Центрі адміністрування ввімкнено.

• Увімкніть використання штучного інтелекту для вирішення проблем із самовідновленням. Параметр Відновлення під час виконання для потрібного режиму виконання (attended і unattended) можна знайти в розділі Відновлення потоку робочого столу під час виконання налаштувань у Power Platform Центрі адміністрування.

  

• Для новостворених потоків увімкніть опцію Виправити помилки потоку.

• Для наявних ланцюжків перейдіть до відповідних властивостей ланцюжка на робочому столі в Power Automate консолі для настільних комп’ютерів. Увімкніть властивість Виправлення помилок потоку в потоці робочого стола.

  • Ремонт за допомогою Copilot: Ця опція дозволяє автоматично вирішувати проблеми за допомогою Copilot.
  • Ремонт: ця опція включає ручне вирішення проблем, вимагаючи вказати елемент інтерфейсу користувача на екрані в момент збою під час виконання.

Відвіданий досвід крок за кроком

Ця функція спрацьовує, коли хмарний потік ініціює потік на робочому столі, який знаходиться на межі збою. Цей потенційний збій виникає через те, що дія автоматизації інтерфейсу користувача або браузера стикається з помилкою, коли елемент інтерфейсу користувача, призначений для взаємодії, не знайдено за допомогою одного або кількох попередньо налаштованих селекторів. Далі на екрані з’являється вікно сповіщень «Ремонт за допомогою Copilot». Потім Copilot намагається знайти необхідний елемент інтерфейсу, аналізуючи елементи інтерфейсу, присутні на відповідному екрані або веб-сторінці. Вибір параметра «Скасувати» зупиняє весь процес, і дія завершується помилкою, що означає, що робочий стіл завершує роботу (або активує механізм обробки помилок невдалої дії). Виберіть «Відновити вручну», і ви вказуєте необхідний елемент інтерфейсу користувача вручну на екрані, зробивши його знімок.

Відновлення за допомогою Copilot

Коли Copilot успішно знаходить елемент інтерфейсу користувача, доступні такі варіанти:

• Застосовувати для кожного запуску: Нещодавно визначений селектор додається до списку селекторів для елемента інтерфейсу користувача, розташовуючись як останній по порядку. Потік робочого столу оновлюється цим новим селектором, гарантуючи, що в майбутніх запусках запропонований селектор буде включений до списку для цього елемента інтерфейсу користувача.
• Застосувати один раз: Запропонований селектор приймається лише для цього запуску. Новий селектор додається до списку селекторів елемента UI та використовується для цього виконання, але не зберігається для майбутніх запусків.
• Ремонт вручну: Ви відхиляєте пропозицію Copilot і повинні вручну визначити та захопити необхідний елемент інтерфейсу користувача на екрані.
• Скасувати або закрити: ви відхиляєте пропозицію, що призводить до збою потоку робочого столу або активує механізм обробки помилок для невдалої дії.

Якщо ви приймете пропозицію, вікно сповіщень закриється, і дія успішно взаємодіє з правильним елементом інтерфейсу користувача.

Перевірте елемент інтерфейсу користувача, запропонований Copilot, вибравши кнопку «Ціль» на екрані.

Якщо служба штучного інтелекту не може успішно визначити місцезнаходження елемента інтерфейсу користувача, вам буде запропоновано знайти елемент інтерфейсу вручну. Ви можете скасувати відновлення, і потік робочого столу вийде з ладу (або активує механізм обробки помилок невдалого дії).

Відновити вручну

Ви також можете вирішити проблему вручну. Подібно до попереднього методу, під час виконання з’являється вікно сповіщень, яке пропонує вам захопити елемент інтерфейсу користувача, використовуючи Power Automate для підсвічування робочого столу. Щоб запустити цей процес, у вікні сповіщень виберіть кнопку «Ремонт », яка включає підсвічування. Далі наведіть курсор на необхідний елемент інтерфейсу користувача на екрані та натисніть «Ctrl» разом із клацанням лівою кнопкою миші, щоб захопити його.

Досвід ручного ремонту також активується, якщо Copilot не може знайти елемент інтерфейсу користувача або якщо ви виберете опцію «Відновити вручну » у випадаючому меню вікна сповіщень.

Робота без нагляду крок за кроком

Якщо ви ввімкнули функцію відновлення під час виконання неконтрольованих прогонів Power Platform у Центрі адміністрування, ви отримуватимете запити на ремонт безпосередньо в розділі «Рекомендації » в межах інтерфейсу Центру автоматизації. Час очікування запиту на ремонт автоматично завершиться через 10 хвилин, якщо не буде вжито жодних дій.

Після того, як ви виберете кнопку «Ремонт за допомогою Copilot », відкриється бічна панель із деталями запиту на ремонт. Ця панель містить список прогонів потоку стільниці, для яких було визначено альтернативні селектори інтерфейсу користувача для відновлення невдалих прогонів без нагляду.

Як тільки ви виберете рядок у поданні списку рекомендацій, ви зможете вибрати одну з наведених нижче дій.

• Ремонт за допомогою Copilot: відкриває панель, що показує проблемний елемент керування разом із оригінальним і новим селектором, визначеним Copilot.
• Ігнорувати та продовжувати: ігнорує запит на ремонт, що, ймовірно, спричинить помилку запуску, оскільки селектор не було змінено.
• Деталі ланцюжка: перехід на сторінку з деталями ланцюжка, на яку було створено запит.
• Деталі запуску: перехід на сторінку відомостей про запуск потоку робочого столу, для якої було створено запит.
• Оновити: оновлює список рекомендацій щодо ремонту.

Ремонт за допомогою дії Copilot

На панелі, яка відкриється, коли ви виберете «Ремонт за допомогою Copilot», ви побачите 2 основні області та список дій унизу. У верхній частині панелі проблемний елемент відображається разом зі сценарієм, локацією та деталями селектора.

У нижній частині панелі ви бачите область «Пропоноване виправлення », яка відображає візуальне представлення елемента, визначеного Copilot, разом із новим селектором. Червона обмежувальна рамка з написом «Copilot знайшов цей елемент» підсвічує точне положення на екрані або елементі керування.

У нижній частині панелі ви бачите меню кнопок із написом «Застосувати один раз », з якого ви можете вибрати:

• Застосувати один раз: тимчасово застосовує вибране виправлення для поточного пробігу.

• Ігнорувати та продовжувати: ігнорує запит на ремонт, що, ймовірно, спричинить помилку запуску, оскільки селектор не було змінено.

  

Якщо ви виберете Застосувати один раз, з’явиться повідомлення з підтвердженням, чи було успішно застосовано селектор. Коли ви повертаєтеся до попереднього екрана, ви помічаєте, що система замінила кнопку «Ремонт на Copilot» на «Переглянути результат перегляду», який показує контрольний журнал виконаних дій.

Відомі обмеження

• Ця функція доступна лише під час виконувань через портал (хмарний потік) та без нагляду.
• Ця функція доступна лише в потоках робочого столу, збережених у Schema v2.
• Ця функція доступна лише в регіоні США.
• Ця функція не обробляє елементи інтерфейсу користувача у віртуальних робочих столах.
• Ця функція не підтримує виконання PictureInPicture.
• Ця функція не підтримує виконання дочірнього потоку.
• Ця функція не підтримує колекції елементів інтерфейсу.
• Ця функція не може застосовуватися до селекторів, які містять одну або кілька змінних.
• Неконтрольована версія цієї функції ще не підтримує збереження нового селектора в сценарії потоку робочого столу під час виконання.
• Дії з перетягуванням не підтримуються на цьому етапі.
• Параметр Застосовувати для кожного запуску використовує ідентифікатор користувача, який увійшов до Power Automate консолі for desktop. Якщо жоден користувач не ввійшов у консоль, опція недоступна.

Допоможіть нам покращити цю функцію

Щоб надіслати відгук, виберіть значок «Великий палець вгору» або «Великий палець вниз» під контентом, створеним штучним інтелектом. З’явиться діалогове вікно зворотного зв’язку, яке дає змогу надіслати відгук до корпорації Майкрософт. Дізнайтеся більше про те, як використовуються ці дані та про свої права, у відгуках корпорації Майкрософт для вашої організації.

Вимкніть функцію зворотного зв’язку з користувачами

Як адміністратор клієнта, ви можете заборонити користувачам надсилати відгуки до корпорації Майкрософт, вимкнувши disableSurveyFeedback налаштування клієнта. Дізнайтеся більше про перегляд і налаштування параметрів клієнта в розділах Get-TenantSettings і Set-TenantSettings.

Запити прав суб’єкта даних на основі відгуків користувачів

Адміністратори клієнтів можуть переглядати, експортувати та видаляти відгуки користувачів, увійшовши в Microsoft 365 Центр адміністрування та вибравши Відгук> про продукт для здоров’я.