AutoSynthData створює дані для навчання корпоративних агентів
ServiceNow CoreAI представила AutoSynthData — систему для створення навчальних даних для агентів, що працюють у корпоративних середовищах. Вона зосереджується на слабких місцях, пов’язаних із конкретними інструментами, робочими процесами, правилами та станом даних, які можуть залишатися навіть у моделей із широкими загальними можливостями.
AutoSynthData оцінює цільову модель на діагностичних завданнях і порівнює її результати з роботою сильнішої моделі-вчителя. Виявлені прогалини описуються у специфікаційних картках, на основі яких система створює нові завдання з різними запитами, об’єктами, початковими станами, поєднаннями інструментів і шляхами розв’язання. Кожне завдання містить системну специфікацію, запит користувача та верифікатор.
Перед прийняттям кандидати перевіряються на виконуваність, реалістичність і належну складність. Система запускає еталонні траєкторії, перевіряє відхилення неправильних результатів і передає невдалі зразки на аналіз та обмежене виправлення. Схвалені приклади можна використовувати для supervised fine-tuning, а окрема фаза створює додаткові варіанти. Перевірка пакетів відстежує охоплення, різноманітність і повторюваність, спрямовуючи подальшу генерацію до навичок, із якими модель досі має труднощі. Процес проілюстровано набором EnterpriseOps Gym.
Текст підготовлено ШІ Sakhanda Wire за матеріалом Hugging Face. Факти, цитати та повний контекст — в оригінальній статті нижче.