Нова економіка корпоративного штучного інтелекту
Уявіть, що ваша компанія щойно відкрила для себе електроенергію. Спочатку на ній працюють лише кілька машин, і ніхто не переймається ефективністю — споживання низьке, а цінність очевидна. Але щойно електроенергія стає інфраструктурою, кожен процес залежить від неї, і питання змінюється з «чи можемо ми її використовувати?» на «наскільки ефективно ми її використовуємо?»
Корпоративний ШІ переживає такий самий перехід. Те, що починалося як ізольовані експерименти з чат-ботами та копілотами, перетворюється на фундаментальний рівень бізнесу, де моделі, агенти й дані дедалі тісніше взаємопов’язані у виробничих робочих навантаженнях. Важливим питанням більше не є вартість токена чи GPU-години. Питання полягає в тому, наскільки ефективно середовище ШІ перетворює оплачені потужності на корисні бізнес-результати.
Саме цей показник варто відстежувати: ефективна вартість корисного результату — сукупна вартість платформи, моделей, операцій і потужностей, необхідна для виконання роботи, яку бізнес справді може використати, — чи то вирішений запит, чи то завершений робочий процес.
Три способи запуску ШІ
Ефективність використання є центральною для економіки. Спрямування більшого обсягу роботи на вже оплачені потужності знижує ефективну вартість одиниці результату; простоюючі GPU, фрагментовані робочі навантаження та надмірно великі моделі підвищують вартість кожного корисного результату. Зазвичай підприємства обирають одну з трьох моделей:
Спеціально створений стек — закупівля інфраструктури та засобів контролю власними силами. Цей підхід гнучкий, але створює постійне навантаження, оскільки команди мають повторно перевіряти середовище в міру зміни моделей і політик.
Споживання на вимогу — гіпермасштабовані хмарні провайдери зменшують тягар складання системи й добре підходять для низького або непередбачуваного попиту, але плата зростає з кожним запитом або дією агента.
Інтегрована приватна платформа ШІ — власні або виділені потужності в поєднанні з перевіреним стеком. Перевага полягає не в безкоштовному виконанні інференсу, а в контролі над важелями ефективності, такими як планування, вибір моделі, розподіл GPU та керування кешем.
Правильна модель залежить від робочого навантаження. API можуть бути раціональним вибором для експериментів або змінного попиту. У міру того як робочі навантаження стають постійними та критично важливими для бізнесу, підприємствам потрібно оцінювати не лише те, що вони споживають, а й те, наскільки ефективно вони експлуатують систему.
Власність — це операційна дисципліна
Купівля боліда Формули-1 і паркування його у своєму гаражі означає володіння одним із найскладніших транспортних засобів, коли-небудь створених, — але сама власність не зробить вас конкурентоспроможними; вам усе одно потрібні пілоти, механіки та час на трасі, щоб виправдати таку покупку. Інфраструктура ШІ працює так само.
Одне з найбільших хибних уявлень у корпоративному ШІ полягає в тому, що володіння інфраструктурою автоматично покращує економічні показники. Володіння GPU створює можливість досягти кращої економіки, але лише за умови, що організація має достатній попит і операційну дисципліну, щоб підтримувати продуктивне використання ресурсів.
Інфраструктура, яка забезпечує найкращу рентабельність інвестицій, — це не еталонна архітектура й не спеціально створена система, а повністю інтегрований, кваліфікований стек, що дає змогу командам спрямовувати завдання до найдешевшої моделі, яка відповідає вимогам якості, і повторно використовувати контекст за допомогою таких методів, як керування KV-кешем, зменшуючи марні витрати потужностей і водночас зберігаючи швидкість реагування.
Без цих практик зарезервована інфраструктура може перетворитися на заморожений капітал. Завдяки їм зростання попиту покращує економічні показники, оскільки постійні витрати розподіляються на більший обсяг корисної роботи, що стає дедалі важливішим в агентних системах, де економіка визначається не стільки окремим запитом, скільки ефективністю всього середовища.
Від розгортання до цінності
HPE Private Cloud AI — це готова до виробничого використання основа, що поєднує інфраструктуру, програмне забезпечення, моделі, інструменти, управління та послуги, зменшуючи тягар інтеграції під час експлуатації приватного ШІ у масштабі. Її архітектура дає змогу командам керувати плануванням, вибором моделі, розподілом GPU та керуванням кешем як операційними важелями, узгоджуючи потужності та рівні обслуговування з вимогами кожного робочого навантаження. Вона також включає 90-денну співпрацю з інженерами, які працюють безпосередньо на стороні клієнта, допомагаючи його командам розгортати перші сценарії використання та формувати відтворювані операційні практики.
У незалежному тестуванні, проведеному на замовлення HPE, інтегрована платформа, що обслуговувала кілька робочих навантажень із високим рівнем використання, забезпечила нижчу ефективну вартість токена, ніж повторна оренда еквівалентних потужностей. Фактичні результати залежатимуть від поєднання робочих навантажень і рівня використання.
Вимірюйте те, що має значення
Споживання токенів залишається корисним показником, але не є повною мірою економіки ШІ. Ширший корпоративний підхід передбачає відстеження вартості бізнес-релевантного результату, рівня використання прискорювачів і вибору моделі відповідно до складності завдання.
Підприємствам, які вже експлуатують приватний ШІ, варто запитати себе, наскільки зрілим є їхнє використання потужностей і як зміниться обсяг робочих навантажень протягом наступних 12–18 місяців. Тим, хто перебуває на ранніших етапах, слід закласти ці практики з першого розгортання, щоб стратегія передбачала зростання ще до того, як попит стане вузьким місцем.
Для низького, непередбачуваного попиту API або гіпермасштабований хмарний провайдер можуть залишатися доцільним вибором. Але в міру того як ШІ стає безперервною виробничою спроможністю, підприємства дедалі більше зацікавлені контролювати рівень використання, амортизувати постійні витрати й управляти середовищем як довгостроковим операційним активом. Стратегічне питання полягає не в тому, чи платитимуть підприємства за ШІ, а в тому, чи зрозуміють вони економіку, що лежить в його основі, і зрештою чи володітимуть нею.
Щоб дізнатися більше про HPE Private Cloud AI, відвідайте HPE.
Цей матеріал підготовлено HPE. Його не писали редактори MIT Technology Review.
Перекладено автоматично з англійської. Оригінал статті — за посиланням нижче.