Solaris на Runway е AI система, която генерира софтуерни интерфейси в реално време
Основни моменти
- Runway представи Solaris — „световен модел на интерфейси“, който не стартира потребителските интерфейси като код, а ги визуализира в реално време и реагира директно на кликвания или глас.
- Системата има за цел да замени фиксираните приложения с динамични среди, които се адаптират към потребителя, и може да се окаже полезна за интерактивно пазаруване или визуални уроци.
- Тъй като визуализирането на текст все още е податливо на грешки и няма поддръжка за екранни четци, системата, която е изградена върху видеомодела Gen-4.5, засега остава изследователски проект.
AI компанията Runway представи Solaris — първия модел в нова категория, която нарича „световни модели на интерфейси“. Вместо да изпълнява код, системата генерира потребителския интерфейс кадър по кадър, докато взаимодействате с него.
Вместо първо да превежда дизайна в код, моделът визуализира самия интерфейс в 720p и реагира на кликвания, плъзгане или гласови команди. Това представлява рязък разрив с начина, по който обикновено работи софтуерът, при който операционната система определя какво се случва на екрана, а приложението остава същото, докато някой не пусне актуализация.
Runway посочва няколко възможни приложения: При онлайн пазаруване самият магазин би се превърнал в интерфейс, като потребителите биха могли да плъзнат риза върху своя снимка, за да я изпробват виртуално. Магазинът вече няма да представлява фиксирана подредба, а ще се адаптира към всеки потребител.
При визуализация на продукти можете да кажете „премести масата“ или „смени цвета на дивана“ и сцената реагира незабавно — нещо, което Runway вижда като подходящо за обзавеждане и интериорно планиране.
Компанията вижда приложение и в уроците и обучението. Вместо текстов отговор като този, който би дал чатбот, Solaris показва визуално следващата стъпка в собствения ѝ контекст — например като демонстрация на горене с различни материали.
Runway иска „приложението“ като фиксирана единица да изчезне
Solaris е изграден върху видеомодела на Runway Gen-4.5 и следва посоката, която компанията започна с GWM-1. Езиков модел определя как се променя интерфейсът, докато световният модел визуализира всеки кадър. Runway вижда системата и като тренировъчна среда за AI агенти, които все още се провалят при задачи като резервиране на хотел, тъй като са обучени върху фиксирани подредби и не могат да се справят с уебсайтове, които се отклоняват от тях.
По-голямото твърдение на Runway е, че „приложението“ като фиксирана единица ще изчезне. Днес, за да свършим нещо, трябва да отворим правилното предварително създадено приложение — едно за пазаруване, едно за съобщения, едно за резервации. Ако операционната система може сама да генерира подходящите интерфейси, има по-малко основания софтуерът да бъде подреждан във фиксиран каталог от приложения.
Тогава онлайн магазинът вече няма да представлява фиксирана подредба, която всички виждат по един и същи начин, а генерирана среда, която се адаптира към всеки потребител. Дали хората действително искат интерфейси, които постоянно се променят, е въпрос, на който Runway не дава отговор.
Засега това все още е далечна перспектива, тъй като Runway посочва, че стабилният и четим текст остава труден за решаване проблем, въпреки че интерфейсите разчитат до голяма степен на него. Продължителните сесии и надеждността също остават нерешени въпроси, а грешен, но убедително изглеждащ резултат може да се окаже по-лош от липсата на резултат. Генерираният интерфейс трябва да работи и с помощни технологии като екранни четци.
Това означава, че засега Solaris е изследователски проект. Runway търси партньори за стартирането му и предлага ранен достъп чрез формуляр.
AI новини без сензации – подбрани от хора
Абонирайте се за THE DECODER и получете четене без реклами, седмичен AI бюлетин, нашия ексклузивен доклад за водещите разработки „AI Radar“ шест пъти годишно, пълен достъп до архива и достъп до секцията за коментари.
Преведено автоматично от английски. Оригиналната статия е на връзката по-долу.