Keenable при поддержке Accel индексирует веб для ИИ-агентов

Поисковые системы создавались и оптимизировались для людей, у которых нет времени или внимания, необходимых для просмотра веб-страниц целиком. Но поскольку люди всё чаще используют ИИ-чат-ботов для поиска в интернете и выполнения задач, появляется мнение, что текущую инфраструктуру интернета необходимо обновить, адаптировав её прежде всего для ИИ: такие боты могут читать и обрабатывать гораздо большие объёмы информации.

Андрей Стыскин, ранее возглавлявший подразделение поиска, ИИ и облачных технологий российского поискового гиганта «Яндекс», и немецкий специалист по ИИ Матиас Петри пытаются решить эту проблему в рамках своего нового стартапа Keenable. Недавно компания вышла из режима скрытой разработки, объявив о привлечении 26 миллионов долларов посевного финансирования. Раунд возглавил Accel; в нём также приняли участие Conviction Partners и несколько бизнес-ангелов.

По словам Стыскина, ИИ-чат-боты, как правило, работают значительно лучше, если могут обосновывать свои ответы исходными документами. «Это фактически создаёт новый маховик, отличный от того, чему Google научился на основе поведения людей», — сказал он TechCrunch.

В Keenable утверждают, что создают поисковый индекс интернета, содержащий более 100 миллиардов документов, а их API уже используется в производственной среде несколькими лабораториями ИИ и поставщиками вычислений для инференса — как во время обучения, так и во время работы моделей. Стартап не раскрывает имена своих клиентов, однако недавно заключил партнёрство с компанией Gradium, занимающейся голосовым ИИ, для поддержки поиска информации в реальном времени.

Опираясь на 20-летний опыт создания поисковых систем в «Яндексе» и Amazon, Стыскин объяснил, чем продукт Keenable отличается от корпоративных поисковых решений, которые могут выйти из строя и оказаться чрезвычайно дорогими при работе в масштабах интернета. «Если не адаптировать структуры индекса под конкретную задачу, стоимость обслуживания и сканирования всего интернета будет огромной из-за его объёма. Поэтому необходимо находить новые способы очень быстро сужать область поиска на основе запроса. Именно это мы и предлагаем», — сказал он.

По словам партнёра Accel Жени Логинова, руководившего инвестированием, у игроков в сфере ИИ очень мало вариантов инфраструктуры веб-поиска, работающей в масштабах интернета, особенно с учётом того, что Google и Microsoft предпринимают шаги, чтобы закрыть свои существующие поисковые API, дабы избежать каннибализации собственных продуктов. Вместо этого технологические гиганты выбирают более комплексный подход и избирательно подходят к выбору партнёров.

Для Стыскина эти решения подтвердили возможность, которую он заметил во время работы в Amazon, где вместе с Петри занимался инфраструктурой веб-поиска для ИИ-приложений, таких как Alexa. Он видел данные Cloudflare, показывавшие, что на ИИ-краулеры приходится всё большая доля поискового трафика, и начал осознавать, что существует возможность создать инфраструктуру веб-поиска, изначально разработанную с учётом потребностей ИИ.

Имея такой опыт, Стыскин задействовал свою сеть контактов, чтобы нанять в новый стартап нескольких бывших коллег. Компания также разрабатывает собственные технологии поиска и извлечения информации. Среди них — готовящийся продукт WebQueryLanguage, который поможет ИИ-системам отвечать на вопросы, объединяя информацию из различных веб-источников, даже если ни один из них не содержит полного ответа.

Стоимость будет играть важную роль. Стыскин говорит, что убедить людей отказаться от Google в пользу другого поисковика «чрезвычайно сложно», однако дилемма инноватора означает, что американского гиганта потенциально можно «победить» в сфере агентных запросов, а небольшая компания вроде Keenable способна внедрять инновации и предлагать компаниям, разрабатывающим ИИ, более экономичное решение.

Тем не менее затраты на создание гигантского поискового индекса вполне реальны. «Не спрашивайте — это мучительно дорого», — сказал он. При этом, по его словам, стартап делает всё возможное, чтобы контролировать расходы и развиваться постепенно. В компании работают 15 инженеров в США и Европе, и она планирует использовать привлечённые средства, чтобы к концу года удвоить штат и выстроить стратегию выхода на рынок.

Прежде чем стартап сможет осуществить свою мечту и стать «следующим Google для ИИ-агентов», предстоит сделать ещё множество шагов. На этом рынке уже появились другие игроки, такие как Brave и Exa; сама Google также перестраивает свой поисковый опыт для эпохи ИИ. Однако это более широкое движение показывает, что убеждённость Keenable разделяют и в Googleplex: будь то люди или агенты, эра «десяти синих ссылок» может подходить к концу.