Meta внедрила прокси ZGateway для трафика ZippyDB
Инженерная команда Meta представила ZGateway — прокси-уровень без состояния между клиентскими приложениями и ZippyDB, широко используемым хранилищем типа «ключ—значение». По данным Meta, система обрабатывает более 1 миллиарда операций в секунду и обслуживает около 40% трафика ZippyDB; компания ожидает, что этот показатель превысит 60%. Средние вычислительные затраты составляют примерно 6%.
ZGateway создавался для решения проблемы роста числа соединений между более чем миллионом клиентских хостов и базой данных. При прямом доступе один клиент мог обращаться к десяткам тысяч шардов на большом числе хостов, что увеличивало расход памяти, процессорного времени и файловых дескрипторов и повышало риск сбоев при массовых переподключениях. Прокси объединяет соединения в региональных уровнях, обнаруживаемых через ServiceRouter.
Сервис завершает TLS, проверяет права доступа, применяет ограничения для отдельных арендаторов, определяет нужный шард, объединяет запросы и направляет их соответствующим репликам. Некоторые уровни также кэшируют чтения, поддерживая ограниченную допустимую устарелость с помощью событий захвата изменений. Meta сообщает, что во время контролируемого теста перегрузки нагрузка была снята с шести шумных арендаторов из примерно 1 350 корзин, тогда как остальные выполнили 99,9% запросов без отказов. ZGateway также поддерживает поэтапную миграцию, межрегиональное переключение, адаптивную балансировку и обработку транзакций. Система предназначена для внутреннего использования Meta.
Текст подготовлен ИИ Sakhanda Wire по материалу MarkTechPost. Факты, цитаты и полный контекст — в оригинальной статье ниже.