09.06.2025  Экспертиза

Оптимизация объектного хранилища для обеспечения экономически эффективного выполнения запросов с низкой задержкой позволяет компаниям сохранять долгосрочные данные в горячем состоянии, пишет на портале The New Stack Франц Кнупфер, директор по контенту и исследованиям компании Hydrolix. Замороженное (frozen, холодное) хранилище или различные методы отбрасывания данных (например, снижение частоты выборки) часто кажутся единственными решениями в условиях, когда объем журналов событий продолжает расти, а затраты стремительно увеличиваются. В последние годы появился новый подход, позволяющий максимально использовать производительность объектного хранилища, который представляет собой гораздо лучшую альтернативу. Теперь предприятия могут использовать решения, построенные на базе объектных хранилищ, чтобы сохранять все данные для анализа в режиме реального времени, оставаясь при этом экономически эффективными. Одной из последних новостей в этой области является анонс AWS S3 Tables, использующей Apache Iceberg для сегментирования и оптимизации объектного хранилища. Такие инструменты, как Iceberg, представляют собой обертку для объектного хранилища, что значительно повышает производительность озер данных. В то же время существуют решения, которые обеспечивают как анализ журналов событий в реальном времени, так и долгосрочный исторический анализ, максимально используя производительность объектного хранилища — и все это без необходимости создавать решение с нуля с помощью таких ... читать далее.