tag: Amazon S3

Amazon MSK Express brokers otrzymały nową funkcję automatycznego dostarczania danych Apache Kafka do Amazon S3. Rozwiązanie skaluje się do 10 GB/s, obsługuje retransmisje i backpressure bez konieczności zarządzania flotą konektorów. W porównaniu z samodzielnie zarządzanymi alternatywami można zmniejszyć koszty ingestion i delivery nawet o 60 procent, eliminując operacyjną złożoność.

AWS Glue Data Quality zyskał świeży Distribution Analyzer, który generuje histogramy dla kolumn numerycznych i rozkłady wartości dla danych kategorycznych, dat i booleanów. Dzięki temu możesz łatwo wyłapać skośność, outliers i dziwne wzorce w danych bez pisania custom kodu. Nowa funkcja integruje się bezpośrednio z istniejącymi regułami DQDL i zapisuje statystyki w S3, skąd możesz je queryować przez Athenę czy wizualizować w SageMaker Unified Studio.