Apache Spark optimization agent dla EMR Serverless i AWS Glue – już dostępny
AWS udostępnił agenta optymalizacyjnego dla Apache Spark, który automatycznie analizuje zakończone joby i proponuje rekomendacje do poprawy kosztów lub wydajności w kilka minut. Narzędzie bazuje na telemetrii samego Sparka, więc każdy inżynier może tunować zadania bez głębokich umiejętności w tej technologii.
źródło: [aws/big-data-blog]