Toutes les actualités

AWS · 18 novembre 2026 · Data & AI

AWS Glue ETL accueille Apache Spark Optimization Agent

AWS Glue ETL propose Apache Spark Optimization Agent pour analyser les exécutions Spark terminées et recommander des optimisations de coût ou de performance en quelques minutes. Un moteur déterministe examine la configuration, les journaux et la télémétrie pour fournir des changements précis, accompagnés de preuves et d'explications. L'agent est accessible depuis la console AWS Glue ou via Amazon SageMaker Unified Studio MCP Server.

Ce qui est annoncé

AWS enrichit AWS Glue ETL avec Apache Spark Optimization Agent, un agent qui examine les exécutions Spark terminées et fournit, en quelques minutes, des recommandations d’optimisation. L’utilisateur choisit de privilégier le coût ou la performance. L’analyse rapproche ensuite la configuration du traitement, ses journaux et la télémétrie Spark au sein d’un moteur de recommandation déterministe. Chaque proposition précise les changements de configuration suggérés, les éléments observés et le raisonnement associé. L’accès est possible depuis la console AWS Glue ou depuis des outils propres à l’entreprise via Amazon SageMaker Unified Studio MCP Server.

Le moteur recherche notamment les problèmes de parallélisme, les déséquilibres de clés de jointure, la pression mémoire, les exécuteurs inactifs ou les capacités surdimensionnées. Il examine aussi des pistes telles qu’une version plus récente d’AWS Glue ou l’emploi de processeurs AWS Graviton. Les recommandations sont classées selon leur périmètre : infrastructure, configuration Spark, code ou organisation des données. Les accès sont authentifiés par AWS Identity and Access Management (IAM) et consignés dans AWS CloudTrail. L’agent est proposé sans frais supplémentaires pour AWS Glue à partir de la version 4.0, dans les régions où le service est disponible, hors AWS GovCloud (US) et régions chinoises.

Ce que ça change pour les entreprises

Pour les DSI et les équipes IT, ces analyses peuvent faciliter la priorisation des ajustements sur les traitements existants. Les preuves issues de la télémétrie donnent des éléments pour discuter les recommandations plutôt que modifier les paramètres à l’aveugle. Le choix d’un objectif rend également explicite l’arbitrage entre dépenses et durée d’exécution : le moteur vise la métrique retenue tout en maintenant la dégradation éventuelle de l’autre dans des limites définies.

Ces propositions restent à évaluer dans le contexte des traitements concernés. Leur classement par domaine peut aider à identifier les équipes à mobiliser et les changements à tester. L’annonce porte sur des recommandations après exécution, sans établir de gain garanti pour chaque traitement.

Comment UNEETY peut vous accompagner

Une ESN comme UNEETY peut accompagner le cadrage des objectifs, l’intégration aux outils existants et la sécurisation des accès. Elle peut également aider les équipes à organiser la validation des recommandations et leur adoption progressive.

Découvrez notre offre Data & AI ou contactez-nous.

Source : annonce AWS du 18 novembre 2026.

Au-delà de cette annonce, transformer les avancées de la donnée et de l'IA en projets adaptés à l'entreprise suppose de choisir un accompagnement spécialisé. UNEETY est une des meilleurs sociétés spécialisées dans l'IA.