AWS Glue 6.0 が一般提供開始、価格 30% 削減と Iceberg v3 対応

AWS Glue 6.0 が一般提供開始された。このバージョンでは価格が 30% 削減され、Apache Iceberg v3、Apache Hudi の新しいバージョン、Delta Lake がサポートされる。Apache Spark 4.1、Python 3.13、Scala 2.13 へのランタイムアップグレードも行われた。Iceberg v3 では VARIANT データタイプ、削除ベクター、幾何学データタイプや地理データタイプ、柔軟なスキーマ進化が追加された。開発者生産性を高める機能として、Spark デクラレーティブパイプライン、リアルタイムモードストリーミング、Arrow ネイティブな Python UDF が導入された。これらの機能により、大規模な ETL、定期的なバッチ処理、ストリーミング分析、AI アプリケーション開発がサポートされる。AWS Glue 6.0 はすべての AWS コマース、リージョン、AWS GovCloud (US)、AWS 中国リージョンで利用可能。バージョン切り替えは AWS Glue コンソールまたは SageMaker Unified Studio から、または Generative AI Upgrade Agent を使用して既存のジョブを移行できる。

この更新の位置づけ

この更新はデータエンジニアや分析開発者にとって重要で、特に大規模データ処理やデータ湖の管理に AWS Glue を使用しているユーザーに影響を与える