AWS Step Functions が Distributed Map のデータソースと出力オプションを拡張
ID 960
GUID a63466a33cba5606f378c83ac9d072b5e368eb8a
発表日(JST)
要約生成日時(JST)
タイトル AWS Step Functions が Distributed Map のデータソースと出力オプションを拡張
詳細リンク https://aws.amazon.com/about-aws/whats-new/2025/02/aws-step-functions-data-source-output-option-distributed-map
カテゴリ
  • application-services
  • aws-govcloud-us
  • aws-step-functions
要点
  • AWS Step Functions の Distributed Map が JSONL や新しい区切り文字ファイル形式をサポート
  • 新しい出力変換機能により、結果のフォーマットをより細かく制御可能
  • カスタム前処理なしで多様なデータ形式を処理可能
  • 結果の集計や下流システムとの統合が簡素化
アップデート内容要約

AWS Step Functions が Distributed Map の機能を拡張し、より多様なデータ形式の処理と柔軟な出力オプションを提供するようになりました。これにより、大規模な並列処理ワークフローがより柔軟に実行できるようになります。

アップデート内容全文

AWS Step Functions が Distributed Map のデータソースと出力オプションを拡張し、より柔軟な大規模並列処理ワークフローを実現しました。
Distributed Map は now JSON Lines (JSONL) や、Amazon S3 に保存されたより広範囲の区切り文字ファイル形式からデータを処理できるようになりました。
さらに、Distributed Map は結果のフォーマットをより細かく制御するための新しい出力変換機能を提供します。
AWS Step Functions は、220以上のAWSサービスから14,000以上のAPIアクションを調整できる視覚的なワークフローサービスで、分散アプリケーションやデータ処理ワークロードの構築に使用されます。
この更新により、Step Functions の Distributed Map を使用して、より多様なデータセットを簡単に反復処理できるようになりました。
既存のJSONやカンマ区切り値(CSV)ファイルのサポートに加えて、Distributed Map は now JSONL や、セミコロン区切りファイル、タブ区切りファイルなどの新しい区切り文字ファイル形式をサポートします。
これにより、カスタムの前処理なしでより広範囲のデータ形式を処理できるようになります。
新しい柔軟な出力変換機能により、結果のフォーマット方法をより細かく制御できるようになり、結果の集計が容易になり、下流のシステムとの統合が簡素化されます。
使い始めるには、AWS Step Functions コンソールで Distributed Map モードを今すぐ使用するか、このブログ記事をお読みください。
詳細については、Step Functions 開発者ガイドをご覧ください。

関連サービス
  • AWS Step Functions
  • Amazon S3
関連サービスの説明
  • AWS Step Functions は、ビジュアルワークフローを使用してアプリケーションを構築するためのサービスです。複数のAWSサービスを組み合わせて、複雑な処理を簡単に自動化できます。例えば、データ処理、APIの呼び出し、エラー処理などを視覚的に設計し、実行することができます。
  • Amazon S3 (Simple Storage Service) は、スケーラブルなクラウドストレージサービスです。大容量のデータを安全に保存し、必要に応じて簡単にアクセスできます。ウェブサイトのホスティングからビッグデータ分析まで、様々な用途に使用されます。
関連URL