• developer-tools

• AWS AppConfigに実験ツール（A/Bテスト・多変量実験）が一般提供開始
• Amazonの25年以上の実験ベストプラクティスに基づいて構築
• AI駆動のガイダンスにより、統計的検出力を持つ堅牢な実験設計を支援
• UIの変更、レコメンデーションアルゴリズム、AIモデル選択、プロンプト実験など幅広い実験が可能
• AWS Management Console、CLI、API、AWS CDKを通じて設定可能
• Amazon CloudWatchまたは既存の分析ツールで結果を分析
• 実験終了後、AWS AppConfigの安全なロールアウトで勝利トリートメントを本番にプロモート
• Amazon EC2、AWS Lambda、Amazon ECS、Amazon EKS、オンプレミスサーバーで動作

AWSは、AWS AppConfigにおける実験ツールの一般提供を発表しました。この新機能により、別途実験インフラを構築・管理することなく、A/Bテストや機能実験を実行できます。Amazonの25年以上の実験ベストプラクティスに基づいて構築されており、AI駆動のガイダンスにより堅牢な実験を設計し、データに基づいた意思決定を行うことができます。

本日、AWSはAWS AppConfigにおける実験ツールの一般提供を発表しました。
これは、別途実験インフラを構築・管理することなく、A/Bテストや機能実験を実行できる新しい機能です。
Amazonの25年以上の実験ベストプラクティスに基づいて構築されたAWS AppConfig実験ツールは、AI駆動のガイダンスを使用して堅牢な実験の構築を支援し、エクスポージャー制御とロックされたトリートメント割り当てを提供することで、顧客に何をリリースするかについて自信を持ったデータ駆動の意思決定を可能にします。

AWS AppConfig実験ツールを使用すると、UIの変更やレコメンデーションアルゴリズムからAIモデルの選択やプロンプト実験まで、アプリケーションスタック全体でA/Bテストや多変量実験を実行できます。
機能バリエーションを定義し、ルールビルダーを使用して詳細なオーディエンスをターゲットにし、AWS Management Console、CLI、API、またはAWS CDKを通じてトラフィック割り当てパーセンテージを設定できます。
AI支援の実験設計は、Amazonのベストプラクティスに対してセットアップを検証し、十分な統計的検出力を持つ実験の構築を支援します。

お客様はAWS AppConfigで実験をセットアップして実行し、Amazon CloudWatchまたは既存の分析ツールを使用して結果を分析します。
実験の終了時に、標準的なAWS AppConfigの安全なロールアウトを通じて、勝利したトリートメントを本番環境にプロモートします。
実験は、AWS AppConfig Agentを通じて、Amazon EC2、AWS Lambda、Amazon ECS、Amazon EKS、およびオンプレミスサーバー上のワークロード全体で動作します。

• AWS AppConfig
• AWS Lambda
• Amazon CloudWatch

• AWS AppConfigは、AWS Systems Managerの一機能で、アプリケーションの設定データを安全にデプロイ・管理するためのサービスです。フィーチャーフラグや設定変更を段階的にロールアウトし、問題が発生した場合には自動的にロールバックする機能を提供します。今回の発表により、A/Bテストや機能実験を実行するためのマネージド実験ツールも利用可能になりました。
• AWS Lambdaは、サーバーを管理することなくコードを実行できるサーバーレスコンピューティングサービスです。コードをアップロードするだけで、Lambdaがコードの実行に必要なすべてのインフラを管理します。イベントドリブンで動作し、使用した分だけ課金されるため、コスト効率が高いです。今回のAWS AppConfig実験ツールは、Lambda上のワークロードでも利用可能です。
• Amazon CloudWatchは、AWSリソースやアプリケーションのモニタリング・観測サービスです。メトリクスの収集・追跡、ログファイルの収集・監視、アラームの設定、リソースの変化への自動対応が可能です。ダッシュボードを使ってシステム全体の可視化ができ、今回の実験ツールでは実験結果の分析にも活用されます。