AWS MediaConvert を使用したサーバーレス動画処理パイプライン

MicrocosmWorksは、Step Functionsがパイプラインをオーケストレーションするセグメント化された処理アーキテクチャを設計しました。具体的には、Lambda関数がソースビデオをセグメントに分割し、AWS MediaConvertがLambdaのタイムアウト制約なしに実際のトランスコーディングを処理し、最終的なLambdaが出力を結合します。このハイブリッドアプローチは、サーバーレスなコストモデルを維持しつつ、あらゆる長さのビデオをサポートします。

MicrocosmWorksは、バースト性の高いビデオ処理ワークロードにおいて、専用のEC2エンコーディングインスタンスを実行する場合と比較して70-85%のコスト削減を測定しました。serverlessパイプラインはアイドル時にはコストがかからず、ピーク時には数百の同時実行ジョブにスケールし、AWS MediaConvertの分単位課金によりピーク容量のためにプロビジョニングする必要がなくなります。

MicrocosmWorks は、AWS Step Functions をステップごとの再試行ポリシーと指数バックオフで設定しました。これにより、失敗したトランスコードステップはパイプライン全体を再開することなく自動的に再試行されます。各ステージは中間出力を S3 に書き込むため、復旧はソースファイルから再処理するのではなく、最後の成功したチェックポイントから再開されます。

MicrocosmWorks は、重要な Lambda 関数にプロビジョンドコンカレンシーを使用し、MediaConvert の予約トランスコーディングスロットを活用することでコールドスタートを緩和し、パイプラインをニアリアルタイムのユースケース向けに最適化しました。ライブワークフローの場合、パイプラインはアップロードから配信まで2～5分のエンドツーエンド遅延を達成し、これはクリップの抽出やハイライトの配信に適しています。

MicrocosmWorks は、$25〜$45/時間の料金でサーバーレス動画インフラを構築しています。Step Functionsによるオーケストレーション、S3ライフサイクル管理、および監視を含む完全なMediaConvertベースのパイプラインは、通常250〜400時間の開発時間を要します。このアーキテクチャの従量課金モデルは、顧客が実際の処理量に比例したAWS費用のみを支払うことを意味します。