AWS MediaConvert を使用したサーバーレス動画処理パイプライン

MicrocosmWorks は、Step Functions がパイプラインをオーケストレートするセグメント化された処理アーキテクチャを設計しました。Lambda 関数がソース動画をセグメントに分割し、AWS MediaConvert が Lambda のタイムアウト制約なしで実際のトランスコーディングを処理し、最後の Lambda が出力を結合します。このハイブリッドアプローチにより、あらゆる長さの動画をサポートしながら、サーバーレスのコストモデルを維持します。

MicrocosmWorks は、バースト的な動画処理ワークロードにおいて、専用の EC2 エンコードインスタンスを稼働させる場合と比較して、70～85% のコスト削減を測定しました。サーバーレスパイプラインはアイドル時にはコストがかからず、ピーク時には数百の同時ジョブにスケールし、AWS MediaConvert の分単位課金により、ピークキャパシティのプロビジョニングの必要性を排除します。

MicrocosmWorks は、AWS Step Functions をステップごとのリトライポリシーと指数バックオフで設定し、失敗したトランスコードステップがパイプライン全体を再起動することなく自動的にリトライされるようにしています。各ステージは中間出力を S3 に書き込むため、復旧はソースファイルから再処理するのではなく、最後の成功したチェックポイントから再開されます。

MicrocosmWorks は、重要な Lambda 関数でのプロビジョニングされた同時実行数と MediaConvert の予約済みトランスコーディングスロットを使用してコールドスタート緩和策を講じ、パイプラインをニアリアルタイムのユースケース向けに最適化しました。ライブワークフローの場合、パイプラインはアップロードから配信まで2～5分のエンドツーエンド遅延を達成し、クリップ抽出やハイライト配信に適しています。

MicrocosmWorks は、サーバーレス動画インフラストラクチャを$25～$45/時間のレートで構築します。Step Functions のオーケストレーション、S3 のライフサイクル管理、およびモニタリングを含む完全な MediaConvert ベースのパイプラインは、通常 250～400 時間の開発時間を要します。このアーキテクチャの従量課金モデルは、クライアントが実際の処理量に比例した AWS コストのみを支払うことを意味します。