Безсерверний конвеєр обробки відео з AWS MediaConvert

MicrocosmWorks розробила архітектуру сегментованої обробки, де Step Functions керують конвеєром: Lambda-функції розділяють вихідні відео на сегменти, AWS MediaConvert виконує фактичне транскодування без обмежень за тайм-аутом Lambda, а фінальна Lambda зшиває результат. Цей гібридний підхід зберігає безсерверну модель витрат, підтримуючи відео будь-якої тривалості.

MicrocosmWorks виміряла зниження витрат на 70-85% для пікових робочих навантажень з обробки відео порівняно із запуском виділених екземплярів кодування EC2. Безсерверний конвеєр не несе жодних витрат у стані простою та масштабується до сотень паралельних завдань під час пікових періодів, а похвилинна оплата AWS MediaConvert усуває необхідність попереднього забезпечення пікової потужності.

MicrocosmWorks налаштував AWS Step Functions з політиками повторних спроб для кожного кроку та експоненціальною затримкою, забезпечуючи, що невдалий крок транскодування автоматично повторюється без перезапуску всього конвеєра. Кожен етап записує проміжні вихідні дані в S3, тому відновлення продовжується з останньої успішної контрольної точки, замість повторної обробки з вихідного файлу.

MicrocosmWorks оптимізував pipeline для near-real-time варіантів використання із cold start mitigation, застосовуючи provisioned concurrency на критично важливих Lambda functions та MediaConvert reserved transcoding slots. Для live workflows, pipeline досягає end-to-end latency у 2-5 хвилин від upload до delivery, що підходить для clip extraction та highlights distribution.

MicrocosmWorks створює безсерверну відеоінфраструктуру за тарифами $25-$45/год, при цьому повний пайплайн на базі MediaConvert, що включає оркестрацію Step Functions, управління життєвим циклом S3 та моніторинг, зазвичай потребує 250-400 годин розробки. Модель архітектури 'оплата за використання' означає, що клієнти сплачують лише витрати AWS пропорційно до їхнього фактичного обсягу обробки.