Видео работни потоци: Super-Resolution и live кодиране

Резюме

• Описани са две области на работни потоци: мащабируем pipeline за video super-resolution, изграден върху AWS Batch с Intel Library for Video Super Resolution (VSR), и хардуер от следващо поколение AWS Elemental Live L900 series за on-premises кодиране и IP видео работни потоци.
• Материалът за super-resolution е фокусиран върху подобряване на архивни SD източници за съвременна дистрибуция, с както субективно сравнение, така и обективно измерване с VMAF.
• Материалът за хардуера за кодиране е фокусиран върху увеличаване на плътността и преходи от SDI към некомпресиран IP, включително SMPTE ST 2110, SMPTE 2022-6, JPEG XS и failover на ниво пакети със SMPTE 2022-7.

Ключови индустриални развития

• AWS и Intel описват икономически ефективен подход към video super-resolution с използване на AWS Batch и Intel Library for VSR, позициониран като алтернатива на традиционните методи за upscaling (например Lanczos и bicubic), които могат да въведат артефакти като замъгляване и пикселизация.
• Имплементацията на super-resolution е представена като работен поток стъпка по стъпка, внедрен чрез AWS CloudFormation template, използващ Amazon S3 за входове и изходи и AWS Batch jobs за обработка на видео активи. Описаната конфигурация включва проверка, че съществуват два S3 buckets: vsr-input и vsr-output.
• Работният поток с Intel Library for VSR е посочен като изискващ конкретни типове Amazon EC2 инстанции, включително c5.2xlarge, c6i.2xlarge и c7i.2xlarge, което показва, че изборът на compute е дефинирана част от ограниченията при внедряване.
• AWS описва следващото поколение appliances от AWS Elemental Live L900 series и позиционира L900 Appliance Edition encoders да увеличат плътността, докато се извършва преход на on-premises инфраструктурата от SDI към некомпресиран IP. Моделите L920, L940 и L980 са описани като поддържащи един или повече UHD HEVC работни потоци и множество HDR протоколи, с опционални некомпресирани IP входове и изходи.
• L900 series е описана като имаща две SKU линии: една, посветена на некомпресирани IP работни потоци, и една за компресирани мрежови и SDI работни потоци. За некомпресиран IP, изброените поддържани технологии включват SDI и SMPTE ST 2110, SMPTE 2022-6 и JPEG XS; failover на ниво пакети е описан чрез red/blue мрежови конфигурации с използване на SMPTE 2022-7 при “-U” IP L900 appliances.
• AWS Elemental Live encoders са описани като използваеми за contribution към Amazon S3, AWS Elemental MediaConnect или AWS Elemental MediaLive, поддържайки хибридни модели за contribution от on-premises към cloud.

Реални случаи на употреба

• Подобряване и повторно използване на архиви
• Работният поток за super-resolution е рамкиран около подобряване на архивно SD съдържание за съвременни платформи и устройства, с цел upscaling и изостряне на нискорезолюционни кадри до high-definition изходи.
• Работният поток е описан като интегриращ се в съществуващи transcoding pipelines чрез автоматизация с AWS Batch, използвайки S3 buckets като ingress/egress точки (vsr-input и vsr-output) за видео активи.
• Работни потоци за оценка на качеството при super-resolution
• Субективната оценка е описана с използване на инструмента compare-video, докато обективната оценка е описана с използване на VMAF, което позволява работен поток, който съчетава визуална инспекция с оценка на база метрика.
• On-premises кодиране и IP преход
• L900 Appliance Edition encoders са позиционирани за клиенти, които извършват преход на on-premises инфраструктура от SDI към некомпресиран IP, включително работни потоци със SMPTE ST 2110 и SMPTE 2022-6, и опционално JPEG XS.
• Appliances L920/L940/L980 са описани като поддържащи UHD HEVC работни потоци и множество HDR протоколи, в съответствие с изискванията за UHD/HDR кодиране на канали.
• Contribution от on-premises енкодери към AWS услуги
• AWS Elemental Live encoders са описани като извършващи contribution към Amazon S3, AWS Elemental MediaConnect или AWS Elemental MediaLive, поддържайки архитектури, при които on-premises кодиране захранва cloud-базирана обработка и дистрибуция.

Защо е важно

• Операционализиране на super-resolution в мащаб
• Описаният подход за super-resolution обвързва обработката за подобрение с AWS Batch и работен поток, внедрен чрез CloudFormation, което може да стандартизира моделите за внедряване и изпълнение на jobs при обработка на множество активи чрез S3-базирани input/output buckets.
• Експлицитното изискване за типове EC2 инстанции (c5.2xlarge, c6i.2xlarge, c7i.2xlarge) показва, че планирането на compute е част от това работният поток да бъде възпроизводим и внедрим в рамките на дефинирани инфраструктурни ограничения.
• Измерим контрол на качеството
• Съчетаването на субективно сравнение (чрез compare-video) с обективно оценяване (чрез VMAF) предоставя конкретен механизъм за оценка на резултатите от super-resolution отвъд само визуалните предпочитания.
• Ясно разграничение на протоколи и SKU за live работни потоци
• Разделянето на L900 series на SKU линии за некомпресиран IP спрямо компресирана мрежа/SDI съпоставя избора на хардуер с I/O и транспортните изисквания, включително SDI, SMPTE ST 2110, SMPTE 2022-6, JPEG XS и SMPTE 2022-7 failover за “-U” appliances.
• Поддръжката на UHD HEVC работни потоци и множество HDR протоколи при конкретни модели (L920/L940/L980) предоставя дефиниран appliance път за нуждите от UHD/HDR кодиране.
• Хибридни опции за contribution
• Възможността за contribution от AWS Elemental Live encoders към Amazon S3, AWS Elemental MediaConnect или AWS Elemental MediaLive поддържа множество дизайни на downstream работни потоци — от file-based handoff (S3) до услуги за live транспорт и обработка.

Източници

• https://aws.amazon.com/blogs/media/creating-scalable-super-resolution-workflow-leveraging-intel-library-for-video-super-resolution/
• https://aws.amazon.com/blogs/media/next-generation-aws-elemental-live-hardware-unlocks-new-possibilities-for-video-workflows/