미디어 서비스의 새로운 플랫폼, AWS

김기완 | 솔루션즈 아키텍트 | Amazon Web Services

Disruptive Innovation“Disrupts an existing market and value network, displacing established market leading firms, products and alliances”

- Wikipedia

빠른 변화 속도시장에빠르게접근제약조건들을제거

비용 절감자산투자감소운영비용절감

불필요한 요소 제거확장성, 안정성, 보안

새로운비즈니스창출에집중

21세기 아키텍쳐를위한 토대

Amazon Web Services Cloud

2006 시작…

Year 2016

1,000,000+ $11B+ 58%Active Users Run Rate YoY Growth

Q2 2015 to Q2 2016

ENTERPRISE APPS

DEVELOPMENT & OPERATIONSMOBILE SERVICESAPP SERVICESANALYTICS

DataWarehousing

Hadoop/Spark

Streaming Data Collection

Machine Learning

Elastic Search

Virtual Desktops

Sharing & Collaboration

Corporate Email

Backup

Queuing & Notifications

Workflow

Search

Email

Transcoding

One-click App Deployment

Identity

Sync

Single Integrated Console

PushNotifications

DevOps Resource Management

Application Lifecycle Management

Containers

Triggers

Resource Templates

TECHNICAL & BUSINESS SUP

PORT

Account Management

Support

Professional Services

Training & Certification

Security & Pricing Reports

Partner Ecosystem

Solutions Architects

MARKETPLACE

Business Apps

Business Intelligence

DatabasesDevOps Tools

NetworkingSecurity Storage

RegionsAvailability Zones

Points of Presence

INFRASTRUCTURE

CORE SERVICES

ComputeVMs, Auto-scaling, & Load Balancing

StorageObject, Blocks, Archival, Import/Export

DatabasesRelational, NoSQL, Caching, Migration

NetworkingVPC, DX, DNS

CDN

Access Control

Identity Management

Key Management & Storage

Monitoring & Logs

Assessment and reporting

Resource & Usage Auditing

SECURITY & COMPLIANCE

Configuration Compliance

Web application firewall

HYBRID ARCHITECTURE

Data Backups

Integrated App Deployments

DirectConnect

IdentityFederation

IntegratedResource Management

Integrated Networking

API Gateway

IoT

Rules Engine

Device Shadows

Device SDKs

Registry

Device Gateway

Streaming Data Analysis

Business Intelligence

MobileAnalytics

* As of 1 September 2016

2009

48

280

722

82

2011 2013 2015

AWS는어떠한 종류의 workload도처리할 수있도록 지속적으로 서비스를 확장하고 있으며, 현재 컴퓨팅, 스토리지, 네트워킹, 데이터베이스, 데이터 분석, 어플리케이션 서비스, 배포, 관리 및모바일 서비스 등 70여가지의 서비스를 제공하고 있습니다. AWS는2016년에 634개의새로운 기능을 발표하였으며, 2006년이래 2,529가지의새로운 기능을발표해 왔습니다.

AWS 혁신의속도

2016. Sep

634

AWS Global Infrastructure

13 Regions

35 Availability Zones

59 Edge Locations

Amazon Web Services

2006년이래클라우드 서비스를 구축하고 관리

모든종류의 workload를위한 70여가지서비스

고객지향의 빠른혁신의속도

13 리젼, 35 가용영역, 59 엣지위치

52번의자발적인 가격인하

수천이상의 파트너; 2,600개 이상의마켓플레이스 제품

오랜경험

다양한 서비스

빠른혁신

글로벌 서비스

가격철학

협력생태계

The Technology Platform of Choice

NASA/JPL

AWS Digital Media Customers

어떠한 일들이……?

새로운 고민

Content GrowthVR, 4K, HDR등다양한컨텐트컴퓨팅, 스토리지자원요구

Peak Demand필요에따른동적자원할당

서비스무한확장

Competitive Pressurescord cutting, 새로운경쟁소비자들의새로운요구

Global Market빠르게글로벌진출

새로운기회

4K = 5 x 1080p HD4K가최적의표준해상도인가?4K 스크린및프로그램이일반적인가?4K 카메라로촬영하는것이일반적인가?

우리는 2014년부터 2020년까지엔터테인먼트사업에서필요로하는디지털스토리지의양이 4.9배늘어날것이라고예측하고있으며, 해마다대략 3.7배의신규스토리지가도입될것으로판단하고있습니다. (18,050PB에서 66,291PB)

(Coughlin Report)

Content has Gravity and is getting heavier

4k/8kContent

미디어 프로세싱을컨텐트가 위치하는곳으로

AWS 클라우드를 사용하면 ……

Massive Infrastructure제한없는컴퓨팅, 스토리지자원

분산, 병렬식자원활용 (4K, VR, …)

Stop guessing Capacity손쉬운스케일업/다운

서비스규모제한요소제거

Speed & Agility시장에빠르게접근

적은실패비용으로새로운서비스개발

Go global in minutes약정없는 worldwide 자원사용

13 리젼, 59 엣지로케이션

미디어 워크로드를 위한 AWS 서비스

AmazonSTORAGE

AmazonDELIVERY

AmazonCOMPUTE

AmazonPROCESSING

Amazon INGEST

CloudFront –전세계에서제공되는다양한기능의 CDN 서비스

S3 / Glacier –안정성, 확장성및보안성이뛰어난비용효율적인오브젝트스토리지

Elastic Transcoder; Elemental Technologies –확장성및비용효율성이뛰어난미디어처리서비스

EC2 –미디어처리, 데이터분석, 웹서비스등다양하게활용될수있는컴퓨팅자원제공

Direct Connect; Snowball; S3 Transfer Acceleration – 다양한방법으로컨텐트를 AWS로이동

미디어 워크로드를 위한 Elemental 서비스

Elemental SERVER

Elemental LIVE

Elemental CONDUCTOR

Elemental DELTA

Elemental CLOUD

리얼 타임 비디오/오디오 인코딩

리얼 타임보다 빠른 파일 기반의 미디어 처리

비디오 배포 오리진 – 패키징, DRM, 배포, 광고삽입 등

통합운영 및 관리

AWS 상에서 작업 배포 및 관리

미디어 워크로드

Divide & Conquer

Cloud-Enabling Media Workloads

v

Acquisition

DAM & Archive

Media Supply Chain

Publishing

Playout & Distribution

Analytics

OTT

VFX & NLE

컨텐트 제작 / 입수 / 관리

v

Acquisition

DAM & Archive

Media Supply Chain

Publishing

Playout & Distribution

Analytics

OT

T

VFX & NLE

컨텐트 제작 / 입수 / 관리 – AWS 클라우드 이점

• 빠르게필요한컴퓨팅자원을할당 (클라우드렌더링, 미디어프로세싱)

• 대용량스토리지를손쉽게사용 (라이프사이클, 암호화, 이벤트처리)

• 빠르게테스트후배포

• 용량산정으로부터해방 (고객경험을극대화)

• 원하는어느곳에서든서비스가능

c4g2m3

High Capacity Egress

GPU Transcode

IngestEncoder

BroadcastDecode

Low BitrateProxy

HLS w/ Cloudfront CDN

MPEG-UDP w/FEC

Direct Connect

Multi Path 방송신호 배포

• 방송신호배포

• 위성사용비용절감

• AWS 글로벌리전활용

클라우드 스케일의 VFX Rendering

• 애니메이션스튜디오의렌더링작업

• Avere를활용한하이브리드환경

• EFS를활용한클라우드 All-in 환경

• Spot Fleet을사용한비용절감

• 40000 코어를 20분이내배포

원격 어플리케이션 활용 – 모델링 / NLE

• 편집툴의원격사용 (NLE)

• 컨텐트는클라우드(S3)에저장

• GPU 인스턴스사용Amazon S3

GPU

Content

Amazon Appstream

RemoteDumb Terminal

Amazon EC2

EFS

AWS Import/ ExportSnowball

S3 multi-part API

미디어처리의백엔드 스토리지로 S3 활용

Amazon Elastic Transcoder

S3 Notification

람다 함수를 통한트랜스코딩 작업

Ingest

S3 Notification

Signed URL 생성및미디어파일공유 설정

CMS 및 메타데이터업데이트

클라우드 MAM / DAM

Long Term Archive

API를통한접근(모든스토리지티어)

비용절감을위해입수된시점을기준으로자동

LifeCycle 적용

Amazon S3

S3 Infrequent Access

Amazon Glacier

Life

Cyc

le P

olic

ies

Near-line Storage

Frequently Accessed

컨텐트 라이프사이클 관리

Infrastructure Management for the Media Supply Chain

Fox Broadcast CentreLos Angeles

ContentQuality Check

ContentNormalization

ContentCaptioning

Distribution-ready contentand BXF metadata

Future DistributionPlatforms

Single sign-on & 2-factorauthentication via

Bypass PathManual Upload

Video Content(from suppliers)

Customer Portal(content suppliers)

ContentMetadata

FOX의 디지털 컨텐트 공급망

v

Acquisition

DAM & Archive

Media Supply Chain

Publishing

Playout & Distribution

Analytics

OTT

VFX & NLE

컨텐트 배포 / 전달 / 분석

컨텐트 배포 / 전달 / 분석 – AWS 클라우드 이점

• 빠르게필요한서비스를개발, 배포 (라이브이벤트, 스포츠, 뉴스)

• 실패비용을낮추면서빠르게실험

• 할수있는최대한의규모로실험

• 클라우드 All-in, Hybrid, DR 구조

HLS 라이브 스트리밍 - Elemental

Media Center

Live Encoder

AWS Region

Elemental Live Elemental Delta

RTMPinjection

DX (Optional)

Elemental Cloud

HLS Segmenting

DRM

CloudFront

HLS VoD 서비스 – Elemental 혹은 Amazon Elastic Transcoder

Media Center

Edit / Content

AWS Region

Elemental Server

External Sources

DX (Optional)

Elemental Cloud

DRM

CloudFront

Media Repository

Transcoding

Elastic Transcoder

• 비디오팩토리가 라이브방송을캡춰한 후클라우드 스토리지로 전송

• 입수된컨텐트를 API를통하여 Elemental Cloud로알림

• 입수된컨텐트의 양에따라동적으로 리소스 스케일아웃

• 입수된소스컨텐트에서 여러개의 H.264 ABR 아웃풋 생성

catch up TV Workflow - BBC

34

Live TV

SOURCE iPLAYER DISPLAY DEVICESCDNsELASTIC VIDEO PROCESSING

HLS Inputs

S3 STORAGEDATA TRANSFER

AWS Direct Connec

t

Live Streaming Workflow

35

• Rio에서더블린까지 10Mbps Live HLS 인풋스트림전송

• Elemental Cloud 를통해 48개의동시스트림 injection

• 각스트림당 9개의 ABR 출력, 2개의썸네일, 1개의 RTMP 피드생성

• CDN을 통하여지역방송사에서 컨텐트 전송

ELASTIC VIDEO PROCESSING

Live TV

STADIUMS FIBER

Accelerate

d

CDN

Delivery

GLOBA

L

Broadcaste

rs

DISPLAY DEVICES

HLS Inputs

S3 STORAGE

Live Linear Streaming Workflow

• Amazon Video Live Streaming 2015년 12월에 18개의채널로서비스시작

• 채널스트림은 IP (Showtime) 혹은 satellite (Starz) 로수신

• Level3 Vyvx 네트워크를통해 AWS로전송

Sony DADC Stores More Than 800,000 Hours of Video on AWS

• 디지털컨텐트배포는빠르게성장하는속도에

맞는스케일이필요

• AWS 클라우드에 All-In

• 월간 800,000 시간이상의비디오컨텐트배포

• 20PB의미디어레이크

• 수개월걸리던데이터분석을수일로단축

• 매 5~7년마다 수백만달러의비용절감

How can AWS help you?