Embed Size (px)
Citation preview
【AWS Black Belt Online Seminar】Amazon EC2 スポットインスタンス
アマゾン ウェブ サービス ジャパン株式会社
ソリューションアーキテクト 塚田 朗弘
2016.11.09
自己紹介
塚田 朗弘 – Akihiro Tsukada
スタートアップなお客様を
担当するモバイルニンジャ3号機Amazon Cognito
Amazon SNS Mobile Push
AWS Mobile Hub …等々
スポットインスタンス好き
二児の父
2
AWS Black Belt Online Seminar とはAWSJのTechメンバがAWSに関する様々な事を紹介するオンラインセミナーです
【火曜 12:00~13:00】主にAWSのソリューションや業界カットでの使いどころなどを紹介(例：IoT、金融業界向け etc.)
【水曜 18:00~19:00】主にAWSサービスの紹介やアップデートの解説(例：EC2、RDS、Lambda etc.)
※最新の情報は下記をご確認下さい。オンラインセミナーのスケジュール&申し込みサイト
https://aws.amazon.com/jp/about-aws/events/webinars/
3
本資料では2016年11月9日時点のサービス内容および価格についてご説明しています。最新の情報はAWS公式ウェブサイト(http://aws.amazon.com)にてご確認ください。
資料作成には十分注意しておりますが、資料内の価格とAWS公式ウェブサイト記載の価格に相違があった場合、AWS公式ウェブサイトの価格を優先とさせていただきます。
内容についての注意点
AWS does not offer binding price quotes. AWS pricing is publicly available and is subject to change in accordance with the AWS Customer Agreement available at http://aws.amazon.com/agreement/. Any pricing information included in this document is provided only as an estimate of usage charges for AWS services based on certain information that you have provided. Monthly charges will be based on your actual use of AWS services, and may vary from the estimates provided.
価格は税抜表記となっています。日本居住者のお客様が東京リージョンを使用する場合、別途消費税をご請求させていただきます。
4
アジェンダ
Amazon Elastic Compute Cloud(EC2)
スポットインスタンスの種類
スポットフリートのターゲット容量
スポットベストプラクティス
まとめ
5
アジェンダ
Amazon Elastic Compute Cloud(EC2)
スポットインスタンスの種類
スポットフリートのターゲット容量
スポットベストプラクティス
まとめ
6
Amazon Elastic Compute Cloud (EC2)
特徴 (http://aws.amazon.com/jp/ec2/)
必要な時に必要なだけ1時間単位の従量課金で利用できる仮想サーバリソース
世界13箇所のリージョンで利用可能
様々なスペック・OSを選択可能
価格体系 (http://aws.amazon.com/jp/ec2/pricing/)
インスタンス利用料($0.01/hour 〜)
データ転送量(OUT $0.14/GB )
仮想クラウドサーバ
7
Amazon EC2の購入オプション
オンデマンドスタンダードな時間課金型インスタンス
リザーブドインスタンス1年間または3年間の利用予約をすることで25〜70%前後の割引
スポットインスタンス使われていないEC2インスタンスに入札して格安利用
最大90%程度の大幅コストカットが可能！
Dedicated Hostお客様専用の物理サーバを確保
※リザーブドインスタンスについてはこちらを参照:AWS BlackBelt AWSのコスト削減オプションhttp://www.slideshare.net/AmazonWebServicesJapan/aws-black-belt-online-seminar-aws-67269475 8
Amazon EC2 購入オプション料金一部比較例
9
オンデマンド
スタンダードリザーブドインスタンス1年間 スポット
インスタンス※
スポットブロック※
全部前払い 一部前払い 前払いなし 1h 6h
c4.large $0.133$0.089
(33%)
$0.091
(31%)
$0.101
(24%)
$0.0216
(83%)
$0.077
(42%)
$0.098
(26%)
m4.large $0.174$0.091
(47%)
$0.094
(46%)
$0.109
(37%)
$0.0199
(88%)
$0.101
(42%)
$0.128
(26%)
r3.xlarge $0.399$0.255
(36%)
$0.26
(34%)
$0.298
(25%)
$0.0479
(88%)
$0.231
(42%)
$0.294
(26%)
2016年11月09日06:00現在/東京リージョン/Linuxインスタンス。()内はOn-Demandからの節約比率。
※スポットインスタンス、スポットブロックの価格は需要と供給によって常に変動します。
アジェンダ
Amazon Elastic Compute Cloud(EC2)
スポットインスタンスの種類
スポットフリートのターゲット容量
スポットベストプラクティス
まとめ
10
スポットインスタンスの種類
リクエストタイプ
永続性リクエスト
単位容量変更
起動に用いるAPIリクエスト有効期限を
設定した場合の有効期限後の挙動
①スポット
インスタンス
instance
one-time(default)
orpersistent
instances 不可 request-spot-instances
リクエストがキャンセルされインスタンスは
ターミネートされる
②スポットブロック
block(** min)
- instances 不可 request-spot-instances -
③スポットフリート
fleet
requestor
maintain(default)
※
Instancesor
vCPUs可 request-spot-fleet
起動時のTerminateInstances
WithExpiration(true or false)
の指定による
11※ スポットフリートの request/maintain はスポットインスタンスの one-time/persistent に似た挙動
アジェンダ
Amazon Elastic Compute Cloud(EC2)
スポットインスタンスの種類スポットインスタンス
スポットブロック
スポットフリート
スポットフリートのターゲット容量
スポットベストプラクティス
まとめ
12
スポットインスタンスの種類
リクエストタイプ
永続性リクエスト
単位容量変更
起動に用いるAPIリクエスト有効期限を
設定した場合の有効期限後の挙動
①スポット
インスタンス
instance
one-time(default)
orpersistent
instances 不可 request-spot-instances
リクエストがキャンセルされインスタンスは
ターミネートされる
②スポットブロック
block(** min)
- instances 不可 request-spot-instances -
③スポットフリート
fleet
requestor
maintain(default)
※
Instancesor
vCPUs可 request-spot-fleet
起動時のTerminateInstances
WithExpiration(true or false)
の指定による
13※ スポットフリートの request/maintain はスポットインスタンスの one-time/persistent に似た挙動
①スポットインスタンス
単一のインスタンスタイプでスポットインスタンスを起動する最もシンプルなタイプ
スポット価格高騰あるいはスポットインスタンス枯渇による強制ターミネートを前提とした構成、アプリケーションにする必要がある
ご利用はEC2起動ウィザード、Auto Scaling Groupの起動設定、Amazon Elastic MapReduce(EMR)のクラスタ起動ウィザード、及びそれらに該当するAPIなどから
開発/テスト環境、またはEMRやAuto Scalingで大きな分散処理基盤を作るときなどに有効
14
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
①スポットインスタンス概念図
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
15
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
①スポットインスタンス概念図
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
16
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
①スポットインスタンス概念図 - スポットプール
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
Region、Availability Zone（以下AZ）、OS、インスタンスタイプごとの余ったインスタンスたち
17
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
①スポットインスタンス概念図 - スポット価格
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
$0.0384 $0.0346$0.0346
$0.0530$0.0209
スポットプール毎に需要と共有のバランスで変動する、その時点でのスポットインスタンス課金額
$3.66
18
①スポットインスタンス概念図 - 入札価格
「最大でここまでなら支払ってもよい」という価格
実際に課金されるのはスポット価格
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
通常使用中
通常使用中
通常使用中
$0.0384 $0.0346$0.0346
$0.0530$0.0209
$3.66「東京リージョンの
1aにあるc4.largeを
最大$0.05で使いたい！」
19
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
①スポットインスタンス概念図 - 落札
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
通常使用中
通常使用中
通常使用中
$0.0384 $0.0346$0.0346
$0.0530$0.0209
入札価格がスポット価格を上回り、スポットプールに空きがあった場合※、希望したスポットインスタンスを利用可能
$3.66「東京リージョンの1aにあるc4.largeは現在$0.0346なので、$0.05入札で起動できた！」
※詳しくは「スポットインスタンスのしくみ」参照http://docs.aws.amazon.com/ja_jp/AWSEC2/latest/UserGuide/how-spot-instances-work.html 20
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
①スポットインスタンス概念図 - インスタンスの中断
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
通常使用中
通常使用中
通常使用中
$0.0384 $0.0346$0.051
$0.0530$0.0209
スポット価格が変動し入札価格を上回ったとき、スポットインスタンスはターミネートされる。インスタンスからメタデータをGETすると、
2分前から通知を取得できる。5秒ごとのポーリングを推奨。※
$3.66「スポット価格が変動して入札価格$0.05を上回ってしまった。ターミネート前に終了処理をしよう」
※詳しくは「スポットインスタンスの終了の通知」参照http://docs.aws.amazon.com/ja_jp/AWSEC2/latest/UserGuide/spot-interruptions.html 21
単価
時間
スポット価格
入札額
課金額
①ワンタイムリクエスト投入(type=one-time)
$0.01
$0.24
$0.30
1h 1h
③1時間単位の課金
④入札額＜スポット価格
になったのでインスタンス終了
①スポットインスタンスの挙動 - ワンタイムリクエスト
②入札額>スポット価格
になったのでインスタンス起動
<1h
⑤強制終了時の1時間未満の利用分は非課金
⑥ワンタイムリクエストはターミネート発生後に
自動キャンセルされるのでインスタンスは起動しない
22
単価
時間
①永続リクエスト投入(type=persistent)
$0.01
$0.24
$0.30
1h 1h
③1時間単位の課金
④入札額＜スポット価格
になったのでインスタンス終了
①スポットインスタンスの挙動 - 永続リクエスト
②入札額>スポット価格
になったのでインスタンス起動
<1h
⑤強制終了時の1時間未満の利用分は非課金
⑥永続スポットリクエストはキャンセルするまで、または有効期限が切れるまで有効
なので再度インスタンス起動23
スポット価格
入札額
課金額
単価
時間
①リクエスト投入
(validUntil=3.5時間後)
$0.01
$0.24
$0.30
①スポットインスタンスの挙動 - 有効期限あり
②入札額>スポット価格
になったのでインスタンス起動
③有効期限が切れたらリクエストは自動で
キャンセルされインスタンスが終了する
24
リクエスト有効期限
3.5h
スポット価格
入札額
課金額
①スポットインスタンス活用事例 - 株式会社ドリコム
25
AWSスポットインスタンスの真髄http://www.slideshare.net/GedowFather/gedow-style-aws-spot-instance
①スポットインスタンス活用事例 - SmartNews Inc.
26
How SmartNews Built a Lambda Architecture on AWS to Analyze Customer Behavior and Recommend Contenthttps://aws.amazon.com/jp/blogs/big-data/how-smartnews-built-a-lambda-architecture-on-aws-to-analyze-customer-behavior-and-recommend-content/
※ 本文Summary中で言及されているSmartNews様のSlideShareはこちらBuilding a Sustainable Data Platform on AWS http://www.slideshare.net/smartnews/20160127-building-a-sustainable-data-platform-on-awsStream Processing in SmartNews http://www.slideshare.net/smartnews/stream-processing-in-smartnews-jawsdays
①スポットインスタンス - EMR連携
27
クラスタ作成時に各ノードタイプのスポットリクエストが可
能。タスクノードは後からでも追加時にリクエスト可能。
(EMRドキュメント内)スポットインスタンスでコストを削減するhttp://docs.aws.amazon.com/ja_jp/ElasticMapReduce/latest/ManagementGuide/emr-plan-spot-instances.html
タスクノードとスポットインスタンスの相性はよく、大幅なコストカットが見
込める
①スポットインスタンス - EMR連携
28
マスター/コアのスポット化は可能だがユースケースに注意
クラスタの安定性が必要なときはマスター/コアは
オンデマンドで。
(EMRドキュメント内)スポットインスタンスでコストを削減するhttp://docs.aws.amazon.com/ja_jp/ElasticMapReduce/latest/ManagementGuide/emr-plan-spot-instances.html
プロジェクトマスターインスタンスグループ
コアインスタンスグループ
タスクインスタンスグループ
長時間稼働クラスター オンデマンド オンデマンド スポット
コスト主導の作業 スポット スポット スポット
データクリティカルな作業
オンデマンド オンデマンド スポット
アプリケーションのテスト
スポット スポット スポット
※EMRドキュメントより抜粋。
アジェンダ
Amazon Elastic Compute Cloud(EC2)
スポットインスタンスの種類スポットインスタンス
スポットブロック
スポットフリート
スポットフリートのターゲット容量
スポットベストプラクティス
まとめ
29
スポットインスタンスの種類
リクエストタイプ
永続性リクエスト
単位容量変更
起動に用いるAPIリクエスト有効期限を
設定した場合の有効期限後の挙動
①スポット
インスタンス
instance
one-time(default)
orpersistent
instances 不可 request-spot-instances
リクエストがキャンセルされインスタンスは
ターミネートされる
②スポットブロック
block(** min)
- instances 不可 request-spot-instances -
③スポットフリート
fleet
requestor
maintain(default)
※
Instancesor
vCPUs可 request-spot-fleet
起動時のTerminateInstances
WithExpiration(true or false)
の指定による
30※ スポットフリートの request/maintain はスポットインスタンスの one-time/persistent に似た挙動
②スポットブロック
スポットインスタンスのリクエスト時、1〜6時間の使用予定期間を指定する（BlockDurationMinutesパラメータ）
一度落札に成功すれば、指定した時間内はスポットブロック価格が高騰してもターミネートされず、課金額は落札時のスポットブロック価格で維持される
オンデマンド価格から20%〜50%程度の割引
31
②スポットブロック
32
~ 21% 1時間以内
~ 35% 2時間以内
~ 40% 3時間以内
およそ50%のインスタンスが6時間以内にターミネートされている
6時間の妥当性
CloudHealth Technologies https://www.cloudhealthtech.com/
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
②スポットブロック概念図 - スポットプール
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
33
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
②スポットブロック概念図 - スポットブロック価格
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中
使用中
使用中
使用中 使用中
1h:$0.201/h6h:$0.256/h
1h:$0.077/h6h:$0.098/h
1h:$0.077/h6h:$0.098/h
1h:$0.201/h6h:$0.256/h
スポットインスタンスの価格とは別で、需要と共有のバランスで変動する、その時点でのスポットブロック課金額
指定する継続時間（60,120,180,240,300,360）ごとに価格が存在
1h:$0.101/h6h:$0.128/h
34
使用中
1h:$0.101/h6h:$0.128/h
②スポットブロック概念図 - 入札価格と継続時間
「最大でここまでなら支払ってもよい」という価格
実際に課金されるのは落札時点でのスポットブロック価格であり、課金額は指定した時間中は固定される
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
通常使用中
通常使用中
通常使用中
$0.0384 $0.0346
$3.66「東京リージョンの1aにあるc4.largeを
最大$0.09 で 60分使いたい！」
35
1h:$0.077/h6h:$0.098/h
1h:$0.201/h6h:$0.256/h1h:$0.101/h
6h:$0.128/h
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
②スポットブロック概念図 - 落札
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
通常使用中
通常使用中
通常使用中
$0.0384 $0.0346
入札価格がスポットブロック価格を上回り、スポットプールに空きがあった場合※、希望したインスタンスを指定した期間利用可能
$3.66「東京リージョンの1aにあるc4.largeは現在60分で$0.077なので、$0.09入札で起動できた！」
※詳しくは「スポットインスタンスのしくみ」を参照http://docs.aws.amazon.com/ja_jp/AWSEC2/latest/UserGuide/how-spot-instances-work.html 36
1h:$0.077/h6h:$0.098/h
1h:$0.201/h6h:$0.256/h1h:$0.101/h
6h:$0.128/h
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
②スポットブロック概念図 - 課金額とインスタンスの維持
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
通常使用中
通常使用中
通常使用中
$0.0384 $0.0346
もしスポットブロック価格が高騰しても、シンプルなスポットインスタンスとは違いターミネートされず、課金額も落札時のスポットブロック価格で固定されている
$3.66「スポットブロック価格が変動して入札価格$0.09を上回ってしまった。でも課金額は$0.077で固定されているし、指定時間中はターミネートされないので安心！」
37
1h:$0.097/h6h:$0.108/h
1h:$0.201/h6h:$0.256/h1h:$0.101/h
6h:$0.128/h
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
②スポットブロック概念図 - インスタンスの終了
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
通常使用中
通常使用中
通常使用中
$0.0384 $0.0346
$3.66
38
「指定した60分が経過したor
処理を終えてリクエストを自分でキャンセルした
のでインスタンス終了！」
1h:$0.097/h6h:$0.108/h
1h:$0.201/h6h:$0.256/h1h:$0.101/h
6h:$0.128/h
②スポットブロックの挙動 - 時間経過パターン
単価
時間
ブロック価格
入札額
課金額
$0.24
$0.30
6h
①リクエスト投入
(--block-duration-minutes 360)
②落札後は課金額固定
③指定した時間が経過し、
インスタンス終了39
②スポットブロックの挙動 - 手動終了パターン
単価
時間
$0.24
$0.30
③リクエストをキャンセルし
インスタンス終了
6h
①リクエスト投入
(--block-duration-minutes 360)
①リクエスト投入
(--block-duration-minutes 360)
②落札後は課金額固定
40
ブロック価格
入札額
課金額
1h
④インスタンス終了後の
残り時間は非課金
アジェンダ
Amazon Elastic Compute Cloud(EC2)
スポットインスタンスの種類スポットインスタンス
スポットブロック
スポットフリート
スポットフリートのターゲット容量
スポットベストプラクティス
まとめ
41
スポットインスタンスの種類
リクエストタイプ
永続性リクエスト
単位容量変更
起動に用いるAPIリクエスト有効期限を
設定した場合の有効期限後の挙動
①スポット
インスタンス
instance
one-time(default)
orpersistent
instances 不可 request-spot-instances
リクエストがキャンセルされインスタンスは
ターミネートされる
②スポットブロック
block(** min)
- instances 不可 request-spot-instances -
③スポットフリート
fleet
requestor
maintain(default)
※
instancesor
vCPUs可 request-spot-fleet
起動時のTerminateInstances
WithExpiration(true or false)
の指定による
42※ スポットフリートの request/maintain はスポットインスタンスの one-time/persistent に似た挙動
③スポットフリート
配分戦略に応じて複数のスポットプールを自動的に利用Diversified戦略: 選択したプールの内、できるだけ多くのプールに分散することで、個々のプールでスポット価格が高騰した時の影響を軽減
Lowest Price戦略: 選択したプールの内、最も安価なプールを優先的に使い、より高いコスト削減効果を得る
フリート全体でターゲット容量（インスタンス数 or vCPU数）を満たす
Application Auto Scalingにも対応http://docs.aws.amazon.com/ja_jp/ApplicationAutoScaling/latest/APIReference/Welcome.html
ステートレスなWeb/App/Batchサーバ、CIサーバ、Amazon EC2 Container Service(ECS)との組み合わせ等で活躍
Jenkins用Spot Fleet Plug-inも提供https://aws.amazon.com/jp/about-aws/whats-new/2016/06/introducing-new-amazon-ec2-spot-jenkins-plug-in-save-up-to-90-percent-off-jenkins-infrastructure-costs/
43
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
③スポットフリート概念図 - スポットプールとスポット価格
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
44
$0.0209 $0.0530 $0.0346 $0.0384 $0.0246
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
③スポットフリート概念図 - リクエストタイプを決める
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
45
$0.0209 $0.0530 $0.0346 $0.0384 $0.0246
「もしスポット価格高騰によるターミネートが起こったら、その後再度スポットインスタンスが立ち上がって欲しいので、”リクエストと維持(maintain)” でいこう。」
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
③スポットフリート概念図 - ターゲット容量を決める
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
46
$0.0209 $0.0530 $0.0346 $0.0384 $0.0246
「“インスタンス数:10” をターゲットにしよう。」
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
③スポットフリート概念図 - インスタンスタイプを選ぶ
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
47
対象外
対象外
$0.0209 $0.0530 $0.0346 $0.0384 $0.0246
「今回はvCPUが同じ2である“m4.large”と“c4.large”を使おう。AZは指定なし。」
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
③スポットフリート概念図 - 配分戦略を選ぶ
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
48
対象外
対象外
$0.0209 $0.0530 $0.0346 $0.0384 $0.0246
「Lowest Price戦略だとこうなる…。」(※ 安価なスポットプールを優先して使う)
ap-northeast-1a
(Tokyo Region)
m4.large
…
m4.xlarge
③スポットフリート概念図 - 配分戦略を選ぶ
c4.large
ap-northeast-1c
m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
49
対象外
対象外
$0.0209 $0.0530 $0.0346 $0.0384 $0.0246
「Diversifiedだとこうか。今回はDiversified戦略でいこう！」(※ できるだけ多くのスポットプールに分散させる)
ap-northeast-1a
(Tokyo Region)
③スポットフリート概念図 - 入札価格を決める
ap-northeast-1c
50
「それぞれのインスタンスタイプごとにオンデマンド価格と同額で入札しよう。」
m4.large
…
m4.xlarge c4.large m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
対象外
対象外
$0.0209 $0.0530 $0.0346 $0.0384 $0.0246
ap-northeast-1a
(Tokyo Region)
③スポットフリート概念図 - スポットフリートをリクエストする
ap-northeast-1c
51
「よし、落札に成功して想定通りのインスタンスが起動した！」
m4.large
…
m4.xlarge c4.large m4.large
…
m4.xlarge c4.large
使用中使用中
使用中
使用中
使用中 使用中
対象外
対象外
$0.0209 $0.0530 $0.0346 $0.0384 $0.0246
ap-northeast-1a
(Tokyo Region)
③スポットフリート概念図 - スポット価格の高騰
ap-northeast-1c
52
「あ、1aのm4.largeが価格高騰してインスタンスが終了してしまった！」
…
m4.xlarge c4.large m4.large
…
m4.xlarge c4.large
使用中
使用中
使用中
使用中 使用中
対象外
対象外
$0.0530 $0.0346 $0.0384 $0.0246
m4.large
使用中
$0.142
ap-northeast-1a
(Tokyo Region)
③スポットフリート概念図 - 代替インスタンスの自動起動
ap-northeast-1c
53
「でも大丈夫、他の有効なスポットプールで自動的にインスタンスが起動して、フリート全体としてはまたターゲット容量の “インスタンス数:10” を確保できたぞ。」
m4.large
…
m4.xlarge c4.large m4.large
…
m4.xlarge c4.large
使用中 使用中
使用中
使用中
使用中 使用中
対象外
対象外
$0.142 $0.0530 $0.0346 $0.0384 $0.0246
ap-northeast-1a
(Tokyo Region)
③スポットフリート概念図 - Auto Scalingの設定
ap-northeast-1c
54
「SQSのメッセージ数をトリガーにしてAuto Scalingしよう。メッセージが1000件を超えたアラームを受け取ったらターゲット容量を2増やすように設定。」
m4.large
…
m4.xlarge c4.large m4.large
…
m4.xlarge c4.large
使用中 使用中
使用中
使用中
使用中 使用中
対象外
対象外
$0.142 $0.0530 $0.0346 $0.0384 $0.0246
ap-northeast-1a
(Tokyo Region)
③スポットフリート概念図 - Auto Scalingの発動
ap-northeast-1c
55
「SQSメッセージ1000件超えのアラームが発報されて、ターゲット容量が2増えた。インスタンスも起動した！」
m4.large
…
m4.xlarge c4.large m4.large
…
m4.xlarge c4.large
使用中 使用中
使用中
使用中
使用中 使用中
対象外
対象外
$0.142 $0.0530 $0.0346 $0.0384 $0.0246
③スポットフリート活用事例 - Actcat, Inc.
56
SpotFleetを使ったらEC2のコストが1/4になった話http://tech.sideci.com/entry/2016/10/11/115605
③スポットフリート活用事例 - Actcat, Inc.
57
SpotFleetを使ったらEC2のコストが1/4になった話http://tech.sideci.com/entry/2016/10/11/115605
アジェンダ
Amazon Elastic Compute Cloud(EC2)
スポットインスタンスの種類
スポットフリートのターゲット容量
スポットベストプラクティス
まとめ
58
スポットフリートのターゲット容量
59
1. ターゲット容量とインスタンスの重み付けについて
2. ターゲット容量:インスタンス数が向くケース代替可能な（=スペックの似た）インスタンスを選択し、処理能力を落とさないようコントロールする
例えばステートレスなWeb/Appサーバなど
3. ターゲット容量:vCPU数が向くケーススポットフリートをブラックボックスとして捉え、確保されたリソースの提供のみを要求する
例えばBatch、分散処理基盤、Amazon ECSなど
ターゲット容量とインスタンスの重み付けについて
60
ターゲット容量をインスタンスでなくvCPUにする場合、インスタンスタイプごとに”分量”(WeightedCapacity)の設定が必要
分量を指定しなければ1インスタンス時間あたりの入札価格、分量を指定すればユニット時間ごとの入札価格として解釈される とも言える
シンプルに考えたい場合、各インスタンスタイプの分量 = そのインスタンスタイプのvCPU数とすればよい（マネジメントコンソールから操作した場合、ターゲット容量をvCPUにするとそのように設定される）
インスタンスタイプによってパフォーマンスを調整したい、またはインスタンスタイプごとに入札価格を調整したい などの場合は分量を個別に編集することで実現可能
スポット群インスタンスの重み付けhttp://docs.aws.amazon.com/ja_jp/AWSEC2/latest/UserGuide/spot-fleet.html#spot-instance-weighting
ターゲット容量とインスタンスの重み付けについて
61
計算式:
インスタンスの起動数 = ターゲット容量 ÷ 分量(小数点以下切り上げ)
1ユニット時間あたりの価格 = スポット価格 ÷ 分量(小数点以下切り上げ)
ターゲット容量 “vCPU数: 10” の場合の例
スポット群インスタンスの重み付けhttp://docs.aws.amazon.com/ja_jp/AWSEC2/latest/UserGuide/spot-fleet.html#spot-instance-weighting
スタンスタイプインスタンスの
分量
インスタンス時間あたりのスポット
価格
ユニット時間あたりのスポット価格
起動されるインスタンスの数
r3.xlarge 2 0.05 USD.025
（.05 ÷ 2）5
（10 ÷ 2）
r3.8xlarge 8 0.10 USD.0125
（.10 ÷ 8）
2（10 ÷ 8、
結果切り上げ）
ターゲット容量とインスタンスの重み付けについて
62
実際のvCPU数より分量を小さくすると…インスタンスがより多くなるため全体の処理能力がアップする
インスタンスがより多くなるため料金もより多くかかる
実際のvCPU数より分量を大きくすると…インスタンスがより少なくなるため全体の処理能力がダウンする
インスタンスがより少なくなるため料金もより少なくなる
スポット群インスタンスの重み付けhttp://docs.aws.amazon.com/ja_jp/AWSEC2/latest/UserGuide/spot-fleet.html#spot-instance-weighting
ターゲット容量とインスタンスの重み付けについて
63
まずは、ターゲット容量としてインスタンス数を選ぶか、
vCPU数を選んだときもvCPU数と同じ分量を設定して
シンプルに使う
分量を細かく使いこなしたい方は、チュートリアルを
読んでいただくことをお勧めしますチュートリアル：スポットフリートを使ってインスタンスの分量を指定する
http://docs.aws.amazon.com/ja_jp/AWSEC2/latest/UserGuide/spot-
fleet.html#instance-weighting-walkthrough
スポット群インスタンスの重み付けhttp://docs.aws.amazon.com/ja_jp/AWSEC2/latest/UserGuide/spot-fleet.html#spot-instance-weighting
ターゲット容量:インスタンス数が向くケース
64
インスタンスタイプ間の差異が少なく代替として使えるとき例:m4.large、c4.large、r3.largeは全てvCPU=2であり、互いに似たパフォーマンスで同じ役割を果たせる
ユースケース:ステートレスなWeb/Appサーバなど
vCPUでなくインスタンス並列数が重要なとき例:IPアドレスがたくさん欲しいためENIを多く確保したい
ユースケース:メール配信ワーカー、クローラなど
ターゲット容量:vCPU数が向くケース
65
個々のサーバでなくvCPU単位で処理を行う場合
例:vCPUレベルで並列処理を行う構成になっており、m3.medium(vCPU=1)、r3.8xlarge(vCPU=32)が混在しても、r3.8xlargeが正しくm3.mediumの32倍の処理を実行できる
ユースケース:ECSのクラスタ、バッチワーカー、分散処理基盤など
Spot FleetでECSクラスタを構成
c3.large:2 c3.xlarge:4
c4.large:2 c4.xlarge:4
m3.large:2 m3.xlarge:4
m4.large:2 m4.xlarge:4
r3.large:2 r3.xlarge:4
Weight
c3.xlarge*1
= $0.04/h
c4.xlarge*2
= $0.08/h
r3.large*1
= $0.05/h
>> $0.17/h
vCPU <= $0.05/h
ターゲット容量 = 14 vCPUs
Max $0.7/h
Spot Fleet
Amazon ECS
走らせたいECSタスクと
タスクに必要なvCPU数
↓ ↓ ↓ ↓
アジェンダ
Amazon Elastic Compute Cloud(EC2)
スポットインスタンスの種類
スポットフリートのターゲット容量
スポットベストプラクティス
まとめ
67
スポットインスタンスのベストプラクティス#1
1. インスタンスタイプに関して柔軟になる複数のスポットプールに対応できるアプリケーション、システムを
2. 要件に合致する入札価格を設定するまずはオンデマンド価格前後での入札をお勧め
その後コストカット重視であれば低い価格に、安定性重視であれば高めの価格に
3. 好ましい価格トレンドのプールを選択するスポット価格は需要に応じてスポットプールごとに変動
需要が少ない旧世代インスタンスタイプなどが高騰しにくいなど
スポット入札アドバイザーを使うhttps://aws.amazon.com/jp/ec2/spot/bid-advisor/
68
※ Spot Best Practiceshttps://aws.amazon.com/jp/ec2/spot/getting-started/#bestpractices
※ Amazon Web Services ブログ スポットインスタンスに注目- ベストプラクティスについてhttp://aws.typepad.com/aws_japan/2015/06/focusing-on-spot-instances-lets-talk-about-best-practices.html
スポットインスタンスのベストプラクティス#1’
スポット入札アドバイザー
69
リージョン、OS、入札価格(25%, 50%, 100%)を選ぶと、各スポットプールの過去データ（先週、先月）と照合して、価格高騰の可能性を表示してくれる。
vCPUやメモリ、EMRサポート有無でフィルタリングも可能。
https://aws.amazon.com/jp/ec2/spot/bid-advisor/
スポットインスタンスのベストプラクティス#2
インスタンスをステートレスに保つ
≒ 個々のサーバに依存した情報を持たない
→ どのインスタンスがいつ終了しても問題ない状態に必読1:クラウドのためのアーキテクチャ設計 - ベストプラクティス -
http://www.slideshare.net/AmazonWebServicesJapan/aws-black-belt-online-
seminar-2016/16
必読2:Amazon EC2 Container Service
http://www.slideshare.net/AmazonWebServicesJapan/aws-black-belt-online-
seminar-2016-amazon-ec2-container-service
必読3:THE TWELVE-FACTOR APP
https://12factor.net/ja/
70
アジェンダ
Amazon Elastic Compute Cloud(EC2)
スポットインスタンスの種類
スポットフリートのターゲット容量
スポットベストプラクティス
まとめ
71
まとめ
72
スポットインスタンスは大幅なコスト削減効果のあるEC2購入オプションの一つ
スポットインスタンス、スポットブロック、スポットフリートの三種類がある
スポットフリートでより安価に、より安定したスポットインスタンスの利用が可能
ベストプラクティスを踏まえて、ステートレスなスポットライフを！
参考資料
スポットインスタンス ドキュメント
http://docs.aws.amazon.com/ja_jp/AWSEC2/latest/UserGuide/using-spot-instances.html
スポットインスタンスベストプラクティス
https://aws.amazon.com/jp/ec2/spot/getting-started/#bestpractices
Application Auto Scaling
http://docs.aws.amazon.com/ja_jp/ApplicationAutoScaling/latest/APIReference/Welcome.html
AWS クラウドサービス活用資料集
https://aws.amazon.com/jp/aws-jp-introduction/
12-Factor App
https://12factor.net/ja/
73
Q&A
74
オンラインセミナー資料の配置場所
AWS クラウドサービス活用資料集http://aws.amazon.com/jp/aws-jp-introduction/
AWS Solutions Architect ブログ最新の情報、セミナー中のQ&A等が掲載されています
http://aws.typepad.com/sajp/
75
公式Twitter/FacebookAWSの最新情報をお届けします
@awscloud_jp
検索
最新技術情報、イベント情報、お役立ち情報、お得なキャンペーン情報などを日々更新しています！
もしくはhttp://on.fb.me/1vR8yWm
76
AWSの導入、お問い合わせのご相談
AWSクラウド導入に関するご質問、お見積り、資料請求をご希望のお客様は、以下のリンクよりお気軽にご相談くださいhttps://aws.amazon.com/jp/contact-us/aws-sales/
※「AWS 問い合わせ」で検索してください77
ご参加ありがとうございました
78
79
