2
Kubernetes を駆使したマイクロサービス化で グローバルサービスの開発効率を劇的に向上 日本国内で圧倒的なシェアを誇り、今や知らない人はいないというほど認知度 を 増した「 メルカリ 」。そ の 勢 い は 国 内 だ け に留まらず 、 2014 9 月には米国 に、 2017 3 月には英国でのサービスを開始しています(世界累計 1 億ダウン ロード。 2017 12 16 日時点)。海外展開に消極的と言われる国内サービス 事業者ですが、同社に関してはその常識は通用しないようです。今回は、そんな メ ル カリ の 米 国 に お ける 最 新 の 取 り 組 み に つ い て 、今 春 CTO に就任した 名村 卓さんと、 SRE 中島 大一さんにお話をお伺いしました。 (利用している Google Cloud Platform サービス) Google Kubernetes EngineCloud Dataflow など 株式会社メルカリ メルカリでは過去の取材記事でも語られたよう、リージョンごと に異なるクラウドプラットフォームを活用するマルチクラウド体制 を敷いていました。しかし、その上で動くシステムに関しては原則と して、日本で開発したものを共用。サービスの迅速な立ち上げという 意味ではメリットがあったのですが、さらなる事業の拡大という 観点では、これが足かせになりつつあったそうです。 「メルカリを米国でより一層普及させるには、現地の文化や風土に あった UI などを採用する必要があると考えました。そこで、 2016 末に米国版アプリの全面刷新を決定。国内版アプリのソースコードを 流用せず、ゼロからフルスクラッチで新開発することになりました。 そして、それに合わせてモノリシックだったサーバーサイド(メルカリ API )をマイクロサービス化しようということになったんです。この タイミングできちんと拡張性のある形に作り変えておこう、と。」 (名村さん) なお 、マイクロサービス化 は 、拡 張 性 の 担 保 だけ でなく 、生 産 性 の 向上や現地での人材確保という面からも急務となっていました。 サービス拡張に向けてローカル採用を進めようにも、米国では 優 秀 な エン ジニアほど 、モ ダンな 言 語 への 指 向 性 が 強く 、( 従 来 ステムで使われている) PHP を専門とするエンジニアの数が 減少傾向にあるのだとか。 「最近は、 Go など、新しいことにチャレンジしてきたいという人が増え ています。また、採用の面では、従来システムが巨大になりすぎて、 新しく入ってきた人が全容を把握しきれないという問題も。米国 チームで新しい機能を独自にどんどん開発していくという面でも マイクロサービス化は急務でした。」(名村さん) もちろん、今ある全ての機能をいきなりマイクロサービス化するのには 大変な労力がかかり、現実的ではありません。そこでメルカリ米国 チームでは、従 来システム(大手クラウドプラットフォーム 上に構 築 されたメルカリ API)を、 Gateway API wrapper)で包み込み、段階的 かつ効率的なマイクロサービス化を実施。そして、その Gateway Google Cloud Platform GCP)上に構築されることとなりました。 GCP を選んだのはいくつか理由があります。 1 つは、ロード バランサーが非常に優秀なこと。また、大量のアクセスが予想される 時や負荷試験の際などにも事前に予約をしておく必要のない使い や す さ も 気 に 入って い ま す 。そ して 、何 より 大 き か っ た の が 、 Kubernetes との相性の良さ。 Kubernetes は、コンテナを動かす ロードバランサーと Google Kubernetes Engine GCP 導入の決め手 https://www.mercari.com/jp/ 106 - 6118 東京都港区六本木 6-10-1 六本木ヒルズ森タワー 18F 2013 2 1 日設立。同年 7 月に C to C のフリマアプリ「メルカリ」をリリースし、国 内 で未開拓だった同市場を切りひらく。現在は、 地 域 の 募 集 コ ミュ ニ テ ィア プ リ「 メ ル カリ アッテ」や、本・ CD DVD に特化した「カウル」 など、さまざまな姉妹サービスを展開中。現在 の従業員数は約 400 名(グローバル合計) 株式会社メルカリ 執行役員 CTO 名村 卓氏 株式会社メルカリ SRE 中島 大一氏 ・写 真 左 から

Kubernetes を駆使したマイクロサービス化で グローバルサービ … · 2020. 8. 1. · Kubernetes を駆使したマイクロサービス化で グローバルサービスの開発効率を劇的に向上

  • Upload
    others

  • View
    0

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Kubernetes を駆使したマイクロサービス化で グローバルサービ … · 2020. 8. 1. · Kubernetes を駆使したマイクロサービス化で グローバルサービスの開発効率を劇的に向上

Kubernetes を駆使したマイクロサービス化でグローバルサービスの開発効率を劇的に向上

日本国内で圧倒的なシェアを誇り、今や知らない人はいないというほど認知度を増した「メルカリ」。その勢いは国内だけに留まらず、2014 年 9 月には米国に、2017 年 3 月には英国でのサービスを開始しています(世界累計 1 億ダウンロード。2017 年 12 月 16 日時点)。海外展開に消極的と言われる国内サービス事業者ですが、同社に関してはその常識は通用しないようです。今回は、そんなメルカリの米国における最新の取り組みについて、今春 C T O に就任した名村 卓さんと、S R E 中島 大一さんにお話をお伺いしました。

(利用している Google Cloud Platform サービス)Google Kubernetes Engine、Cloud Dataflow など

株式会社メルカリ

 メルカリでは過去の取材記事でも語られたよう、リージョンごとに異なるクラウドプラットフォームを活用するマルチクラウド体制を敷いていました。しかし、その上で動くシステムに関しては原則として、日本で開発したものを共用。サービスの迅速な立ち上げという意味ではメリットがあったのですが、さらなる事業の拡大という観点では、これが足かせになりつつあったそうです。「メルカリを米国でより一層普及させるには、現地の文化や風土にあった UI などを採用する必要があると考えました。そこで、2016 年末に米国版アプリの全面刷新を決定。国内版アプリのソースコードを流用せず、ゼロからフルスクラッチで新開発することになりました。そして、それに合わせてモノリシックだったサーバーサイド(メルカリ API)をマイクロサービス化しようということになったんです。このタイミングできちんと拡張性のある形に作り変えておこう、と。」(名村さん)なお、マイクロサービス化は、拡張性の担保だけでなく、生産性の向上や現地での人材確保という面からも急務となっていました。サービス拡張に向けてローカル採用を進めようにも、米国では優秀なエンジニアほど、モダンな言語への指向性が強く、(従来

システムで使われている)P H P を専門とするエンジニアの数が減少傾向にあるのだとか。「最近は、 Go など、新しいことにチャレンジしてきたいという人が増えています。また、採用の面では、従来システムが巨大になりすぎて、新しく入ってきた人が全容を把握しきれないという問題も。米国チームで新しい機能を独自にどんどん開発していくという面でもマイクロサービス化は急務でした。」(名村さん)もちろん、今ある全ての機能をいきなりマイクロサービス化するのには大変な労力がかかり、現実的ではありません。そこでメルカリ米国チームでは、従来システム(大手クラウドプラットフォーム上に構築されたメルカリ API)を、Gateway API(wrapper)で包み込み、段階的かつ効率的なマイクロサービス化を実施。そして、その Gateway は Google Cloud Platform(GCP)上に構築されることとなりました。「G C P を選んだのはいくつか理由があります。1 つは、ロードバランサーが非常に優秀なこと。また、大量のアクセスが予想される時や負荷試験の際などにも事前に予約をしておく必要のない使いやすさも気に入っています。そして、何より大きかったのが、Kubernetes との相性の良さ。Kubernetes は、コンテナを動かす

ロードバランサーと Google Kubernetes Engine が GCP 導入の決め手

https://www.mercari.com/jp/〒106 - 6118東京都港区六本木 6-10-1六本木ヒルズ森タワー 18F

2013 年 2 月 1 日設立。同年 7 月に C to C 型のフリマアプリ「メルカリ」をリリースし、国内で未開拓だった同市場を切りひらく。現在は、地域の募集コミュニティアプリ「メルカリアッテ」や、本・CD・DVD に特化した「カウル」など、さまざまな姉妹サービスを展開中。現在の従業員数は約 400 名(グローバル合計)

株式会社メルカリ執行役員 CTO名村 卓氏

株式会社メルカリSRE中島 大一氏

・写真左から

Page 2: Kubernetes を駆使したマイクロサービス化で グローバルサービ … · 2020. 8. 1. · Kubernetes を駆使したマイクロサービス化で グローバルサービスの開発効率を劇的に向上

 そして、2017 年 4 月、一部システムをマイクロサービス化した新システム、アプリが完成しました。その目玉はパーソナライズ化されたホーム画面。こうした機能は現在の国内版アプリには存在しません。「米国版アプリの新しいホーム画面では、バックエンドで Cloud Dataflow が動いていて、閲覧したり、Like した履歴をほぼリアルタイムで解析して表示しています。ほか、サーチ機能を刷新したり、値引き交渉などをやりやすくするオファー機能などを、マイクロサービス化で実現しました。こうした機能を気軽に、品質を担保しつつ構築できるようになったのは、マイクロサービス化の大きな恩恵だと考えています。」(名村さん)そのほか、細かな工夫としては、米国だけの独自機能として、Google のシリアライズフォーマット「Protocol Buffers」を採用。クライアントコードを厳密に管理できるようにすることで、後方互換を担保できるようにしているそうです。もちろん、こうした工夫は米国チームだけが取り組んでいるわけではありません。米国リージョンのマイクロサービス化が一定の成果を上げたことを受けて、この夏からは日本リージョンでも、同様の手法を用いたマイクロサービス化が始まっています。「最初は米国チームが採用した、Gateway A PI を使った方法ではなく、従来のモノリシックなメルカリ API から、マイクロサービス化された新機能を呼び出すという方式を採っていました。具体的には、商品の写真をアップロードすると、自動的に商品名やカテゴリーが入力される仕組みを、マシンラーニングの活用によって実現

しています。ただ、実際にやってみると、やはりメルカリ API を経由させるやり方ではマイクロサービス化の恩恵を最大限に引き出すことができず……(苦笑)。結果、米国と同様、メルカリ A P I を Gateway A PI でラップする方式に移行することになりました。実は英国チームでも同様の問題を抱えているため、こちらは日英で共用できるものにしたいと考えています。」(中島さん)なお、ここで米国チームの開発した Gateway API を採用しなかったのは、Protocol Buffers の導入にはアプリ側の強制アップデートが必要になるため。国内および英国チームでは従来アプリもそのまま使い続けられるよう、別の道を歩むことを選びました。こうした柔軟さを備えていることもメルカリの強さと言えるでしょう。「もちろん、米国チームも今後、さらにマイクロサービス化を進めていく予定です。それらは当然コンテナで作ることになりますから、Kubernetes のポテンシャルをフルに引き出せる GCP の比重は今まで以上に高くなっていくはず。その上で、今後は、これまで以上にマネージドで、かつ面倒を見なくていいプロダクトを活用していきたいと考えています。例えば、Cloud Functions のようなサーバーレステクノロジーなどには特に興味がありますね。ログを BigQuery に流すのに、今は Cloud Dataflow を使っていますが、それを置き換えられるのではないかと考えています。また、人気の高い Google App Engine にも注目しています。これがもっとフレキシブルに使えるようになれば、それこそ Kubernetes を置き換えるなんてことができるかもしれませんね。期待しています。」(名村さん)

ランタイムとして、今、最も優秀なものの 1 つですから、今後はこれでインフラを管理していきたいという気持ちがありました。しかし、それをマネージドで動かせるクラウドプラットフォームは当時、GCP しかなかったんです。」(名村さん)Kubernetes については、メルカリで SRE チームに所属する中島さんも次のように大絶賛しています。ちなみに SRE(Site Reliabil i ty Engineering) とは「サイト信頼性エンジニアリング」の略称で、メルカリではインフラチームがその活動範囲を拡大していくことを受けて改称。同社サービスの安定性と信頼性の向上に大きな貢献をしています。「Kubernetes は全てがマニフェストで管理されていて、しかもその

状態になるように自立的に動いてくれるのがありがたいですね。例えばコンテナが常に 3 つ動いていてほしいと定義すると、こちらが何も面倒を見なくても、その状態を保っていてくれます。」(中島さん)結果、中島さん曰く、「Kubernetes を導入したおかげで、インフラのことをほぼ何も考えずに開発をスタートできた」とのこと。それによって開発も順調に進み、ある機能(後述のサーチ機能)の開発において、通常なら 2 か月かかるところを 1 か月足らずで完成できたそうです。「メルカリ米国チームには専従のインフラエンジニアが存在しないのですが、それでも何とかやっていけているのは Kubernetes のおかげでしょう。」(名村さん)

マイクロサービス化の推進でさらなる効率化を目指す

GCP の詳細については、右記 URL もしくは QR コードからアクセスしていただくか、同ページ「お問い合わせ」よりお問い合わせください。© Copyright 2018 GoogleGoogle は、Google LLC の商標です。その他すべての社名および製品名は、それぞれ該当する企業の商標である可能性があります。

GCP Architecture(米国)Microservices Architecture(米国)

お問い合わせはこちらからhttps://goo.gl/CCZL78

Google Cloud Platform を活用することで、ビジネスの将来に注力できるようになります。インフラストラクチャの管理やサーバーのプロビジョニング、ネットワークの構成などに起因する負担を軽減することができます。つまり、イノベーターもプログラマーも、自分の本来の仕事に集中することができます。

Spinnaker

Gateway API

Mercari API

HTTP

search

personalization

offer

HTTP

gRPC

Google Cloud Load Balancing

Cloud CDN

Cloud Pub/Sub

BigQuery

Cloud Dataflow

Cloud Datastore

Google Kubernetes

Engine

Container Registry

Cloud Storage

Cloud Dataproc

Stackdriver Logging

Stackdriver Error

Reporting

Stackdriver Trace

Cloud Deployment

Manager

CircleCI