Shoji Shirotori
Data Engineer
Recruit Lifestyle Co., Ltd.
location_on Japan
Member since 5 years
Share
Shoji Shirotori
Specialises In (based on submitted proposals)
2013年にSIerに入社、インフラエンジニアとしてプライベートクラウドの開発・運用に従事。その後、2017年にリクルートライフスタイルに転職し、社内の共通分析基盤の開発を担当。開発だけでなく自らサービスのログ分析やデータ開発も行う。興味のある分野はコンテナ、サーバーレス、ETL、分散処理。
-
keyboard_arrow_down
データ分析基盤におけるOpsのためのDev with event driven + serverless
20 Mins
Case Study
Advanced
データ分析基盤の開発・運用において、サーバーレスやイベントドリブンなど新しいアーキテクチャを採用して、運用負荷の低減と機能開発への集中を行った事例をお話します。
リクルートライフスタイルでは、じゃらん、ホットペッパーをはじめ、大小30以上のサービスを展開しています。
データプラットフォームチームではすべてのサービスのデータが集まる分析基盤を有しており、サービス/ユーザーの分析のために無くてはならない存在となっています。そのためデータ分析基盤も、より高度な分析のための機能開発や安定的な運用が求められています。データ分析基盤のワークロードは安定運用、データ品質の確保、データ開発、ユーザビリティ向上など、一般的なアプリケーションとはかなり異なります。
さらにデータ量は年々指数関数的に増加しており、運用にかかる負荷も増加しています。そこで運用工数の増加率を限りなく抑えるため、イベントドリブン+サーバーレスという手段を取りました。
しかしこのアーキテクチャは、管理するサーバがなくなる代わりに従来のシステムとは異なる観点で運用を設計する必要がありました。サーバーレスなど新しいシステム、従来のシステムが入り交じるカオスな状況で、私たちのシステムのDevOpsのプラクティスはどう変わっていったのか、現場目線でお伝えします。
-
-
No more submissions exist.
