Yahoo! JAPAN MeetUp #8 （インフラ技術カンファレンス）LT②

>100 Views

January 30, 17

スライド概要

Yahoo!デベロッパーネットワーク

@ydnjp

スライド一覧

2023年10月からSpeaker Deckに移行しました。最新情報はこちらをご覧ください。 https://speakerdeck.com/lycorptech_jp

またはPlayer版

埋め込む »CMSなどでJSが使えない場合

関連スライド

深層学習による自然言語処理入門: word2vecからBERT, GPT-3まで

Yahoo!デベロッパーネットワーク 134.6K

ゼロから始める転移学習

Yahoo!デベロッパーネットワーク 75.3K

ヤフーにおける WebAuthn と Passkey の UX の紹介と考察 #idcon #fidcon

idcon fidcon

Yahoo!デベロッパーネットワーク 65K

OpenID Connectとネイティブアプリを取り巻く仕様と動向 Yahoo! JAPANの取り組み #openid #openid_tokyo

openid openid_tokyo

Yahoo!デベロッパーネットワーク 52.6K

運用業務とスクラムは本当に組み合わせにくいのか︖運用業務が大半を占めるプロダクト開発での試行錯誤

devsumi

Yahoo!デベロッパーネットワーク 28.1K

ヤフーのオンプレ機械学習基盤AIPFについて #ml_kubernetes

ml_kubernetes

Yahoo!デベロッパーネットワーク 26K

各ページのテキスト

OpenStack関連セッション OpenStack Summit Barcelona 2016 参加報告 Ansibleによるおっちょこちょいの運用自動化高橋拓也神尾皓立見祐介 4年間、OpenStackをデプロイしてみた(ry OpenStack on Kubernetes 木下裕太北田駿也 1 Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved.

目次 3 • 基礎知識編: OpenStackとは？ • • • OpenStack 1年目: 手動デプロイ、途中からコンピュートノードのChef化 OpenStack 2年目: コントローラ群のChef化、だがしかし、、 OpenStack 3年目: コントローラ群のAnsible化、だがしかし、、 • • OpenStack 4年目: コントローラ群のChef化再び OpenStack 今年: Kubernetes化 Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved.

OpenStackをデプロイするということ 1クラスタコントローラ群サーバ6~50台コンピュートノード群サーバ50 ~ 500台ダッシュボードダッシュボードコンピュートノードコンピュートノードコンピュートノードコンピュートノードコンピュートノードコンピュートノード認証サービス認証サービスディスクイメージサービスディスクイメージサービスボリュームサービスボリュームサービスネットワークサービスネットワークサービスコンピュートサービスコンピュートサービスデータベースデータベースメッセージングサービスメッセージングサービス etc etc 6 Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved. Virtual Machine Virtual Machine Virtual Machine Virtual Machine Virtual Machine

OpenStackをデプロイするということ 1クラスタコントローラ群サーバ6~50台コンピュートノード群サーバ50 ~ 500台ダッシュボードダッシュボードコンピュートノードコンピュートノードコンピュートノードコンピュートノードコンピュートノードコンピュートノード認証サービス認証サービスディスクイメージサービスディスクイメージサービスボリュームサービスボリュームサービスネットワークサービスネットワークサービスコンピュートサービスコンピュートサービスデータベースデータベースメッセージングサービスメッセージングサービス etc etc 7 Virtual Machine Virtual Machine Virtual Machine Virtual Machine Virtual Machine これら全てのサーバに、パッケージインストール、設定ファイル配置、デーモン起動、カーネル設定、監視設定などを行う Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved.

利用しているデプロイツール 8 • 手 • Chef • Ansible • • • • • • なんでもできる万能ツール心を込めて各サーバをセットアップする事ができる各サーバの構成情報はChefサーバに集約される各サーバはその構成情報に従ってセットアップされる各サーバの構成情報は手元ファイルで管理される SSHごしに各サーバのセットアップやオペレートができる Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved.

10.

11.

12.

コンピュートノードのChef化 CookbookやRole設定をアップロード ChefServer オペレータ ChefWorkstation Keystone 手動でセットアップ Glance Cinder Neutron Nova Horizon 12 その他クラスタ Compute Compute Compute Compute Compute Compute Compute Chefでセットアップ Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved. その他クラスタ

13.

14.

15.

16.

コントローラ群のChef化 CookbookやRole設定をアップロード ChefServer オペレータ ChefWorkstation コントローラ群のChef化 Keystone Glance Cinder Neutron Nova Horizon 16 その他クラスタ Compute Compute Compute Compute Compute Compute Compute Chefでセットアップ Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved. その他クラスタ

17.

18.

19.

2年目の教訓 • マイクロサービス群をChefでデプロイするのは大変 • デプロイ対象の種類が多く、設定すべ Ansible (チラッきRole、設定値も増えデプロイ方法が複雑化してしまった。 • 複雑化したデプロイフローは流行らない • デプロイフローも定義できると楽そう 19 Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved.

20.

21.

コントローラ群のAnsible化 CookbookやRole設定をアップロード ChefServer オペレータ ChefWorkstation コントローラ群のAnsible化 Keystone Glance Cinder Neutron Nova Horizon 21 その他クラスタ Compute Compute Compute Compute Compute Compute Compute Chefでセットアップ Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved. その他クラスタ

22.

23.

24.

3年目の教訓 • Ansibleでデプロイフローを制御 • マイクロサービス群でもデプロイが簡単 • しかし、Ansibleを実行するのは人なので、 Chef • • 実行し忘れによる変更漏れや、古い変更のデプロイなど、が発生 • デプロイはすべて自動化すべき 24 Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved. (チラッ

25.

26.

すべてをChef化し、定期デプロイへ GithubにPushされたCookbookやRoleを自動アップロード ChefServer Github オペレータ Jenkins その他クラスタステージング Keystone 定期的なテスト Glance Cinder Neutron Nova Horizon 26 Compute Compute Compute Compute Compute Compute Compute その他クラスタ初回デプロイ後は、定期的にデプロイされる Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved.

27.

Chef Before(2年前） After（現在） Role, CookBookの設計思想が変わった！ Before • • • 各マイクロサービスに対してそれぞれのRoleを定義変数もそれぞれのRoleで細かく定義＞設定が複雑化 After • • • 27 １クラスタに対して1Roleを定義（AnsibleのInventryFileに近い）変数はなるべく自動生成＞設定が簡略化 Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved.

28.

29.

30.

デプロイツール・まとめ • 手 • Chef • 30 • • • • なんでもできる万能ツール（人によってまちまち）デプロイできる台数に限界がある初回デプロイは少し大変初回デプロイ後の変更は自動化できる Ansible • • デプロイフローを組み立てられる実行し忘れや、実行間違いが怖い Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved.

31.

32.

33.

34.

ご清聴ありがとうございました！ 34 • 基礎知識編: OpenStackとは？ • • • OpenStack 1年目: 手動デプロイ、途中からコンピュートノードのChef化 OpenStack 2年目: コントローラ群のChef化、だがしかし、、 OpenStack 3年目: コントローラ群のAnsible化、だがしかし、、 • • OpenStack 4年目: コントローラ群のChef化再び OpenStack 今年: Kubernetes化 Copyright © 2017 Yahoo Japan Corporation. All Rights Reserved.

35.