YJTC18 A-1 大規模サーバの戦略

102 Views

January 29, 18

スライド概要

Yahoo! JAPAN Tech Conference 2018 A-1 セッションのスライドです。

Yahoo!デベロッパーネットワーク

@ydnjp

スライド一覧

2023年10月からSpeaker Deckに移行しました。最新情報はこちらをご覧ください。 https://speakerdeck.com/lycorptech_jp

またはPlayer版

埋め込む »CMSなどでJSが使えない場合

関連スライド

深層学習による自然言語処理入門: word2vecからBERT, GPT-3まで

Yahoo!デベロッパーネットワーク 135.5K

ゼロから始める転移学習

Yahoo!デベロッパーネットワーク 75.5K

ヤフーにおける WebAuthn と Passkey の UX の紹介と考察 #idcon #fidcon

idcon fidcon

Yahoo!デベロッパーネットワーク 65.1K

OpenID Connectとネイティブアプリを取り巻く仕様と動向 Yahoo! JAPANの取り組み #openid #openid_tokyo

openid openid_tokyo

Yahoo!デベロッパーネットワーク 52.6K

運用業務とスクラムは本当に組み合わせにくいのか︖運用業務が大半を占めるプロダクト開発での試行錯誤

devsumi

Yahoo!デベロッパーネットワーク 28.3K

ヤフーのオンプレ機械学習基盤AIPFについて #ml_kubernetes

ml_kubernetes

Yahoo!デベロッパーネットワーク 26.1K

各ページのテキスト

10.

構成検討について • ヤフーでは大規模にサーバを導入する • 1台単位最適化するのではなく、全体で最適化されるように構成を検討する •例 • SSDの容量を80GB,120GB,…,900GB,1.6TB のようにラインナップ増やさない • 理由 • 管理コストの観点(在庫、潜在的バグ型番) Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.

11.

12.

分析について • 将来のサーバ選定、パーツ選定の準備 • メーカーサーバだと委任 • OCPだと全部確認 • 故障率減少、調達価格の適正値 • 保守力高める、価格を知る • 運用の効率化 • ログツール、CLI、BMC各種の運用性・容易性 => 分析を用いて将来の全体最適化につなげる Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.

13.

14.

「http://e.huawei.com/jp/products/cloud-computing-dc/servers/rh-series/rh1288-v3」 Copyright 2018 Yahoo Japan Corporation. All Rights Reserved. 「http://www.wiwynn.com/english/product/type/details/48?ptype=28」

15.

サーバ種類 – 19インチサーバ • 伝統的な形状のサーバ • 社内 80%以上のサーバが1U/2U Rack Mount Server 「http://e.huawei.com/jp/products/cloud-computing-dc/servers/rh-series/rh1288-v3」「http://e.huawei.com/jp/products/cloud-computing-dc/servers/rh-series/rh2288-v3」 Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.

16.

サーバ種類 – OCPサーバ • TechGiantが主導、新しいコンセプトのサーバ • 社内 2017年以降 1,000 node以上導入「http://www.wiwynn.com/english/product/type/details/48?ptype=28」「http://www.opencompute.org/products/lightning-nvme-jbof/」 Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.

17.

OCP (Open Compute Project) • Facebookが主導 • Google, Microsoftなども参加 • オープンソースハードウェア • HyperScaleの思想 • “Take control of your technology future” ユーザ(購入側)が主導できる「http://www.opencompute.org/」 Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.

http://www.opencompute.org/

18.

OCPサーバ様々なメリット • 物理運用 • フロントオペレーション、背面に移動必要なし時間がかからない、暑くない • パーツ選定 • サーバベンダの調達ポリシーに影響を受けない使いたいデバイスを組み込める • IPMI/SEL • 独自フォーマットがない、OCP準拠システム開発容易「http://e.huawei.com/jp/products/cloud-computing-dc/servers/pcie-ssd/es3000v3-nvme」 Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.

http://e.huawei.com/jp/products/cloud-computing-dc/servers/pcie-ssd/es3000v3-nvme

19.

20.

21.

サーバインフラを支えるパートナーサーバインフラ視点では、ヤフーは「ユーザ」の立場なので各分野の会社と協力をする。 • サーバベンダ • サーバを提供する会社 • パーツサプライヤー • サーバ内に組み込む「単位のパーツ」を提供する会社 • ディストリビューター • 調達、導入、保守などの「Hardware」以外を提供する会社 Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.

22.

23.

パートナーシップ事例 • ラッキングレールの提案 • ラッキング業務からナレッジ集約して形状を提案 • サーバ搭載パーツの提案 • 故障率やCLI容易性を考慮してパーツを提案「http://e.huawei.com/jp/products/cloud-computing-dc/servers/pcie-ssd/es3000v3-nvme」 Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.

http://e.huawei.com/jp/products/cloud-computing-dc/servers/pcie-ssd/es3000v3-nvme

24.

25.

将来のサーバインフラ • 自立したサーバインフラへ • “売る側”のポリシーに影響される • 現状と今後 • (現状)パーツ選定においてサーバベンダのパーツポリシーに依存 主体的にパーツを選定 • (現状)手厚いサーバサポートとサポートコスト =>過去事例や故障率の統計を活用して不要なサポート削減 Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.

26.

27.

まとめ • ヤフーは「大規模なサーバインフラ」を持っている • 大規模なので全体最適化が優先 + 統計的なデータも有効活用できる • OCPサーバ • 伝統的な19インチサーバと比較して様々メリット有 • サーバインフラを支える戦略的なパートナー企業がいる • サーバベンダ、パーツサプライヤー、ディストリビューターと協力 • 外部への依存をなくし自立したサーバインフラを目指す • 意思決定をヤフーが主体的にできる状態へ • 最新の取り組み => 「OCP」 Copyright 2018 Yahoo Japan Corporation. All Rights Reserved. 「http://www.wiwynn.com/english/product/type/details/48?ptype=28」

http://www.wiwynn.com/english/product/type/details/48?ptype=28

28.

29.