サーバレスのページ一覧
サーバの仮想化
プロセス
プロセス
OS
OS
プロセス
プロセス
OS
OS
仮想マシンプロセス
仮想マシンプロセス
OS
仮想化
5
Copyright © 2018 Yahoo Japan Corporation. All Rights Reserved.
ハイパーバ...
サーバの仮想化
なぜ仮想化するのか？メリットは？
プロセス
プロセス
OS
OS
プロセス
プロセス
OS
OS
仮想マシンプロセス
仮想マシンプロセス
OS
仮想化
6
Copyright © 2018 Yahoo Japan Corporation....
サーバの仮想化
•
•
•
•
•
作成削除が早く、増減が容易
変化できる
リソース効率化
ノイジーネイバ
移動できる
？
仮想マシン
ヤフーのIaaS
13
Copyright © 2018 Yahoo Japan Corporation. All Rights Reserve...
サーバインフラ概要
Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.
サーバインフラのキーワードは
全体最適化 と OCP
Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.
サーバインフラ規模
• 担当メンバー
• ≒ 2チーム(約10人) + 業務委託メンバー
• 物理サーバ
• ≒100,000
• 機種
• ≒80
• パーツ点数
• 200,000～
Copyright 2018 Yahoo Japan Corporation. All Rights Reserved....
サーバチームタスク
構成検討
検証・比較
物理作業
保守
Copyright 2018 Yahoo Japan Corporation. All Rights Reserved.
分析
サーバ種類 – 19インチサーバ
• 伝統的な形状のサーバ
• 社内 80%以上のサーバが1U/2U Rack Mount Server
「http://e.huawei.com/jp/products/cloud-computing-dc/servers/rh-series/rh1288-v3」
「http://e.huawei...
サーバ種類 – OCPサーバ
• TechGiantが主導、新しいコンセプトのサーバ
• 社内 2017年以降
1,000
node以上導入
「http://www.wiwynn.com/english/product/type/details/48?ptype=28」
「http://www.opencompute.o...
サーバインフラを支えるパートナー
サーバインフラ視点では、
ヤフーは「ユーザ」の立場なので各分野の会社と協力をする。
• サーバベンダ
• サーバを提供する会社
• パーツサプライヤー
• サーバ内に組み込む「単...
サーバ台数
リアルサーバ
仮想サーバ
2013年 9月
2017年 2月
Co p yrig ht © 2 0 1 7
Yaho o Jap an Co rp o ratio n. All Rig hts Reserved .
19
サーバの増設が必要になったら？
WEB
FTP
CP
API
KVS
RDBMS
Co p yrig ht © 2 0 1 7
MQ
Yaho o Jap an Co rp o ratio n. All Rig hts Reserved .
FaaS
社外
26
サーバの増設が必要になったら？
WEB
FTP
CP
API
KVS
RDBMS
Co p yrig ht © 2 0 1 7
MQ
Yaho o Jap an Co rp o ratio n. All Rig hts Reserved .
FaaS
社外
27
サーバ追加時のBroker Idどうするか問題
・新規Brokerを追加するときにBroker Idの割り振り方をホスト
名にそって連番でつけたい、ただし、デフォルトの機能
(0.9~0.10系)を使うとずれる
ー＞ホスト名からBroker Id...
サーバリプレイス時Broker Id歯抜け問題
Broker Id歯抜け問題
・ホスト名から連番を設定していたため、新たに追加するとリ
プレイスしたホスト名とBroker Idが歯抜けになる
ー＞ホスト名を変更して対応しようとする...
サーバ台数
• 約220台
バックアップ用
• オンプレです
スレーブ
マスター
サーバ
スレーブ
サーバ
• 容量18TB
•
※ マスターのみカウント
サーバ構成比率
Copyright (C) 2015 Yahoo Japan Corporation. All Ri...
サーバのbinlog_formatはROWで
• binlog_format=ROW
•
•
•
•
タイプ Rows_event で記録
変更内容がバイナリで記録されている
バイナリから実際の値にデコードする関数がある
binlog eventsを使うにはこちらが前提...
サーバ構成・設定等
P19
• サーバ22台
•
•
•
•
SAS HDD 300GB*4
メモリ 48GB
Raid 0
ファイルシステム xfs
• Riak
•
•
•
•
バージョン 1.4.0
Ring size 256
Back end eleveldb
レプリケーション 3
Confidentia...
サーバ構成・設定等
P20
• サーバ22台
•
•
•
•
SAS HDD 300GB*4
メモリ 48GB
Raid 0
ファイルシステム xfs
ディスクI/Oのチューニング
• Riak
•
•
•
•
バージョン 1.4.0
Ring size 256
Back end eleveldb
レプ...
サーバ構成・設定等
P24
• サーバ22台
•
•
•
•
SAS HDD 300GB*4
メモリ 48GB
Raid 0
ファイルシステム xfs
• Riak
•
•
•
•
バージョン 1.4.0
Ring size 256
Back end eleveldb
レプリケーション 3
Confidentia...
サーバの追加
P35
1. 監視設定・sysctl 等の設定変更
2. Riak のインストール
3. Riak へサーバを追加する
riak-admin cluster join riak@xxx.xx.xx.xx
riak-admin cluster plan
riak-admin cluster commit
Confi...
サーバ投入時の帯域
P36
• 新クラスタ作成後、初めてデータを流したとき
• 既存クラスタにサーバを追加したとき
->帯域の使用量が多くなる
Transfer-limit でしぼる
riak-admin transfer-limit riak@xxx.xxx.xxx.x...
サーバダウン
P37
深夜に一台のサーバがハードウェア障害によりダウン
-> ダウンした時に接続していたクライアントが一度エラーを出力
<応急対応開始>
• 他のサーバから問題なく引かれていることを確認
• アラート...
サーバサイドでも何か、パ
フォーマンスを改善できる
所はないか？
26
Copyright © 2010 Yahoo Japan Corporation. All Rights Reserved. 無断引用・転載禁止