オンラインゲーム開発に欲しいプログラマーとその理由

～ドラゴンクエストXの障害事例から～

第６ビジネス・ディビジョン

ドラゴンクエストX テクニカルディレクター

青山公士

本セッション概要

・自己紹介

・オンラインゲーム開発に

欲しいプログラマー

・ドラゴンクエストXの障害事例

・まとめ

・自己紹介

・まとめ

メイン

・自己紹介

・まとめ

自己紹介

テン

ドラゴンクエストXテクニカルディレクター

技術責任者アオヤマコウジ

ドラゴンクエストＸ

オンライン

2012.8.2発売 2013.12.5発売 2015.4.30発売 2017.11.16発売

自己紹介

^.*[桃ボ].*$ メインプログラマー等

プレイオンラインディレクター

ドラゴンクエストX テクニカルディレクター

・自己紹介

・まとめ

オンラインゲーム開発に欲しいPG

いきなり結論！

オンラインゲーム/サービスの

開発経験◯年OR

運用経験◯年

もちろん開発経験として勘案しますが

運用経験◯年

オンライン経験としては

こちらのみです

以上！

ご清聴ありがとうございました！

・自己紹介

・まとめ

・LeastConnectionとRoundRobin

・NULLと""

・無駄な通信を無くして大問題

ドラゴンクエストXの障害事例

・NULLと""

LeastConnectionとRoundRobin

スケールアウトされた複数のサーバの

どれに繋ぐかを決めるアルゴリズム

• LeastConnection–接続数が最小のサーバに繋ぐ

• RoundRobin–順番に繋ぐ

結論

どちらも有りなら

RoundRobinを強く推奨します

• RoundRobin–何も考えず順番に繋ぐ

LeastConnection

接続数が最小のサーバに繋ぐ

LeastConnection

接続数が最小のサーバに繋ぐ

LeastConnection

で良さそうでは？

• RoundRobin–順番に繋ぐ

RoundRobin

ABCの順に繋ぐ

RoundRobin

ABCの順に繋ぐ

RoundRobin

RoundRobin でも

だいたいあってるけど…

やっぱり

LeastConnection

の方が良さそう？

LeastConnection振り分け係

LeastConnection

再接続

LeastConnection

接続数が最小(0)のサーバに繋ぐ

LeastConnection

接続数が最小(0)のサーバに繋ぐ

※全員障害発生

そして時は過ぎ…

LeastConnection

新接続数が減っても全員障害

ちなみに

RoundRobin

仮にこの状態になったとしても

RoundRobin

何も考えずにABCの順に繋ぐので障害は3回に1回

つまり

LeastConnection は

(本当にうまく作らないと)

障害が悪化します

LeastConnection は

(本当にうまく作らないと)

障害が悪化します

今回紹介したパターン以外にも偏りによる障害悪化の経験あり

RoundRobin でも

障害は起こりますが

悪化はしません

サーバ振り分けアルゴリズムの選定には

運用経験が重要だとわかる事例でした

・NULLと""

NULLと""

文字列が無い(文字列の場合)

長さ0の文字列

NULLと""

• getPlayerByID(NULL) – 問題無し

• getPlayerByID("")– 障害発生

NULLと""

""をNULLにしたら例外発生

という話ならわかりやすいですが

NULLと""

今回は通常なら問題にならない

NULLを""にしたら障害発生

というお話です

NULLと""

問題箇所

if( pID ) {for ( it = v.begin(); it != v.end(); ++it ) {

if ( cmpID( pID, (*it)->m_pID ) ) {:

NULLと""

問題箇所

cmpIDの中ではNULLチェックをしていませんが

NULLと""

問題箇所

(*it)->pIDには有効なデータが入っていることが保証されている

NULLと""

問題箇所

pIDのNULLチェックもバッチリ

(*it)->pIDには有効なデータが入っていることが保証されている

NULLと""

つまりpIDがNULLでも

問題はありません

NULLと""

この処理は高頻度で

呼ばれていました

NULLと""

問題箇所

if ( pID ) {for ( it = v.begin(); it != v.end(); ++it ) {

しかもその度に全プレイヤー数分ループするので高負荷です

NULLと""

しかし実際には

ほとんどpID=NULLで

呼ばれていました

NULLと""

問題箇所

if ( pID ) {for ( it = v.begin(); it != v.end(); ++it ) {

つまりほとんど動いていませんでした

NULLと""

それがpID=""になり

NULLと""

問題箇所

""はNULLではないので毎回処理されるように

NULLと""

問題箇所

しかも(*it)->pIDには有効なデータが入っているので""は見つからず毎回全プレイヤー数分ループ

NULLと""

これで接続中プレイヤー数が

一定以上になると

過負荷による障害発生です

NULLと""

これは

ある不具合を修正するために

別の担当者がNULLから""に

変えたことで発生しました

NULLと""

NULLから""への変更は

通常はあまり問題になりませんが

それが問題になった事例でした

・NULLと""

無駄な通信を無くして大問題

これは

実は必要な情報だった

という話ではありません

問題発生前

問題無さそうですが内部的には

問題発生前

サーバに更新後Gを要求

問題発生前

失敗(不具合)

問題発生前

時間をおいてリトライ

問題発生前

成功！

不具合による無駄な通信が

1回ありましたね

修正しました

一発で更新成功

大問題発生です

問題発生前

今まで効果音と同時に増えていたゴールドが

問題発覚後

効果音より前に増え

問題発覚後

効果音のタイミングでは増えなくなりました

今回の例では

1700G+100G→1800Gになるはずなのに

1700Gのままという不具合報告が

多数寄せられることになりました

サーバーログ上は

1600G+100G→1700G

で不具合はありません

しかし報告通りなら重大な不具合なため

調査は実施しました

個別調査のため

一件一件に時間がかかります

ドラゴンクエストX運営史上

プログラマーチームが

もっとも機能麻痺した

期間だったと思います

更に改善しました

問題改善後

効果音のタイミングを早めました！

問題改善後

不具合報告は激減しました

ほんのちょっとした不具合修正が

運営史上最悪の機能麻痺を招いた

事例でした

・自己紹介

・まとめ

まとめ

運営中のタイトルでは妥当と思える対応が

問題になることがあります

まとめ

「この改修が問題になるかも？」と思える経験値が必要です

つまり

まとめ

オンラインゲーム開発に欲しいのは

運用経験

まとめ

そして本セッションでどうしても覚えて帰っていただきたいことが

一点だけありましてそれは…

書籍執筆中

「ドラゴンクエストXを支える技術」(仮題・発売日未定)

オンラインゲーム開発に欲しいプログラマーとその理由 ·...

Documents

プログラマーのための色彩 #1

新人Javaプログラマーに贈る基礎知識 + α

序品法華會上...欲雨法語潤蒼生，欲吹法螺警迷情， P776,764, 790 100.深入法海浩瀚中欲擊法鼓應慧心，欲演法義明究竟。 P777-793 100.深入法海浩瀚中

オンラインゲームのインフラ検証、設計と運用...オンラインゲームのインフラ検証、設計と運用 @POLYGON PICTURES Tech Seminar ~映像制作パイプラインとアーティストのテクニック

デザイナーとプログラマーの仲良し大作戦

大学生における賞賛獲得欲求・拒否回避欲求と両親 …kiyou.lib.agu.ac.jp › pdf › kiyou_03F › 03_7_1F › 03_7_1_23.pdf大学生の賞賛獲得欲求・拒否回避欲求と両親への社会的勢力認知

【保存版】人間の欲求リスト1155168326aa59ae.lolipop.jp/needsReport.pdf · 2017-07-19 · 【保存版】人間の欲求リストいとうです、 “欲求の話”をします。

アメリカのオンラインゲーム日本のオンラインゲーム

韓国のオンラインゲーム産業現状と展望学籍番号： 117011235 氏名：榊原政男. はじめに・近年、オンラインゲーム産業が注目・韓国のオンラインゲーム産業が発展

Unity×HTMLで作るiPhone オンラインゲーム開発事例

オンラインゲームについて...オンラインゲームの分類 MO(Multiplayer Online)型少人数(2～100人)でリアルタイムなアクションを楽しむゲーム

トップガンを目指して - 九州大学（KYUSHU ... › qito › wp-content › uploads › ...キャリアパスを考えよう •単純なプログラマーになって欲しいのではない

姫路 IT 系勉強会 Vol.6 プログラミングコンテストという名のオンラインゲームがあるらしい

オンラインゲーム産業の変遷...の提供を開始し、Zyngaの「Farm Ville」等が大ヒットしソーシャルゲームが誕生するコミュニティ搭載型のオンラインゲームが一般的だったが

マズローの欲求階層理論とマーケティング・コンセ …...マズローの欲求階層理論とマーケティング・コンセプト（35）間は，欲求の階層（hierarchy

アイデミー 2019年3月18日（月）に新刊「独学プログラマー …

オンラインゲームの基礎知識 - JANOG · • オンラインゲーム ... 出ないと話にならない . 13 ちゃんとした画面の定義 ... • 遅延にシビアなゲームは、可能であれば、P2P

人工知能が拓くオンラインゲームの可能性（AOGC 2007）

【Unite 2017 Tokyo】ScriptableObjectを使ってプログラマーもアーティストも幸せになろう

プログラマーのための新千歳空港入門 #love_swift

オンラインゲーム開発に 欲しいプログラマーとその理由 ·...

オンラインゲーム開発に欲しいプログラマーとその理由 ·...