OSC 東京 2012春

ソーシャルアプリを支える ホスティングの舞台裏

at+link ディベロッパーサポート部 文屋 宏

2

自己紹介

○氏名

文屋 宏（ぶんや ひろし）

Twitter：bun_hiroshi

○所属

株式会社リンク at+link 事業部 ディベロッパーサポート部

Twitter：@appliplatform（ハッシュタグ：#appliplatform）

○担当業務

プロジェクトマネジメント，広報活動，営業活動，ユーザサポート，

他社との協業，たまに現地作業，面白いネタ探し

○活動

日本 Red5 ユーザー会メンバー, tokyoLinuxStudy 企画

3

at+link とは

at+link の営業窓口

ディベロッパーサポート

◇開発者のためのサービス開発

◇開発者の悩み相談

◇新しい技術・面白い技術の

研究・サービス化

データセンター常駐

現場担当

マシン製造

24/365 サポート

4

ノベルティ

at+link ロゴ入りじゃがりこ

5

ノベルティ

「あっとりんく」 じゃありません（笑）

6

ノベルティ

優先度を最大に！

7

今回は、あえて資料に載せてない裏話を メインに語ります。 資料だけ見てる方、ごめんなさいm(_ _)m

8

at+link アプリプラットフォーム

9

アプリプラットフォームは、 ソーシャルアプリ向けのホスティングサービス

ということで、

10

ソーシャルアプリならではの特徴

・アクセス数が事前に読めない

・ヒットすると、とんでもないことになる

・ 5秒ルールなんてのがあるらしい・・・

・朝、昼、夜と３回ピークがある

・そのくせ、ド深夜（午前４時～５時）にも

アクセスがある

・少しの接続断も許されない・・・

・ゲームによって（作りによって）、サーバ

への負荷がまちまち

11

ソーシャルアプリのトラフィック

通勤・通学時

昼休み

夜間のピーク

12

こんなソーシャルアプリを

受け止めるために・・・

at+link アプリプラットフォーム

2010年11月17日提供開始！

13

こんなソーシャルアプリを

受け止めるために・・・

at+link アプリプラットフォーム

2010年11月17日提供開始！

かなり後発・・・ (;´Д ｀)

14

サービスリリースまでの経緯を ちょっと語ります

15

at+link アプリプラットフォーム コンセプト

16

at+link アプリプラットフォームのコンセプト

・初期費用が無料

・サーバの増減が簡単かつ迅速

・パフォーマンス、信頼性が高い

・コストが明確

クラウドのメリット

専用サーバのメリット

17

at+link アプリプラットフォームのコンセプト

・初期費用が無料

・サーバの増減が簡単かつ迅速

・転送料課金

・パフォーマンスがいまいち

・パフォーマンス、信頼性が高い

・コストが明確

・初期費用がかかる

・納期が遅い

クラウドのメリット

専用サーバのメリット

クラウドのデメリット

専用サーバのデメリット

18

at+link アプリプラットフォームのコンセプト

・初期費用が無料

・サーバの増減が簡単かつ迅速

・転送料課金

・パフォーマンスがいまいち

・パフォーマンス、信頼性が高い

・コストが明確

・初期費用がかかる

・納期が遅い

クラウドのメリット

専用サーバのメリット

クラウドのデメリット

専用サーバのデメリット

クラウドと専用サーバの“いいとこ取り”をしよう！！！

19

at+link アプリプラットフォームのコンセプト

・初期費用が無料

・サーバの増減が簡単かつ迅速

・転送料課金

・パフォーマンスがいまいち

・パフォーマンス、信頼性が高い

・コストが明確

・初期費用がかかる

・納期が遅い

クラウドのメリット

専用サーバのメリット

クラウドのデメリット

専用サーバのデメリット

クラウドと専用サーバの“いいとこ取り”をしよう！！！

後発だからこそ！後発で良かったかも？

20

at+link アプリプラットフォーム 特徴

21

at+link アプリプラットフォームの特徴

初期費用０円＆固定料金

ハイスペックサーバ＆冗長回線・LB/FW

基本契約は 5-DAY，サーバ追加は９０分以内

レスポンス監視

KVS サービス

ioDrive 搭載サーバ

Munin によるリソース監視

22

at+link アプリプラットフォーム 構成

23

at+link アプリプラットフォームの構成イメージ

Web Web Web Web DB Web

共用ファイアウォール

共用ロードバランサ

（冗長構成）

インターネット バックボーン 4Gbps

冗長構成

ロードバランサ

ファイアウォール

冗長構成が標準

Xeon 4コアの

ハイスペックマシン

アプリ公開後５日間

５台無償！！

ioDrive 搭載マシン

初期費用無償！

Web サーバ＋DB サーバのセット

基本契約

24

at+link アプリプラットフォームの構成イメージ

Web Web Web Web DB Web Web

共用ファイアウォール

共用ロードバランサ

（冗長構成）

インターネット バックボーン 4Gbps

冗長構成

ロードバランサ

ファイアウォール

冗長構成が標準 追加は90分以内！

Xeon 4コアの

ハイスペックマシン

アプリ公開後５日間

５台無償！！

ioDrive 搭載マシン

初期費用無償！

25

at+link アプリプラットフォームの構成イメージ

Cache Web Web Web Web DB Web Web

共用ファイアウォール

共用ロードバランサ

（冗長構成）

インターネット バックボーン 4Gbps

冗長構成

ロードバランサ

ファイアウォール

冗長構成が標準 追加は90分以内！

Xeon 4コアの

ハイスペックマシン

アプリ公開後５日間

５台無償！！

ioDrive 搭載マシン

初期費用無償！

okuyama

キャッシュサーバ

26

at+link アプリプラットフォームの構成イメージ

Cache Web Web Web Web DB Web Image Web

共用ファイアウォール

共用ロードバランサ

（冗長構成）

インターネット バックボーン 4Gbps

冗長構成

ロードバランサ

ファイアウォール

冗長構成が標準 追加は90分以内！

Xeon 4コアの

ハイスペックマシン

アプリ公開後５日間

５台無償！！

ioDrive 搭載マシン

初期費用無償！

okuyama

キャッシュサーバ

okuyama

画像ストレージ

27

at+link アプリプラットフォーム 管理画面

28

at+link アプリプラットフォームの管理画面

29

at+link アプリプラットフォームの管理画面

30

サーバ追加申請

31

at+link アプリプラットフォームの料金体系

ioDrive 搭載サーバも

日割りで追加可能！！

32

at+link アプリプラットフォームの料金体系

ioDrive 搭載サーバも

日割りで追加可能！！

一番売れてます！！

ioDrive 40台！！

33

at+link アプリプラットフォームのマシンスペック

Web/App サーバも Xeon 4コア

ioDrive 搭載 or 非搭載を選択可能

34

ioDrive について

35

ioDrive って何？

写真で見てみよう

36

ioDrive 写真①

ioDrive 本体

Fusion-io 社が提供する超高速半導体ストレージ

37

サーバ 本体

この辺に装着する

ioDrive 写真②

38

サーバ 本体 別の角度から

この辺に装着する

ioDrive 写真③

39

サーバ 本体 拡大！

ここに装着！

ioDrive 写真④

40

装着完了！

ioDrive 写真⑤

41

ioDrive の特徴

・桁違いの速さで I/O のボトルネックを解消できる

・ソーシャルゲームのデータベースとして容量は十分

・同時アクセスにも強いので、マシンを集約できる

・高い信頼性

・SSD に比べて寿命が長い

42

ioDrive の性能

43

ioDrive の性能①

ioDrive は同時接続に強い！

44

激しく latency 発生

loadaverage 8000 超

同時アクセス数をもっと増やしてみると・・・

ioDrive の性能②

45

SSD よりも速い！

ioDrive の性能③

46

つまり、ioDrive は、

・速い！

・大量の同時アクセスに強い！

⇒ DBサーバを集約できる！！

47

「ベンチマーク」について

ちょっと語ります

48

リソースモニタリングツール

Munin の紹介

49

munin.jp のサイト

50

実際に Munin の画面を見てみよう

51

というように、

Munin があればサーバにログイン

しなくても、リソース利用状況が

確認できます

52

分散型 KVS 「okuyama」の

サービス化

53

okuyama の長所

・単一障害点がない！

・設定を変えるだけで、様々な用途に使える！

（データ保存方式、一貫性レベルを選択可能）

・マシン性能を限界まで引き出せる！

サービス化する際に重視した点

54

okuyama キャッシュサーバ

55

okuyama キャッシュサーバ の構成

マスターノード

データノード

LVS

メイン

スタンバイ

VIP

データノード

データノード データノード

データノード データノード

データノード データノード

マスターノード LVS

クライアント

アクセス

クライアントは、VIP とクライアント毎に割り振られたポート番号へアクセス

56

okuyama キャッシュサーバ の構成

マスターノード

データノード

LVS

メイン

スタンバイ

VIP

データノード

データノード データノード

データノード データノード

データノード データノード

マスターノード LVS

クライアント

アクセス

障害！

57

okuyama キャッシュサーバ の構成

マスターノード

データノード

LVS

障害対応

メイン

VIP

データノード

データノード データノード

データノード データノード

データノード データノード

マスターノード LVS

クライアント

アクセス

58

okuyama キャッシュサーバ の構成

マスターノード

データノード

LVS

メイン

スタンバイ

VIP

データノード

データノード データノード

データノード データノード

データノード データノード

マスターノード LVS

クライアント

アクセス

59

okuyama キャッシュサーバ の構成

マスターノード

データノード

LVS

メイン

スタンバイ

VIP

データノード

データノード データノード

データノード データノード

データノード データノード

マスターノード LVS

クライアント

アクセス

障害！

60

okuyama キャッシュサーバ の構成

マスターノード

データノード

LVS

メイン

スタンバイ

VIP

データノード

データノード データノード

データノード データノード

データノード データノード

マスターノード LVS

クライアント

アクセス 障害対応

61

okuyama キャッシュサーバ の構成

マスターノード

データノード

LVS

メイン

スタンバイ

VIP

データノード

データノード データノード

データノード データノード

データノード データノード

マスターノード LVS

クライアント

アクセス

62

okuyama キャッシュサーバ の構成

マスターノード

データノード

LVS

メイン

スタンバイ

VIP

データノード

データノード データノード

データノード データノード

データノード データノード

マスターノード LVS

クライアント

アクセス

障害！

63

okuyama キャッシュサーバ の構成

マスターノード

データノード

LVS

メイン

スタンバイ

VIP

データノード

データノード データノード

データノード データノード

データノード データノード

マスターノード LVS

クライアント

アクセス

障害対応

64

okuyama キャッシュのメリット

・ ユーザでキャッシュサーバを用意する必要がない

・ サーバ運用開始と同時に接続可能

・ 「分散」を意識することすらない

・ 障害を意識しなくていい

・ コントロールパネルから無停止で容量変更可能

・ コントロールパネルで実使用量を可視化

・ 価格も手ごろ（初期無償、2GB で月額 18,000円）

・ KDL・LINK ２社のサポート体制

65

こんな方にオススメ

・ DB の負荷が高い

・ メモリが欲しいだけなのに、専用のサーバを

用意するのは嫌だ

・ memcached ・TokyoTyrant を使っているけど

障害が不安

・ memcached・TokyoTyrant を使っているけど

分散させたい

・ キャッシュの拡張性が欲しい

・ 管理画面で利用状況を確認したい

66

okuyama 画像ストレージ

67

okuyama 画像ストレージの構成

マスターノード データノード

LB

メイン

スタンバイ

ドメイン指定 LB

クライアント

アクセス

クライアントは、画像ストレージ用に指定したドメインへアクセス

マスターノード

マスターノード

okuyama 用

Web アプリ

okuyama 用

Web アプリ

okuyama 用

Web アプリ

ロードバランサ２重化

okuyama 用 Web アプリ、マスターノード 複数でロードバランシング

データノード３重化・ロードバランシング

データノード

データノード

68

いざ勝負！！

okuyama v.s. Apache

ブラウザで体感！

okuyama 画像ストレージのデモページ

69

okuyama v.s. Apache

http://demo.at-link.ad.jp

70

デモ環境

アプリプラットフォーム

demo.at-link.ad.jp

okuyama

Apache

okuyama v.s. Apache！

http://demo.at-link.ad.jp

okuyama 画像ストレージ

Apache サーバ

それぞれから画像を

300枚読み込む

（ファイルサイズ：60KB弱）

71

okuyama 画像ストレージのメリット

・ ユーザでイメージサーバを用意する必要がない

・ サーバ運用開始と同時に接続可能

・ 「分散」を意識することすらない

・ 障害を意識しなくていい

・ コントロールパネルから無停止で容量変更可能

・ コントロールパネルで実使用量を可視化

・ 価格も手ごろ（初期無償、100GB 当たり月額 15,000円）

・ KDL・LINK ２社のサポート体制

・ アプリと画像データのネットワークを分けられる

・ トラフィック転送量課金がない（大トラフィック案件は要相談・・・）

72

こんな方にオススメ

・ 画像合成のスピードを上げたい

・ 消せない画像がどんどん増えていく

・ ディスク容量が欲しいだけなのに、わざわざサーバを

借りるのは嫌だ

・ 利用状況を管理画面で確認したい

・ アプリと画像データのネットワークを分けたい

・ okuyama を使ってみたい

73

okuyama サービス

管理画面で使用状況確認

74

KVS サービス使用状況①

75

KVS サービス使用状況②

76

KVS サービス使用状況③

キャッシュ使用容量 画像ストレージ使用容量

77

okuyama サービスの開発について

ちょっと語ります

78

というわけで、

okuyama サービス化のきっかけは

OSC 2010 Kansai/Kobe でした

79

体制についてちょっと語ります

80

ディベロッパーサポート部でやっていること

・ 導入コンサル

・ ユーザサポート（高度な障害対応、改善提案）

・ ニーズに応えてサービス開発

・ 先端技術の研究

・ コミュニティ、講演活動

81

ディベロッパーサポート部の今後

・ ログストレージサービス

・ 複合イベント処理エンジンと連携した監視サービス

・ パブリッククラウドサービスとの連携

・ その他、おもしろそうなこと

82

○プロジェクトマネージャ １名

○エンジニア １名

メンバー募集中

ホスティング業界で革命を起こしたい方ぜひ！！

83

理想のプロジェクトマネージャ像（自己流）

・ 自分の守備範囲を固定しない

・ 自分以外のメンバーの力をフルに発揮させることを

考える

・ 成功はメンバーの力、失敗は自分の落ち度と考える

・ 矢面に立つ覚悟を持つ

・ 新しい技術にアンテナを張る

84

理想のエンジニア像

・ 技術が好き

・ 常に何か作りたいサービスがある

・ ドキュメント作成が得意

・ 新しい技術にアンテナを張る

・ 情報発信をする

85

イベント告知①

InfoTalk Spring Break 2012（NoSQL）

https://www.ospn.jp/osc2011-fall/modules/eguide/event.php?eid=46

会場：東京都港区虎ノ門2-6-4 虎ノ門11森ビル 1F

（株）ワークスアプリケーションズ カフェ（WALTZ）

日程：3/18 （日） 13:00～

12:00 開場

12:50 挨拶・概要等

13:00 ROMA 松江 宏樹 氏＝楽天

14:00 Cassandra 川中 真耶 氏＝Google

15:00 Cloudian ＝ジェミナイ・モバイル・テクノロジーズ

16:00 休憩等

16:30 okuyama 文屋 宏 氏＝株式会社リンク

17:30 Amazon DynamoDB 大谷 晋平 氏=Amazon Web Services

18:30 終了

19:00 懇親会

86

イベント告知②

at+link・IBM 共催セミナー ソーシャルアプリ運用セミナー

安定的かつ効率的なソーシャルアプリ運用のコツ

‐運用インフラ・データ解析・リアルタイム処理・監視の視点から徹底解説‐

会場：東京都渋谷区道玄坂1-12-1 渋谷マークシティウエスト18F IBM 新渋谷事業所

日程：2012年4月5日（木） 14:00～17:00

14:00～ 14:30 クラウドと専用サーバ 選択の分岐点 ―ioDrive搭載サーバでアプリが捗(はかど)る！

【講演】 at+link 営業部 石松 亮氏

14:30～ 15:00 データ分析ツールSPSSを活用したソーシャルアプリ業界のアクセスログ分析最前線 【講演】 日本アイ・ビー・エム株式会社 BA事業部 SPSSインサイドセールス部 佐々木 浩平氏

15:00～ 15:10 休憩

15:10～ 15:40 今この瞬間を掴まえる！リアルタイム処理がもたらすアプリケーションの変化 【講演】 株式会社神戸デジタル・ラボ 上級技術者 岩瀬 高博氏

15:40～ 16:00 イベント駆動型監視システムが変える、アプリ向け監視オペレーションの未来 ―開発担当者が語る、ここだけの話― 【講演】 at+link ディベロッパーサポート部 前佛 雅人氏

16:00～ 16:20 質問・意見交換

16:20～ 17:00 参加者交流会

87

今日一番言いたかったこと

88

一番言いたかったこと

「あっとりんく」 じゃありません（笑）

89

昨日

at+link ロゴ入りじゃがりこ120個！

90

今日15時

残りわずか・・・

91

ご清聴ありがとうございました！