pixivのインフラになって2ヶ月がたったので最近の構成とかをかるく。

1. NSEG feat. Kosenconf-053nseg
2012-06-23
pixivのインフラになっ
て2ヶ月がたった
はるかさん / harukasan

2. 高専カンファレンス
の方から来ました！

3. はるかさん
・久留米高専制御情報工学科43期生
・NHK高専ロボコン
・ACM/ICPC
・筑波大学大学院卒業
・pixivのインフラ3ヶ月目

4. はるかさん
・Kosenconf-003tokyo
・Kosenconf-005kyushu
・Kosenconf-013salesio
・Kosenconf-014tokyo
・Kosenconf-020salesio2
・Kosenconf-031sciences
・Kosenconf-038tokyo
・Kosenconf-045tokyo
・Kosenconf-053nseg ←NEW!!

5. http://www.pixiv.net

7. ・イラストコミュニケーションサービス
・2007年9月10日にスタート
会員数
444400万人
作品数
2288,,000000,,000000
平均投稿数
ページビュー
2288,,000000//日
3300億PPVV//月

8. pixivのインフラ

9. ２拠点のハイブリッド
構成

10. 自作サーバー群
・AthlonX2 64 505e / Athlon II X4 605e
・B-28（ベニヤ）機
・1Gbps線 6本

11. データセンターサーバー群
・hp DL120G7（DB、TS、Front）
・hp DL165G7（AP、Solr）
・1Gbps線10本

12. アプリケーションまわりの構成
Internet
Internet
Front
Front
Front
Front
AP
AP
AP
AP
Slave
LVS
L3
Slave
L3
Slave
Master
Slave
Slave
KVS
旧社屋クラスタ
KVS
Slave
LVS
Slave
iDCクラスタ
・旧社屋とデータセンタの２つで捌いている
・２拠点間を１Gbpsの専用線で接続

13. 画像まわりの構成
Internet
Front
Cache
Cache
Dispatcher
L3
Front
Cache
Origin
Front
Dispatcher
Dispatcher
Original
Thumbnail
L3
Origin
Origin
Origin
旧社屋クラスタ
iDCクラスタ
・旧社屋に画像オリジンがある
・データセンタ側でキャッシュ（９５％）
・オリジナル、サムネイルの一部はiDCに

14. 画像まわりの構成
Internet
Front
Front
Front
Cache
Cache
Cache
Dispatcher
Dispatcher
Dispatcher
Original
Front: NGINX (RAM Cache)
Cache: TrafficServer (SSD Cache)
Dispatcher: NGINX
Thumbnail
L3
iDCクラスタ
・Front、Cache、Dispatcherを同居させて
ネットワークコストを下げる
・tmpfsを利用してRAM領域にキャッシュ
・画像集約サーバーにサムネイルを集約

15. 最近のプロダクト

17. ・pixivでマンガの試し読みができるサービス
・2012年6月5日にスタート
・Ruby on Rails 3.2 / Unicorn
・インフラの担当をやっている

18. 国際版

19. 国際版
・海外向けpixiv
・日本ではプレミアム会員になれば見られる
・Rails/ActiveResource + PHP5.3/Restful API
・2011年12月末にスタート
Internet
・Ruby on Rails 3.2 / Unicorn
・PHP5.3 / Apache
Front
Front
Rails
Rails
PHP
PHP
pixiv.netのインフラ

20. まとめ
・データセンターの依存度高まってきた
・Ruby on Railsのプロダクト増えてきた
・バックアップちゃんとする

21. pixivではエンジニアを募集しています！！
http://recruit.pixiv.net/

22. サマーインターン申し込み受付中です！
http://recruit.pixiv.net/