虎扑网成立自04年，从一个默默无闻的个人主页发展到今天成为中国最大的体育垂直门户网站一共用了7年的时间。虎扑网不断发展壮大的过程也是其网站架构不断升级、应用不断丰富的过程，这个过程复杂、艰辛而又充满挑战。作为中型网站的代表，虎扑网的架构升级经验对所有正在发展中的中小型网站充满了借鉴和参考意义。带着种种的疑问，在这次话题分享中让我们拨云见日，虎扑网研发经理洪涛将会分享虎扑网的架构升级之路。

1. 虎扑网架构升级之路 虎扑网技术部研发经理：洪涛 2011-9

2. 大家好,我是：洪涛（Scourgen Hung）我来自：虎扑网（hoopCHINA.com）

4. 体育是感性的

5. 2004年的虎扑

6. 2011年的虎扑

7. 来自第三方的统计

8. 体育 虎扑网网站群

9. 虎扑网架构升级之路：2004 Web

10. 虎扑网架构升级之路：2005 Web+DB

11. 虎扑网架构升级之路：2006 Web DB

12. 虎扑网架构升级之路：2007 Web × 3 NFS LVS双线 NAT模式 DB

13. 虎扑网架构升级之路：2008 Web × 4 Web × 3 NFS LVS双线 DR模式 LVSDR模式 DB Master×1 DB Slave×3

14. 2004-2008经验总结 主要问题： 应用数量变多，逻辑变复杂 应用间频繁互相调用 部署过程复杂 主要解决办法： 数据库读写分离 用LVS进行内部和外部的流量负载均衡（从NAT升级为DR） 服务器安装双网卡，服务器见实现千兆互联 使用文件服务器集中管理程序源码，应用服务器远程挂载执行

15. 虎扑网架构升级之路：2009-分应用 Web ×8 Web ×8 NFS × 2双机房× 15个应用 LVS双线 DR模式 LVS DB Master×1 DB Slave×7 DB × 3

16. 虎扑网架构升级之路：2010 CDN × ？T Web×10 Web×10 NFS × 2 File×1 × 3机房× 30个应用 LVS双线 DR模式 LVS DB Master×1 Memcached × 10 DB Slave×7 TTServer × 3 DB × 10 Redis × 5

17. 2009-2010经验总结 主要问题： 难以应对突发流量 应用数量成倍增加,计算需求增长迅速 业务逻辑不断更新 主要解决办法： 部署CDN，分摊流量，提高访问速度 运用多种缓存技术: APC/FileCache/Memcached⋯⋯ 多种NoSQL相结合: Memcached/TTServer/Redis 用大量廉价服务器支撑中小型应用 部署双子星服务器 为应用拆分独立环境,应用和服务之间用API进行远程调用

18. 虎扑网架构升级之路：2011 CDN Web×30 Web×20 NFS×3 File×5 4机房80个应用 LVS双线 DR模式 LVS DB Master×1 Memcached × 40 RabbitMQ × 1 DB Slave×7 TTServer × 20 DB × 20 Redis × 10

19. 虎扑网架构升级之路：2011-Future 自建CDN Web×30 Web×20 NFS×3 机房硬件VPN加速 SAN 6个机房，分布式应用50个应用 硬件L4 硬件L4 DB Master×1 Memcached × 40 RabbitMQ × 2 DB Slave×7 TTServer × 20 DB × 20 Redis × 10

20. 2010-2011经验总结 CDN 数据量不大的时候效果明显 数据量大的时候费用持续增加，目前正在考虑自己实现 机房间数据传输 一些VPN设备有带宽加速功能，效果很不错 负载均衡 LVS在特定应用上表现很不错，但硬件L4更灵活、高效 NoSQL 针对各自特点应用在不同场景上才能获得最佳效果 MySQL xtraDB很好很强大 Master/Slave，冷热数据分离是增加数据库性能的最实用手段

21. 故事告一段落，让我们回到软件架构

22. 互联网产品/项目发展的三个阶段 种子孵化阶段： 概念验证(POC) 原型 早期阶段： 抢占市场 调整业务逻辑 优化用户体验 发展阶段： 高可用 平滑升级 性能 重构

23. 在不同阶段中，技术架构所遇到的挑战 种子孵化阶段 用最短时间生成可用的程序 早期阶段： 根据市场反馈及需求变更迅速调整业务逻辑 发展阶段： 保持系统运行稳定 可扩展性强，能够支撑应用的不断升级需求 提高系统整体性能 NonStop

24. 所以，在不同阶段对架构的需求可以总结为

25. 虎扑如何解决上述问题? 企业级开发框架 Symfony 轻量级SOA框架-消息队列系统 RabbitMQ

26. Symfony的特性、优缺点 特性： MVC ORM Propel / Doctrine Filter / Form Scaffolding（脚手架） Unit Test Debug Tool ⋯⋯ ⋯⋯ 优点： 大量的文档支持 大量插件支持 版本更新迅速 社区活跃 Don‘t Repeat Yourself 缺点： 相对其他PHP框架较为复杂 国内开发者不熟悉，案例少 学习曲线比较陡

27. 使用Symfony作为框架的应用 Yahoo Bookmarks：2000万用户 poppen.de：200万用户（截止2010年4月） phpBB4：使用Symfony2进行开发 SourceForce.jp：使用Symfony开发wiki系统 TED.com：使用Symfony开发 虎扑： 虎扑手机版（m.hoopchina.com） 虎扑游戏中心 虎扑约战 虎扑短评论 虎扑管理中心 亮乐（liangle.com） } ALL powered by 10个人月！

28. 《基于Symfony框架下的快速企业级应用开发》 时间： 明天下午 1点30到2点30 地点： 专场7 人物： 还是我

29. 消息队列在虎扑中的应用 先谈一下业务逻辑处理模型 什么是业务逻辑处理模型？ 设计模式 代码设计方法的精炼和抽象。 业务逻辑处理模型 业务架构设计方法的精炼和抽象。

30. 业务逻辑处理模型 理想中的业务逻辑处理模型的特性 高性能 满足处理日益增加的数据的能力 持久性 业务逻辑不因任何原因被中断 异步处理能力 业务逻辑与用户操作的解耦

31. 同步和异步处理业务逻辑时的差异 业务逻辑A 业务逻辑A 用户 业务逻辑B 用户 业务逻辑B 业务逻辑C 业务逻辑C

32. 举例：某图片上传服务

33. 示意图：图片上传逻辑的执行流程 1.压缩用户上传的图片至合适大小 2.生成图片缩略图 用户上传图片 3.通知用户的好友 4.发送碎碎念 5.人脸识别,自动添加为好友

34. 消息队列应用场景 任务数量大 群发邮件 逻辑复杂，处理速度慢 图像/视频处理 牵涉到大数据量的数据库操作 需要很高的可靠性 发送短信通知 充值 分布式架构 分布式数据传输

35. 虎扑网在众多消息队列框架中的选择 1.高稳定性 基于Erlang语言开发，Erlang是工业级语言，多用在电信，银行领域 2.高性能 “像几百挺机关枪同时向你扫射，你还要屹立不倒。”—iteye网友评论 3.支持多种语言 C/C++,C#,Java,PHP,Python,Erlang,Ruby⋯⋯ Intel I7 CPU测试环境中，单机IO综合处理能力就能够达到30k MPS

36. 虎扑网已经部署RabbitMQ至生产环境

37. 虎扑网已经部署在消息队列上的几个关键应用 发送碎碎念 降低页面延迟，优化用户体验 发送手机短消息 防止在与SP进行数据交互时产生延迟导致页面加载过慢 Google Analytics，向Google服务器发送统计信息 防止在传统GA统计方式中，用户在客户端直接请求Google服务器被墙的问题

38. 消息队列化所带来的额外的收益 某应用压力曲线图 升级前：平均压力0.6峰值达到2.7 某应用压力曲线图 升级后：平均压力0.6无明显峰值

39. 消息队列化所带来的额外的收益-减少峰值效应 降低硬件成本 性能需求从满足峰值降低到满足平均值 系统运维难度降低 系统负载变得平缓 更加合理利用资源 将一部分业务放在空闲时段处理 将闲置的计算资源充分利用起来

40. 虎扑网在消息队列化中的实践-监控进程的介绍 消费者线程 监控进程 消费者线程 生产者 RabbitMQ 消费者线程 RabbitMQ RabbitMQ 消费者线程 消费者线程

41. 在消息队列架构中部署动态监控进程的好处 增强业务逻辑处理能力 根据消息的数量增加动态增加消费线程 减少资源占用 根据消息的数量减少动态减少消费线程 方便监控/报警 控制关键业务处理能力

42. 虎扑在开源领域的实践 Memcached ： getOrLock：防止雪崩 PHP hcStrReplacement.so：快速替换关键字，比str_replace快300倍

43. 还有问题? Mail 公司:hongtao@hoopchina.com 个人:scourgen@gmail.com QQ 2468630 MSN scourgen@hotmail.com 新浪微博 @虎扑网洪涛 Twitter @scourgen

44. 谢谢