腾讯QQ1.4亿在线用户的技术挑战和架构演进之路PPT [附件下载]

JackJiang · 8 年前

前言

众所周知海量互联网服务能力是世界公认的技术难题。经过十多年的发展，腾讯在海量互联网服务方面已有不少技术积累。PPT中以QQ IM后台服务为例，重现了QQ在线用户从百万级到亿级的整个过程中遇到的技术挑战，并与与会者分享了众多在海量互联网后台服务研发运营方面不为人知的秘密。

内容简介

QQ现在面临7亿活跃账户，每日1.4亿用户同时在线。QQ过万台IM服务器和百亿级的关系链对数每天接受千亿级的服务请求考验。在这些苛刻的数字面前腾讯要保证99.99%的可用性。当然团队在QQ在线从10万到1.4亿的整个过程也经历了很多破折，同时从十万级、百万级、千万级最终到亿级在线腾讯也吸取了很多教训。这也说明了腾讯对海量服务的理解是长期积累的结果。

1第一代架构难以支持百万级在线

PPT中提到了腾讯的第一代架构。他表示当达到一百万在线时，老架构会有各方面的瓶颈出现。以接入服务器的内存为例，单个在线用户的存储量约为2KB，索引和在线状态50字节。好友表400个好友 * 5字节/好友等于2000字节。大致来说，2G内存只能支持一百万在线用户。与此同时，还有CPU/网卡包量和流量/交换机流量等瓶颈。其他服务器也面临类似情况。单台服务器支撑不下所有在线用户/注册用户。第一代架构已无以为继。

腾讯通平台部高级技术总监庄泗华认为十万级到百万级在线的关键技术是高性能和实现7乘24小时连续服务。实现高性能的关键因素包括绝不使用企业级解决方案、逻辑层多进程、万有一失的无锁设计、用户态IPC、MySQL分库分表以及好友表自写文件存储。而通过大系统小做、平滑重构、核心数据放入共享内存、接入层与逻辑层分离以及命令分发动态配置化可保证QQ后台实现7乘24小时连续服务。

2第二代架构难以支持千万级在线

同样第二代架构也存在一些问题。包括同步流量太大、状态同步服务器遇到单机瓶颈、所有在线用户的在线状态信息量太大、单台接入服务器存不下等问题。并且当在线数进一步增加，单台状态同步服务器不能满足需求，单台状态同步服务器支撑不了所有在线用户，单台接入服务器也支撑不了所有在线用户的在线状态信息。

通过深入分析，腾讯发现后台机器越来越多，单机死机/故障就会经常出现。同时每周新代码的发布也导致BUG不断出现，严重影响服务。监控机制的相对原始导致报警设置不全。最后当运维操作通过vim或者mysql进行时也非常容易失误。

腾讯通平台部高级技术总监庄泗华表示想要解决这些问题就需要对现有架构进行改造。这包括对外提供高可用性的服务、对内提供高可运维性的系统。同时灰度发布、运营监控、容灾以及运维自动化/半自动化也是解决千万级在线所面临问题的关键技术。

3亿级在线时代的到来

随着亿时代在线到来，腾讯也面临了新的问题。通过对原有系统持续完善已经很难支撑亿级在线。

庄泗华表示亿时代在线的四个关键特性：高性能、高可用性、高可运维性和高灵活性。由于互联网行业要求每个月出一个新版本。所以必须提供高灵活性的业务支持。作为硬件层面来说，高可运维性则需要物理架构详细到机架、并具备故障分析智能化、运维操作组件化和负载自动转移等特性的支持。而要保证系统的高性能，自写存储层是至关重要的因素。庄泗华还表示在线量每提升一个量级，技术难度也会提升一个量级。

最后庄泗华认为互联网行业有自己的技术规律，需要做自己的技术积累。而腾讯IM服务的未来战略就是全球化分布、高效率的研发以及监控告警的智能化。

PPT主讲者介绍

庄泗华 腾讯通平台部高级技术总监、腾讯T4级技术专家、腾讯软件开发通道分会会长。
中科院计算技术研究所硕士 2004年毕业加入腾讯，是腾讯培养出的第一位T4专家级毕业生。
一直致力于QQ IM后台海量服务系统的研发和运营工作。
负责过QQ群聊系统、QQ接入与基础通信服务系统等后台系统的研发和运营，见证了QQ在线从800万到1.4亿的整个过程。

PPT截图预览

PPT附件下载

腾讯IM架构：1亿在线背后的技术挑战_2020.pdf (1.49 MB , 下载次数: 2939 , 售价: 2 金币)

2 楼: fengge8ylfx · 8 年前

虽然对企鹅一点好感都没有，但是不得不承认qq架构的强悍。ppt里的内容还是有干货的，很好的分享！

3 楼: IMDeveloper · 8 年前

演讲的视频我找到地址了，绝对干货，感兴趣的看看：http://v.qq.com/cover/l/lsallcrrs0yjsgk.html

4 楼: JackJiang · 8 年前

引用：fengge8ylfx 发表于 2016-03-22 01:47
虽然对企鹅一点好感都没有，但是不得不承认qq架构的强悍。ppt里的内容还是有干货的，很好的分享！

大家都对某鹅好奇，这个演讲值得推荐。

5 楼: anykn · 8 年前

第一次听腾讯技术分享

6 楼: xiaobo · 8 年前

提示: 该帖被管理员或版主屏蔽

7 楼: pmm · 7 年前

mark

8 楼: IM_emily2017 · 7 年前

如果有视频就好了

9 楼: JackJiang · 7 年前

引用：IM_emily2017 发表于 2017-06-28 11:56
如果有视频就好了

这个演讲没有找到视频，抱歉

10 楼: desirelll · 7 年前

学习学习

11 楼: dusuijiang · 7 年前

学习学习

12 楼: cenji · 6 年前

学习，必须mark

13 楼: cenji · 6 年前

真的希望可以买金币，哈哈

14 楼: JackJiang · 6 年前

引用：cenji 发表于 2017-12-26 15:12
真的希望可以买金币，哈哈

暂时买不了

15 楼: kbenh · 6 年前

内容不错，学习。

16 楼: ImCkw · 6 年前

必须学习一下，谢谢分享

17 楼: 605682883 · 6 年前

厉害

18 楼: JamesWu · 6 年前

回复里提到的那个视频不见了。有么有哪位高人指点？

19 楼: JackJiang · 6 年前

引用：JamesWu 发表于 2018-11-06 16:29
回复里提到的那个视频不见了。有么有哪位高人指点？

是的，这个视频链接失效了，很多人分享技术只是一时的，很快就没了

20 楼: heyanyan · 5 年前

美呆呆

本文目录

前言