微信红包牛牛接龙三公金额尾数开挂辅助作弊软件——开挂作弊软件
公司名称：
联系人：李先生
移动电话：联系电话：
产品价格：面议
所属类别：体育用品
发布时间： 10:03
日腾讯新闻头条
日腾讯新闻头条
日腾讯新闻头条
[购买软件加客服微信：longfa7266
24小时热线：微信同号
& &30日消息，来自外媒消息，美国券商Cowen & Company的看穿师蒂莫西·阿库里（Timothy Arcuri）相信新一代iPhone将引爆苹果股票上涨，阿库里周一将苹果股票目标价上调至155美元，原因是苹果将在今年晚些时候发布iPhone 8。
& & & & & & & & & & & & & & & & & & &微信&&：longfa7266
& & & & & & & & & & & & & & & & & & & & & & & & & & & & & & & & & & & 24小时热线：微信同号
&& & & & 24小时热线：微信同号
如果你没有软件，那你一定是输...
本公司谨重许诺！产品名副正本！假一赔十！无效赔十倍！十天包换！一个月包退什么叫机会，当别人不知道的情况下，你知道了，当别人知道的情况下，你安装了，当别人安装的情况下，你成功了，这就是机会.....
微信红包尾数大小控制软件其实就是一款红包大小控制器&器，主要实现抢红包大小的控制和自己发出去的红包控制大小，支持微信、手机QQ、陌陌三种红包，可以说是大家的抢红包利器哦！
各种玩法及功能介绍 ：如下
&扫雷&避雷挂 &
多雷控制，多尾相加
各种尾数玩法
牛牛，色子控制
三包最佳尾数
分体式主机
198mm×Φ45mm
添加微信客服：
远程数码安装、现场看效果安装
射线防护板
&&要想赢别在考虑
24小时电话热线: longfa7266
24小时微信客服:
&&要想赢别在考虑
24小时电话热线: longfa7266
因有时客户多未及时加你，可来电咨询安排活络客服与你沟通，敬请见谅。
（特别声明：本公司没公众号，任何个人公众号都是假冒，请认准个人微信号，谨防公众号有木马病毒)
玩法扫雷100元10个包200元11个包控制金额尾数后1位.&&24小时在线微信咨询：longfa7266...添加我了解，非诚勿扰，谢谢！！！
微信红包扫雷软件。QQ红包牛牛软件。微信红包牛牛软件。随意设置修改牛牛.固定控制牛牛。微信红包控制尾数。固定数字.固定金额。控制扫雷牛牛控制尾数玩法。适合玩单双.****.扫雷.牛牛.三公尾数玩法.&24小时财富微信：&longfa7266&经理 & &
24小时热线：微信同号
& & & & & & & & & & & & & &&24小时咨询热线：longfa7266 &经理
& & & & & & & & & & & & & & & &&
& & & & & & & & & & & & & & & & & &24小时热线：微信同号
& & & & & & 如果你没有软件，那你一定是输...
1.随便调改红包三位尾数数字，也可调成随机号码，比如1，1，2，3，4，5，.....扫雷，牛牛，三公，接龙哪都不是事！！
2.开启此软件可以在时间帮你抢到别人的红包，扫雷，牛牛，三公，金花，接龙哪都不是事！！。
3.此软件可以帮你抢到数额较大的红包，扫雷，牛牛，三公，金花，接龙哪都不是事！！。
4软件可以调整微信里面摇色子点数，你想摇几便是几，扫雷，牛牛，三公，金花，接龙哪都不是事...
企业咨询微信：longfa7266 &经理 & & & & & &
24小时热线：微信同号
& & & & & & & & & & &
1、下载这个红包软件，打开。
2、在“设置——辅助功能——微信抢红包抢红包*”里，点击“开启”。
3、打开微信，在“设置——新消息提醒”里，前两个选项“接受新消息通知”和“通知显示消息详情”均勾选“开启”。（好多人就是这一步忘记做了）
4、打开某一个微信群组，点击右上角，往下拉，“消息免打扰”选项，勾选“关闭”。（也就是要把“群消息的提示保持在开启”的状态，这样才能触系统发底层接口。）
5、在微信抢红包抢红包*，勾选“开启自动抢红包”“牛牛金额调改”“接龙金额调改”“三公金额调改”等等。
6、如果你还没有成功，首先确认你是智能（包括苹果需越狱安卓直接可用），其次需要你的微信升级到版本。
企业咨询微信：longfa7266 &经理
24小时热线：微信同号
& & & & & & & & & & & & &&
& & & & & & & & & & & & & & & & 我们有24小时专业技术人员为你解答:！！！！！！！！
欢迎新老客户前来购买
—————————有用是咱们的许诺—————————
—————————客户挣钱是我们的使命—————————
本公司谨重许诺！产品名副正本！假一赔十！无效赔十倍！十天包换！一个月包退，安装即可使用
& &&& &我们有24小时专业技术人员为你解答！！！！！！！！
&&&最近有人冒充我公司网站信息，请认准我公司网站产品！
24小时电话热线: longfa7266
24小时微信客服:&longfa7266& 都可加我
& & & & & & & & & & & & & & & & & & & & & & & & & & &
24小时热线：微信同号
购买软件加客服微信：longfa7266
24小时热线：微信同号
&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&&
【*机系类】&【*机 干 扰 器原理】
【*机系类】 【手游*机软件原理】&
1、金蟾*、狼人*、李逵*、新*达人、大圣闹海、摇钱树、哪吒闹海、
2、新悟空闹海、笑傲江湖、大闹天宫2、西游降魔、大闹天宫、飞机大战。
3、破解手机手游软件，手机手游软件游戏上分，破解手游金蟾游戏*，破解手机手游摇钱树，破解手机电玩城，怎么破解手机手游，破解手机手游上分软件，
4、破解手机手游游戏上分，玩闲来麻将作方法，玩湖南麻将作方法，玩长沙麻将作方法，昭阳麻将软件作方法，
5、转转麻将**下载，闲来麻将**下载，湖南麻将**下载，长沙麻将**下载，呱呱麻将**，昭阳麻将**下载应有尽有。
20年来专业看穿破解器，*，干- 扰- 器，单挑王游戏机，百乐二号，彩金宏辉，五星单挑，208单挑王游戏机，真人单挑王游戏机，百乐3号，漂亮三姐妹，龙凤二八杠，牌九天地杠，1000炮*机，99炮*机，单线*机等各种*游戏机。客服微信：longfa7266
手机版手机*可以作吗&微信*达人手机版辅助挂-软件工作室&威信：longfa7266
亲朋棋牌手机版*-软件工作室欢迎你& 客服微信：longfa7266
*世界*辅助软件—APP工作室& 客服微信：longfa7266
《*达人软件教程》APP工作室 欢迎您& 客服微信：longfa7266
**游戏辅助工具&客服电话：longfa7266
24小时热线：微信同号
因客户咨询流量较大，快捷了解产品请添加客服微信：longfa7266
本公司专业帮你解决以下烦恼：
手机*一炮打死
手机*容易打死鱼
手机*自动*
手机*锁定*
手机*超级一炮
手机*无限火力
手机*一炮击命
来吧！！！本公司帮你解决一切烦恼。
牛元帅、啊啦牛、一定要牛、麻将作软件
购买各种斗牛辅助器请添加客服微信：longfa7266
1、胜利炸金花
2、下分炸金花
3、王冠炸金花上下分
4、山西大唐炸金花
5、开心炸金花
6、快乐炸金花看牌器辅助工具
7、天天诈金花工具官网
8、朋友圈炸金花
9、哈哈炸金花看穿挂
10、宝博炸金花辅助
11、多乐游戏炸金花
12、炫乐游戏*
13、至尊棋牌炸金花看牌
14、酷酷炸金花
15、趣ζ炸金花
16、奇奇炸金花最新辅助
17、畅玩炸金花辅助
18、酷爽炸金花
19、非凡炸金花辅助工具
20、闲闲扎金花辅助
21、百灵炸金花看牌
22、百灵大富豪看穿挂辅助工具
23、假日炸金花看穿辅助软件
24、趣赢三张牌
25、锐游三张牌**辅助
26、途游三张牌
27、真金炸金花看穿
28、真金斗地主
29、心跳炸金花
30、财神炸金花辅助
31、千王aaa看牌
32、多多炸金花
33、全民炸金花
34、梦幻炸金花看牌器
35、众人乐炸金花
36、布布炸金花辅助
37、壹柒碰胡辅助
38、叮叮碰胡软件
游戏用牌：一副字牌，共80张牌。
字牌的牌面都是中国汉字的数字，由如下几种牌组成：
小写“一”、“二”、“三”、“四”、“五”、“六”、“七”、“八”、“九”、“十”各四张；
大写“壹”、“贰”、“叁”、“肆”、“伍”、“”、“柒”、“捌”、“玖”、“拾”各四张。
2、牌的颜色
字牌的颜色分红二黑两种，也因地而异，在湖南地区，“二”、“七”、“十”和“贰”、“柒”、“拾”为红色，其余为黑色。
近日刚刚加盟J联赛，便吐槽中超职业化水平的波多尔斯基，再一次将自己推到了风口浪尖，在接受媒体采访时，这名曾经获得世界杯最佳新人奖，欧洲杯银靴奖的德国前国脚，毫不掩饰的称赞J联赛如何的专业，同时还不忘“踩一脚”隔壁正在如火如荼的中超联赛，甚至在采访中，他还将中超和J联赛的差距比为白天和黑夜，无疑这让中国球迷感到了不爽。。
1985年出生于波兰的波多尔斯基，由于2岁时随家人来到了德国，拿到了德国的护照，从小受足球运动员父亲的影响，波多尔斯基在七八岁时就已经是科隆俱乐部的一员。并且在年满18岁时，他获得了主教练的信任，并上演了德甲首秀。而司职前锋的波多尔斯基年少成名，在科隆出道的他，被誉为“科隆王子”
购买软件加客服微信：longfa7266 & & & & & & & &&
24小时热线：微信同号
对于央视解说陈刚发表的言论，网友们是态度不一，有的点赞，有的觉得陈刚炒作。
对此小编想说几句心里话：
首先王宝强婚变抢占头条这件事是王宝强想要的吗?我想不是吧。而陈刚老师却在微博中指责宝强是土鳖。请问王宝强哪里是土鳖，就因为他没文化，出生农村吗?
1、玩科乐麻将作方法
2、玩<span class="keylink" style="font-size:24">微乐麻将做 方法
3、玩长沙麻将做 方法
4、昭阳麻将软件做 方法转转麻将*下载）
5、闲来麻将*下载
6、<span class="keylink" style="font-size:24">来来麻将*下载
7、长沙麻将*下载
8、昭阳麻将*下载
9、来来麻将做 软件
10、皮皮麻将看牌做 器
11、皮皮麻将做 软件
12、友乐麻将破解版
13、专业销售闲来/土豪金/<span class="keylink" style="font-size:24">湖南/长沙/昭阳麻将版
购买软件加客服微信：longfa7266
1、下载这个**软件，打开。
2、在“设置——辅助功能——微信闲来**神器”里，点击“开启”。
3、打开微信，在“设置——新消息提醒”里，前两个选项“接受新消息通知”和“通知显示消息详情”均勾选“开启”。（好多人就是这一步忘记做了）
4、打开某一个微信群组，点击右上角，往下拉，“消息免打扰”选项，勾选“关闭”。（也就是要把“群消息的提示保持在开启”的状态，这样才能触系统发底层接口。）
5、保持手机
6、如果你还没有成功，首先确认你是智能手机（包括苹果安卓），其次需要你的微信升级到最新版本。
麻将做器是游戏熊猫四川麻将的一款辅助小工具。该游戏采用的是四川麻将的打法，在这火辣的夏日感受不一样的火辣体验，不管是血战到底还是血流成河统统应有尽有！一起来畅玩一下吧。
软件功能介绍
购买软件请咨询公司客服微信号 longfa7266
购买软件请咨询公司客服微信号&
3、乐淘娱乐熟人斗牛
4、大番薯斗牛
5、九方棋牌
6、征战娱乐
7、埋雷扫雷
8、牛大魔王
10、九人牛牛
11、六人牛牛
12、超级大厅棋牌
13、斗牛作辅助
14。大富豪辅助
15，西瓜娱乐辅助
1、火石互娱炸金花看牌辅助器
2、火石互娱开挂
3、火石互娱辅助
4、火石互娱牛牛
5、开心炸金花
6、长虹互娱牛牛开挂辅助
7、长虹互娱炸金花作器
8、长虹互娱斗地主开挂
9、长虹互娱炸金花看穿挂
10、西瓜互娱看穿挂
11、西瓜互娱开挂
12、西瓜互娱牛牛辅助
13、西瓜互娱开挂助手
14、西瓜互娱斗地主开挂
15、西瓜互娱炸金花作器
16、众棋互娱牛牛开挂辅助器助手
17、众棋互娱炸金花开挂
18、众棋互娱牛牛作器
19、九方棋牌斗牛辅助
20、九方棋牌斗牛作器
21、九方棋牌斗牛开挂辅助
22、百灵大富豪看穿挂辅助工具
23、假日炸金花看穿辅助软件
24、趣赢三张牌
25、锐游三张牌辅助
26、途游三张牌
27、真金炸金花看穿
28、真金斗地主
29、心跳炸金花
30、财神炸金花辅助
31、千王aaa看牌
32、多多炸金花
33、全民炸金花
34、梦幻炸金花看牌器
35、众人乐炸金花
36、布布炸金花辅助
37。征战六人牛牛
38。征战九人，十人牛牛辅助
39、牛元帅作软件
40、牛总管作软件
41、一定要牛软件
42，大富豪各种辅助
43，大番薯各种辅助
1.无视房间密码，直接进入
2.打开软件就可看穿玩家牌面
3.记牌功能
4.更改自己的牌型
6.最大加注
7.UDP即时通信
8.校检ASCLL码
9.遇网络延迟或当机则自动顺延时间
10.扫描同类作软件提示是否退出房间
11.入手好牌，五小牛，炸弹牛，五花牛，四炸，牛牛，牛九，牛八，牛七
1.房间密码超强破解，任何房间随意进出，不受限制
2.提供无限金币修改，免充值玩法，让你免费游戏
3.VIP玩法免费玩，体验VIP玩家高级玩法
4.具有看穿功能，让你知道对方底牌，游戏更畅快
购买软件请咨询公司客服【1】微信号 longfa7266
购买软件请咨询公司客服【2】微信号&&
根据客户要求专门定制软件
斗牛器辅助介绍：牛元帅，茶宛斗牛& 牛大魔王 老夫子牛牛& 牛牛斗牛& 百人斗牛& 欢乐斗牛 欢聚斗牛& 红牛斗牛& 通比斗牛& 二人斗牛& 365斗牛& 百姓斗牛& 酷爽炸金花& 棋牌大字牌& 棋牌悦战圈& 辉煌十三水& 福建十三水& 风赢十三水& 冠赢十三水& 大头十三水& 享游十三水& 掌心三十水& 赏金十三水& 同城游十三水& 大玩家十三水& 明牌十三水& 大家乐斗地主& 欢乐斗地主& 酷酷炸金花& 宝博炸金花& 天天炸金花& 万人炸金花& 奇奇炸金花& 哈哈炸金花& 齐齐乐炸金花& 金星棋牌炸金花& 多乐多金炸金花& 百姓斗牛各种器功能介绍：各地各种棋牌玩法辅助软件
牛总管；一定要牛；阿拉牛斗牛；老夫子 熟人牛牛 &牛大魔王 辅助软件
& & & & & & & & & & & & & & & & & & & & & &
巅峰斗牛作 器辅助下载—西西软件园1、下载这个软件，打开。
2、在“设置——辅助功能——点击“开启”。
3、打开微信，在“设置——新消息提醒”里，前两个选项“接受新消息通知”和“通知显示消息详情”均勾选“开启”。（好多人就是这一步忘记做了）
4、打开某一个微信群组，点击右上角，往下拉，“消息免打扰”选项，勾选“关闭”。（也就是要把“群消息的提示保持在开启”的状态，这样才能触系统发底层接口。）
5、如果你还没有成功，首先确认你是智能（包括苹果安卓），其次需要你的微信升级到版本。
& & & & & & &根据客户要求专门定制软件
购买软件请咨询公司客服【1】微信号 longfa7266
购买软件请咨询公司客服【2】微信号 &
购买软件加客服微信：longfa7266
牌数：去掉字牌、花牌，只留万、筒、条，共108张麻将牌。
定缺：游戏开始时，选择一门要打缺的花色来定缺，需要优先打完该花色牌。
出牌：不能吃牌，可碰牌、杠牌，刮风下雨直接获得奖励。
胡牌：手牌必须缺一门花色才能胡，结束时手牌没有?泵呕岜徊榛ㄖ恚?峙泼挥邢陆谢岜徊榻小?
血战到底一家胡牌游戏不结束，要一直打到三家胡，客服微信：longfa7266 否则打到抓完所有牌;
血流成河核心是单局可以胡多次，胡牌后继续摸牌打牌，**一直累加，一直打到所有牌抓完。
1.在线人数多，匹配速度也快；
2.真人实时对战玩法，陪伴您快乐每一天。
3.时尚简约的棋牌画面，清新休闲；胡牌清数
收费软件 非诚勿扰
（本公司只有个人微-信：longfa7266，企业&公众微-信均为诈欺）
24小时热线：微信同号
小提示：本信息描述文字和图片由用户自行上传发布，其真实性、合法性由发布人负责。
移动电话：
在线联系：
按排行字母分类：登录以解锁更多InfoQ新功能
获取更新并接收通知
给您喜爱的内容点赞
关注您喜爱的编辑与同行
966,690 九月 独立访问用户
语言 & 开发
架构 & 设计
文化 & 方法
您目前处于：
10亿红包从天而降，揭秘微信摇一摇背后的技术细节
10亿红包从天而降，揭秘微信摇一摇背后的技术细节
0&他的粉丝
0&他的粉丝
日. 估计阅读时间:
：Facebook、Snapchat、Tumblr等背后的核心技术
相关厂商内容
相关赞助商
红包系统由三部分组成：信息流、业务流和资金流。这三部分在组织架构上由不同的后台团队完成：信息流——微信后台，业务流——微信支付后台，资金流——财付通后台。
在平时，红包系统主要处理个人会话中以消息形式发出的红包。其中，信息流主要包括用户操作背后的请求通信和红包消息在不同用户和群中的流转；业务流是用户请求引发的包红包、抢红包和拆红包等的业务逻辑；资金流则是红包背后的资金转账和入账等流程。
红包系统在除夕活动时和平时的实现不大一样。在除夕活动时，除了个人红包外，红包系统还要处理由后台通过摇一摇集中下发的大量企业红包。这里边信息流的实现变化较大。
接下来简单介绍一下2016年除夕活动时的红包系统架构，包括三个方面：资源预下载、摇红包、拆红包。
(点击放大图像)
1 资源预下载
在除夕，用户通过摇一摇参与活动，可以摇到红包或其他活动页，这些页面需要用到很多图片、视频或H5页面等资源。在活动期间，参与用户多，对资源的请求量很大，如果都通过实时在线访问，服务器的网络带宽会面临巨大压力，基本无法支撑；另外，资源的尺寸比较大，下载到手机需要较长时间，用户体验也会很差。因此，我们采用预先下载的方式，在活动开始前几天把资源推送给客户端，客户端在需要使用时直接从本地加载。
2 摇/拆红包
除夕的摇一摇子系统是专门为活动定制的，按时间轴进行各项活动，这里边最重要、同时也是请求量最大的是摇红包。从需求上看，系统需要完成两个事：用户可以通过摇一摇抢到红包，红包金额可以入到用户的支付账户。在除夕，系统需要在很短时间内将几十亿个红包发放下去，对性能和可用性要求很高。考虑到涉及资金的业务逻辑比较复杂，还有很多数据库事务处理，耗时会比较长，于是我们将抢红包（信息流）和红包的账务逻辑（业务流和资金流）异步化。将前一部分处理流程尽可能设计得轻量，让用户可以很快抢到红包，然后再异步完成剩下的账务逻辑。
那么，抢红包阶段是怎样做到既轻量又可靠呢？
1）零RPC调用
在微信后台系统中，一般情况下客户端发起的请求都是通过接入服务转发给具体的业务服务处理的，会产生RPC调用。但对于摇一摇请求，我们将摇一摇逻辑直接嵌入接入服务中，接入服务可以直接处理摇一摇请求，派发红包。
2）零数据库存储
按一般的系统实现，用户看到的红包在系统中是数据库中的数据记录，抢红包就是找出可用的红包记录，将该记录标识为属于某个用户。在这种实现里，数据库是系统的瓶颈和主要成本开销。我们在这一过程完全不使用数据库，可以达到几个数量级的性能提升，同时可靠性有了更好的保障。
支付系统将所有需要下发的红包生成红包票据文件;
将红包票据文件拆分后放到每一个接入服务实例中；
接收到客户端发起摇一摇请求后，接入服务里的摇一摇逻辑拿出一个红包票据，在本地生成一个跟用户绑定的加密票据，下发给客户端；
客户端拿加密票据到后台拆红包，后台的红包简化服务通过本地计算即可验证红包，完成抢红包过程。
用户抢到红包后不会同步进行后续的账务处理，请求会被放入红包异步队列，再通过异步队列转给微信支付后台，由微信支付后台完成后续业务逻辑。
二 大规模集群中保证数据一致性
事实上网络分裂很难从根本上避免，我们在设计系统时都是假设网络分裂一定会出现，基于此思考应该采用什么方案保障系统在网络分裂时能正常运作。
我们的方案是在每个数据中心都建设三个独立的数据园区，可以做到在任意一个数据园区出现网络分裂等故障，甚至彻底变成园区孤岛后，另外两个数据园区可以无损承接整个数据中心的请求。
三园区容灾的关键就是数据一致性。我们需要做到在分裂出去的那个数据园区的数据在其他园区有个强一致的副本，这样请求落到其他两个园区后，可以无损完成服务，此外在故障园区恢复后，数据在所有园区还能自动保持强一致。微信后台实现了基于Quorum算法，对数据有强一致性保证的存储系统——KvSvr（这一存储系统另文介绍）。此外还有可以提供三园区强一致保证的可靠异步队列，这次就应用在这个红包系统中。前边提到的部署在接入服务的红包文件实际上也是可以实现三园区容灾的，我们在每台接入服务部署的红包文件都会在其他数据园区有个备份。在某个数据园区故障时，我们可以在其他数据园区发放故障园区的红包。
今年活动红包总量非常大，活动形式也更丰富，我们在以下方面做了优化。
1 服务性能
为提升各个服务模块的处理性能，我们通过压测和Profiler分析，发现了不少性能瓶颈点，做了大量优化。
2 业务支撑能力
支持更加复杂的业务场景，并在客户端和服务器都加入了很多可以后期灵活调整的预埋能力，以更好地服务产品运营。
不断提升系统可用性是我们一直努力的目标，以下5点很好地提高了系统的可用性。
1）系统容量评估与配额
对系统的容量需要有个准确的评估与验证，并结合业务设计合理的配额方案和降级方案，尽可能保障系统不会过载。例如，我们评估并验证完系统每秒最大拆红包量后，就可以在处理用户摇一摇请求时，限制系统每秒最大发放红包配额，这就间接保证了拆红包量不会超出处理能力。
2）过载保护
服务如果出现过载了，必须有能力自保，不被压垮，并且不扩散到系统其他的服务。我们在后台的服务框架层面具备通用的过载保护能力：服务如果处理不过来，就按请求的优先级尽快丢掉超出处理能力的请求，保证服务的有效输出；上游调用端在部分服务实例过载时，能自动做负载均衡调整，将请求调整到负载较低的服务实例中；上游调用端发现大部分服务实例都出现过载，也可以主动丢掉部分请求，减轻后端服务器的负担。
3）减少关键路径
减少核心用户体验所涉及的步骤和模块，集中力量保证关键路径的可用性，从而在整体上提高可用性。我们把活动红包的信息流和业务流进行异步化，就是基于这个考虑。跟用户核心体验相关的抢红包操作，在信息流中的接入服务、红包简化逻辑服务和红包异步队列（入队）这三个服务模块参与下即可完成。这三个服务模块是可以比较容易用较低成本就做到高可用的，可以较好地规避业务流和资金流中几十甚至上百个服务模块可能出现的风险。
4）监控指标
我们需要对系统的真实负载情况有准确及时的了解，就必须要有一套高效、可靠的监控系统，同时还要有一套有效的监控指标，监控指标不是越多越好，太多了反而会影响判断，必须要有能准确反映问题的几个核心指标。在我们系统里，这些核心指标一般在基础框架集成，根据经验来看，其中一个很有用的指标是服务的最终系统失败。我们把服务的失败分为两类：逻辑失败和系统失败。系统失败一般是服务暂时不可用导致，是可通过重试来自动解决的，如果请求重试若干次仍然为系统失败，就产生最终系统失败。通过最终系统失败通常可以快速定位到异常的服务，及时进行处置。
5）人工介入
我们在红包系统内预置了很多配置开关，当自动运作的过载保护无法发挥预期作用时，可以通过人工介入，使用这些保底的手动开关迅速降低负载、恢复服务。
三 技术创新
实际上，类似的这种活动用到的技术都是现成的，并不复杂。但为什么大家会觉得很难实现呢？主要是因为规模：用户和请求的并发规模越大，就越难在系统的成本和可用性上达到平衡，也就是说越难实现一个低运营成本、高服务可用性的系统。
在传统的应对这种有很大规模用户参与的活动的实现方案里，一般会采用在客户端过滤请求，以某种概率（基于时间或互动次数）发到服务器进行处理，这样服务器的压力可以大幅降低。
我们认为还可以做得更好，在这种活动的技术方案上可以有所突破——在保持低成本的前提下，全量处理用户的每次交互。这就大大降低了客户端的实现风险（因为客户端的更新和覆盖周期相对较长）。此外，服务器有了对用户交互有了全面的控制能力和灵活调整的能力。
这些能力对活动的运营是非常可贵的。可以让我们在活动过程中，各种复杂用户场景下，都能做到精细的调整，给了产品运营很大的灵活性，以保证活动效果和用户体验。看看下面两个例子。
我们可以精确控制和调整每次用户交互出现什么结果，曝光哪个赞助商；
活动过程中，有个很难预估的因素——参与人数。说不准参与的用户少了（或互动次数少了），导致红包很久都发不完？或者参与的用户多了（或互动次数多了），导致需要加快发放速度，更快速发完红包？
于是我们对这个技术方案做了全面的思考和设计，最终实现了现在这个系统，可以用很低的成本实现极高的性能和可用性，在除夕活动中得到了成功的应用。
四 服务降级方案
我们对摇一摇/朋友圈红包照片在的预热活动和的正式活动都做了详细的复盘。包括活动过程中各项业务数据是否符合预期，各个模块的表现是否符合预期等，并分析各种不符合预期表现的成因和解决措施。
在红包系统的信息流、业务流和资金流都有很多保障用户核心体验的降级方案。举几个信息流的降级方案的例子。
a） 如果某一个数据园区出现网络分裂等故障，完全不可用了，部署在那里的红包怎么发下去？
红包文件虽然在园区间有冗余存储，但基于性能和可用性考虑，我们并不打算在各园区间维护强一致的红包发放记录，做到记录级的“断点续发”，而是将红包文件按时段进行切分，降级为只做文件级的“断点续发”。在某个园区不可用时，使用降级方案后，故障园区当前发放时段的红包文件不会接着发放，仅保证下一时段的红包能通过其他园区正常发出去。
b）活动过程中，如果用户的交互量超过服务的处理能力了怎么办？
正如前面所述，我们很难准确估计参与用户量及互动次数。就本次活动而言，在系统设计之初，我们评估有2000万次/秒的峰值请求，并在系统最终实现和部署时预留了一定的余量，提供了评估值2.5倍（也就是5000万次/秒峰值请求）的系统处理能力，除夕当晚服务器处理请求峰值达到2500万次/秒，服务实际负载低于50%。但如果当时用户过多，互动过于火爆，到达后台的请求超过5000万次/秒，系统就会进入降级模式，客户端可以在服务器的控制下，减少请求，防止服务器过载。
c）红包发放速度过快，后端处理不过来怎么办？
正如前面所述，用户抢红包是在信息流完成的，完成后请求放到红包异步队列再转到业务流。如果领取红包请求量过大，队列会出现积压，红包的入账会出现延时，但不会导致用户请求失败。
类似的降级方案还有很多，每个环节都有若干个不同的降级方案，有些是针对业务专门设计的（如a和b），还有些是使用基础组件/服务/方案本身就具备的降级能力（如c）。这些方案都遵循着一个原则：降级时，尽可能保证用户的核心体验。
五 资金与红包准备的难点
除夕活动资金和红包准备的难点总体来说有以下4点。
1）红包的数量
由于招商的不确定性，最终投入微信摇企业红包的资金不可准确预估；
不同的商户其对品牌的曝光量的需求不同，有的要求多曝光，有的要求多关注，红包金额或大或小，数量则或多或少；
从准备到除夕当天，期间各种变化，活动方案变数很多。
红包的数量可能从几亿到几百亿变化，资金与红包的准备需要能够满足需求的巨大变化。
2）资金的就位
企业各行各业，营销经费的审批流程不尽相同，资金最终支付到位时间前后差异很大，甚至有些在除夕前一周才会最终敲定支付到账；
某些企业可能在最后阶段停止合作；
某些企业可能在最后阶段调整资金的使用方式。
以上情况会导致资金的到位时间不完全可控，本着尽可能多的资金能够投入到活动中的原则，希望可以尽可能压缩活动的准备时间，让更多的资金能够上车。
3）资金预算的配置方案（资金剧本）
按设想的活动方案，红包会分为三大类：图片红包、视频红包、品牌logo红包。活动方案较去年又有新的变化，特别是logo红包的认知度和接受度不确定，logo红包过度会否导致未领完而浪费资金，不容易确定logo红包的资金占比；
除夕当天的活动剧本可能会反复调整优化，红包时段的划分可能修改，不同时段的资金投放量可能变化。
大笔资金、大量的红包、复杂的活动方案、善变的商户要求，都可能反复调整，如果面对百亿量级的红包配置调整时，技术上如何实现缩短准备时间，支持方便的变化。
4）资金的安全
如何防止红包的金额被篡改；
如何防止未被领取的红包被入账给用户；
如何防止红包金额重复入账给用户；
如何防止机器被攻破产生了不存在的红包；
如何防止红包被不同用户重复领取；
如何在确保资金安全的情况下尽可能保证用户的到账体验（最好是实时或准实时到账）。
技术上必须做万无一失的准备，确保资金足够安全，活动顺利完成。
六 微信摇企业红包全过程
如果在除夕当天摇的过程中按前边提到的超级复杂的配置方案即时生成随机红包，这显然是风险齐高逻辑奇复杂的。对待只许成功不许失败的项目，主流程必须极简高效，所以这里全部的资金和红包数量都需要按方案规则提前切分和准备好。
将预生成好的红包数据（预红包数据）进行准确的部署，摇红包的资金和红包准备的整体流程方案有两个选择。
(点击放大图像)
方案一：预红包数据提供部署给微信的接入机和写入红包DB，摇红包过程由红包接入机控制红包的发放，拆红包时修改红包DB中的红包数据；
方案二：预红包数据只提供部署给微信接入机，摇红包过程由红包接入机控制红包的发放，拆红包直接Insert到红包DB。
第二个方案减少一次DB操作，如果是百亿量级的红包数据，可以极大减少数据导入、对账等活动准备时间，特别是方案需要变更时。
七 充足准备
1 对资金预算和资金剧本进行合理的建模
首先，面对如此大量的资金和复杂的资金剧本，如何准确高效地管理和控制逻辑呢？要杜绝傻大黑粗，我们需要一个优雅的解决方案——建模。
(点击放大图像)
对资金预算和资金剧本进行合理的建模，让模型涵盖、掌管、控制一切——让工具基于模型进行自动化的处理和校验，这里需要做的就是：
落地该模型的设计，让一切围着模型转；
按规定的格式文件导入预算和配置，并进行数据和逻辑合理性校验；
一切利用工具进行处理，资金的支付、退款、红包的随机生成和多商户随机打散、预红包文件分割、预红包数据的校验，减少人为过程导致的潜在失误；
优化红包随机算法和文件处理方法，将红包随机分割和多商户随机打散算法的n^2时间复杂度优化n，压测30亿红包的生成时间为2~3小时，极大缩减准备时间，增加方案调整的回旋时间，可以让更多的资金上车。
其次，前边提到方案有如此多的变数、调整、变更，如何支持？还是回归模型，建模时就要考虑支持同样的预算多套资金配置方案。
(点击放大图像)
同样的资金预算，同时或依次生成多套预红包数据文件，提前做多手准备，方便方案变更。
再次，如此大量的资金就意味着如此大量的诱惑，会不会出问题呢？
方案预红包数据未提前落地DB，导致拆红包时缺少一次红包数据有效性的检验；
预红包数据存放在微信接入机上，存在被攻陷获取或篡改的可能；
红包数据在传输的过程中存在系统异常或恶意攻击，导致数据错误特别是金额错误的可能；
系统内部可能存在恶意人员直接调用拆红包的接口写入不存在的红包。
墨菲定律要求我们必须重视以上安全隐患，解决方案就是加密——对预红包数据进行加密，加密库和解密库独立维护保证密钥不被泄漏，通过工具生成预红包数据时用密钥进行加密，预红包数据在部署存储和传输的过程中保持加密状态，仅在拆红包的逻辑中编译二进制紧密库进行解密。
同时，鸡蛋也不能放在一个篮子里，为了控制密钥泄漏导致的影响，确保资金风险可控，整个预生成的红包数据可能分别使用了几百到几千个密钥进行加密，一个密钥加密的红包资金量在20~30万。解密库还需要能设置密钥ID的白名单和黑名单，确保未被使用的密钥不能被利用，确认泄漏的密钥可以进行拦截。
2 极限压缩
如果是百亿个红包，那么产生预红包数据文件的大小不经过压缩是非常恐怖的，传输部署几百GB或几TB的数据是很艰苦的，一旦发生调整变更会变得非常艰难，所以需要对数据进行极限的压缩。
对于支付单号、商户号、红包账户等信息，由工具导成配置文件，配置到拆红包逻辑中，加密的红包数据中仅用一个批次ID表达；
拆分红包ID，部分分段同样转为ID，解密库解密后利用配置进行还原；
加密部分（Ticket）：红包ID、金额、批次ID、密钥ID，压缩到16字节；
单条红包记录二进制表达，压缩到26字节。
上面所有都做到就安全了么？真的就有人写了一个不存在红包进来会怎样？是否还有其他未考虑到的潜在风险？所以我们需要一个兜底——对账，把一切都要对清楚才放心。
对账后再入账的时效在30~60分钟，会造成不好的用户体验。为了提升用户体验，将大额的预红包数据（占比10%左右）导入KV（高速缓存），拆红包时进行即时校验，即时进行转账入账，未命中KV的红包则等待对账后异步完成入账。
资金配置与资金预算要总分对账；
红包数据文件与资金剧本进行总分对账；
红包数据进行全局去重验证；
红包数据进行解密验证和金额验证；
如果密钥泄漏红包金额等被篡改，兜底要进行红包DB中已拆红包数据与预红包数据的对账后，才能实际进行转账入账。
未来我们可能还继续会有类似的活动，虽然我们已经有了一个经过实践的可复用的技术方案，接下来我们希望能够继续优化，并实现一些可复用的模块和服务，可以快速应用到下一次活动或者其他业务场景中。例如，我们在2015年春节首次完成除夕活动后，就把其中的资源预下载系统进行了完善和通用化，随后应用在多个业务场景和这次的2016年除夕活动中。未来可以有更多类似的系统和服务可以被复用和通用化。
张文瑞 一直从事后台系统设计开发，早期涉足传统行业软件，后投身互联网。作为微信最早的后台开发者之一，见证了微信从零开始到逐渐发展壮大的过程。
王鹏程 微信支付商户系统开发组组长，专家工程师。2008年加入腾讯，6年的电商经验，做过c2c、b2b2c、b2c及erp，2年第三方支付开发经验。
感谢对本文的审校。
给InfoQ中文站投稿或者参与内容翻译工作，请邮件至。也欢迎大家通过新浪微博（，），微信（微信号：）关注我们。
Author Contacted
语言 & 开发
38 他的粉丝
架构 & 设计
198 他的粉丝
0 他的粉丝
0 他的粉丝
微信技术专栏
1 他的粉丝
0 他的粉丝
告诉我们您的想法
允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p
当有人回复此评论时请E-mail通知我
允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p
当有人回复此评论时请E-mail通知我
允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p
当有人回复此评论时请E-mail通知我
赞助商链接
InfoQ每周精要
订阅InfoQ每周精要，加入拥有25万多名资深开发者的庞大技术社区。
架构 & 设计
文化 & 方法
<及所有内容，版权所有 &#169;
C4Media Inc.
服务器由 提供, 我们最信赖的ISP伙伴。
北京创新网媒广告有限公司
京ICP备号-7
找回密码....
InfoQ账号使用的E-mail
关注你最喜爱的话题和作者
快速浏览网站内你所感兴趣话题的精选内容。
内容自由定制
选择想要阅读的主题和喜爱的作者定制自己的新闻源。
设置通知机制以获取内容更新对您而言是否重要
注意：如果要修改您的邮箱，我们将会发送确认邮件到您原来的邮箱。
使用现有的公司名称
修改公司名称为：
公司性质：
使用现有的公司性质
修改公司性质为:
使用现有的公司规模
修改公司规模为：
使用现在的国家
使用现在的省份
Subscribe to our newsletter?
Subscribe to our industry email notices?
我们发现您在使用ad blocker。
我们理解您使用ad blocker的初衷，但为了保证InfoQ能够继续以免费方式为您服务，我们需要您的支持。InfoQ绝不会在未经您许可的情况下将您的数据提供给第三方。我们仅将其用于向读者发送相关广告内容。请您将InfoQ添加至白名单，感谢您的理解与支持。