CSS艺术师眼中的流处理：Flink+Kafka延迟直降70%

　　去年一月份那会儿，后端突然跑过来跟我说他们把Flink+Kafka的延迟降了70%——我原以为他们在吹牛，结果看监控图的时候，那根线确实跟跳水似的往下掉。当时我正对着浏览器三十来个标签页发愁，构建进度条卡在百分之八十七，机箱风扇转得跟直升机似的，水杯底还结了一圈茶渍，根本没心思理他们。

文章配图，仅供参考

　　不过说真的，这波优化最狠的地方在于他们把消息堆积的逻辑改了。以前是消费者拉不到数据就死等，现在是直接丢给备用队列，等主队列空了再补。我原以为这种“拆东墙补西墙”的法子会出问题，结果看灰度环境的埋点数据，错误率反而降了——就像我上次把动画的will-change属性从auto改成transform，回流重绘的次数直接少了一半，虽然当时根本没搞懂原理，但效果确实立竿见影。

　　但最让我懵的是他们提到“优胜劣汰”这词。后端说现在Kafka的ISR（同步副本）机制会动态踢掉慢节点，就像浏览器渲染引擎会丢掉低优先级的任务。我听着听着就走神了——昨天设计稿又改了，按钮的圆角从8px变成12px，阴影从两层变成三层，切图时PS的导出选项卡卡了五分钟，外卖塑料袋还在旁边响个不停。等我回过神，他们已经在聊Flink的watermark机制了，说这玩意儿能解决乱序消息，就像CSS的z-index能解决层叠顺序——虽然我至今没搞明白watermark的具体算法，但z-index的坑我可踩过不少。

　　后来有次联调，我发现他们的新架构居然能实时反馈前端埋点。以前我写点击事件，得等十分钟才能看到数据，现在三秒内就能在Kafka里捞到。这感觉就像热更新终于不卡了——以前改个样式要等构建完刷新，现在保存文件立刻生效，虽然偶尔会因为缓存没刷而怀疑人生。不过话说回来，他们这种“实时性”也带来新问题：有次灰度环境的数据突然暴涨，结果发现是测试同学用脚本狂点按钮，把Kafka撑爆了——就像我上次写了个无限循环的CSS动画，把页面CPU干到100%，最后只能用transform: none强行停掉。

　　机箱风扇还在转，构建进度条终于跳到100%。我喝了口凉透的茶，突然想起他们说的“消费者组拆分”——这不就是前端模块化吗？把大组件拆成小组件，每个独立消费数据，出了问题也好定位。就像我上次把导航栏拆成三个独立组件，结果发现其中一个的hover样式漏写了，修复起来比以前快多了。不过后端显然没听懂这个类比，他们还在争论Flink的checkpoint间隔该设多少秒，就像我和设计争论按钮的padding该用8px还是10px——最后总是产品拍板，说“先这么着，后面再调”。

　　说到产品，他们最近又改需求了。本来要做个渐变背景的登录页，结果突然说要加粒子动画，还要求兼容IE11。我查了下兼容表，发现IE11连CSS变量都不支持，更别说transform的preserve-3d了。最后只能用canvas画，结果性能差得离谱，低端机上帧率掉到20。这让我特别怀念后端说的“优胜劣汰”——要是浏览器也能像Kafka那样，自动踢掉不支持新特性的旧版本，我们前端该少多少兼容代码啊？

　　但现实是，我们得给IE11写polyfill，给旧安卓机降级样式，就像后端得给旧版本的Kafka写兼容脚本。有次我实在忍不住，在后端群里吐槽：“你们就不能像我们前端一样，直接丢掉不支持新特性的用户吗？”结果他们回：“那你们前端怎么不丢掉IE11？”我竟无言以对——毕竟产品说“IE用户占5%呢”，就像后端说“旧Kafka集群还在跑关键业务”。

　　不过话说回来，Flink+Kafka的优化确实有效果。上周大促，流量涨了三倍，延迟居然没涨。我盯着监控图，突然觉得这和前端性能优化挺像的：都是找瓶颈，拆解，优化，然后验证效果。只不过后端优化的是数据流，我们优化的是渲染流——就像他们用CEP模式过滤无效消息，我用will-change提前告知浏览器要渲染什么。

　　但最让我后怕的是，如果他们没优化，大促那天延迟暴涨，导致埋点数据丢失，产品又要怪我们前端“没监控好”。就像上次页面白屏，明明是因为后端接口超时，结果产品先问“是不是你CSS写崩了？”——所以现在他们优化了，我也得给自己留条后路，比如多写点错误上报的埋点，或者把动画的帧率监控加上。

　　机箱风扇终于停了，水杯底的茶渍也干了。我合上笔记本，突然想起后端说的“动态扩容”——就像我们前端可以用代码分割按需加载，他们用K8s自动扩缩容。不过说到底，不管是前端还是后端，优化到最后都是在和“不确定性”较劲：用户用什么设备，网络怎么样，数据量多大，这些都是变量。就像我永远猜不准设计稿会改多少次，他们也猜不准流量会涨多少倍。

　　所以下次他们再跟我吹“延迟降70%”，我可能会问：“那兼容性呢？旧版本Flink能跑吗？消费者组拆了之后，监控是不是得重写？”——就像他们问我“这个动画在低端机上卡吗？IE11能显示吗？缓存策略怎么定？”一样。毕竟在这个“优胜劣汰”的世界里，谁都没法保证自己的代码永远不过时。

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!