B站流量录制回放实践.pdf

B站流量录制回放实践

徐光耀｜B站资深测试开发工程师

01流量录制的背景

目

02一种通用的流量录制方案

C

O

N

T03录制方案演进

录E

N

T

S

04流量回放的场景落地

What：什么是流量录制？

流量录制

Why：为什么需要录制流量？

录制流量的价值/意义

接口回归测试DIFF测试性能测试

线上真实流量转化为接口测试项目重构优化，通过流量回放真实流量N倍回放用于压测，

用例，可提升测试质量到2个环境对比结果一致性性能报告更真实可信

问题复现/定位调试安全性测试数据mock

通过流量回放复现问题，帮助通过真实流量回放，检测安全记录真实流量，其返回信息用

问题定位和调试漏洞风险于数据mock

How：如何录制流量？

方案调研

goreplayvivo-月光宝盒携程-arex滴滴-写轮眼

非侵入代码

跨语言支持(Java)(Java)(Go)

多协议

无环境依赖

需要自研一种通用的方案：满足以上4个要求

方案探索——wireshark

v2.0.0v2.4.5v3.2.0v4.0.0

thrift:修复bug更新

thrift:首次支持gRPC:新特性gRPC:新特性

协议支持

v2.2.13v2.6.0v3.6.1v4.2.4

thrift:修复bug更新gRPC:修复bug更新

gRPC:首次支持thrift:更新协议支持

协议支持协议支持

B站采用的是gRPC协议

grpc解析验证可行性

解析出的信息

第一版全局架构设计

Part1-录制伴生

Paas上基于伴生容器实

现流量录制

Part2-管理平台

心跳配置同步/应用规则

管理/数据有哪些信誉好的足球投注网站展示

Part3-数据收集

流式处理写入ES

心跳机制