从探索到赋能：微众银行携手StarRocks 重塑数据分析 - 2024 StarRocks峰会.pdf

从探索到赋能：微众银行携手

StarRocks重塑数据分析

林俊锋

微众银行大数据工程师，StarRocks平台负责人

微众银行大数据平台套件

•一站式、全连通、金融级的数据应用开发管理套件

•独特中间件层设计，简化整体架构，提升连通性、复用性、可扩展性和治理管控能力

•解耦上层应用程序和底层引擎，简化新组件引入，降低开发运维成本

WeDataSphere–开源开放

•累计试用中/上生产公司达700+家，社区微信+QQ群用户总数达5000+人

•用户覆盖电信、金融、互联网、制造、零售、教育等各行各业，典型用户如电信天翼云、平安保险、交通银行、Boss直聘、蔚来汽车、华中科技大学国家高性能计算中心等

•政府用户案例含深圳市金融局银监局、交通部信息中心、航天八院等

01OLAP选型与StarRocks引入过程03StarRocks在行内大数据生态的应用

02StarRocks在行内业务场景的落地04未来规划方向与展望

01OLAP选型与StarRocks引入过程

背景与痛点

当前行内业务方有用户画像、人群圈选、BI交互看板、用户行为分析等大数据量场景的分析需求。业务方使用行内现有的计算引擎在上述分析场景下存在如下痛点问题：

1.BI交互看板在大数据量下的计算速度缓慢。

2.对较长历史周期的用户行为数据分析效率低下。

3.运营分析中查询频次较高的热数据无法使用预聚合提速。

4.查询无法同时满足高灵活性、大数据量、多维度、高时效性等多样化要求。

基于以上痛点，在现有的计算引擎下无法满足大数据量级下秒级响应速度和数据时效性的要求，因此需要引入新的高性能的OLAP计算引擎StarRocks来填补此处空白。

StarRocks引擎引入计划

下一步

2023.06

行内大面积推广使用，覆盖科技侧和

OLAP产品选型2023.122024.06业务侧的多业务场景，助力用户提效

各厂商方案对比，综合考虑选择验收阶段，基于RBAC的用户权限先进架构演进，降本增效

镜舟科技，进入行内测试阶段管控体系对接，生产试用阶段

7

26

1

3

5

4

2023.082024下半年

制定POC测试计划以及2024.04多部门推广使用，涉及存款和贷

报价给四个厂商