天穹数仓自治能力新实践.pdf

天穹数仓自治能力新实践

张功贯-腾讯科技-数据技术架构师

DataFunCon#2024

个人简介

张功贯（架构师）

ZookeeperSparkStarrocks

Storm10多年大数据技术工作积累，2021年加入职腾讯，

负责平台智能的数据架构工作，推动天穹AI4Data

KafkaHBase

FlumeSqoop的能力体系建设。OoziePresto

MapReduce

LogstashPulsar擅长领域HiveAzkabanImpala

Flink

HDFS

大数据生态技术大模型数据智能

DruidKylin

广告、有哪些信誉好的足球投注网站、推荐、平台自治

目录

1.大数据自治的背景

2.天穹大数据自治能力建设

3.天穹大数据自治的落地与进展

4.未来规划和展望

大数据自治涵盖的范畴

数据治理管理数据整个

生命周期

帮助解决问题

生

产

据

数

数据数据数据数据数据

采集接入计算存储应用数

据

整个过程，涉及到组件多，问题域大：质量、时效、研发等等使

用

业务发生问题

数

数据研发据