Data+AI一体架构的产品创新.pdf

Data+AI一体架构的产品创新

汤祯捷-阿里云-高级产品专家

DataFunCon#2024

Contents

目录

MaxCompute

Data+AI一体趋势AIforDW探索

MaxComputeMaxCompute

DataforAI能力大模型应用最佳实践

01Data+AI一体趋势

Data+AI市场主要趋势

DataForAIAIForDataWarehouse

通过AI对数据仓库进行AI调优：

•资源分配优化

依靠大数据平台大量、丰富的数据，提供用户更多、更简单的

关注点数据探索、业务场景以及快速模型构建的可能性，真正做到数•执行计划优化

•自动索引推荐

据普惠

•LLM+向量数据库

智能数据治理、智能成本优化、NL2SQL等

MaxCompute：MaxCompute：

交互式开发平台Notebook分层存储推荐、自动物化视图、智能成本优化等

核心产品能力分布式计算框架MaxFrame智能数仓：索引推荐、资源分配优化HBO、执行计划优化HBS、

开发镜像管理/自定义镜像管理与应用查询计划自动选择Lero等

MaxCompute+PAI一体化数据处理模型训练推理DataWorks：Copilot

Data+AI开发全生命周期

Data+AI开发是一个复杂的流程，涉及到数据分析、数据预处理、模型创建、模型训练、模型评估、模型预测、部署发布等多个流程，也涉及到

业务人员、数据工程师、数据分析师以及数据科学家等不同角色：

模型部署模型评估

对模型进行部署发布，从而实现模型将模型预测结果与实际结果进行对

流程化使用比，从而得到模型的准确率

Data+AI

数据分析模型训练

对数据进行初步分析，了解数为达成高识别率的目标，使用

据分布及字段指标情况大数据，找出最优配置参数的