基于开源的领域模型落地实践-2024大模型软件工程技术.pdf

基于开源的领域模型落地实践

SECon2024全球软件工程技术大会：随着信息革命的飞速发展，软件已深入人类生活的方方面面，深刻而彻底地改造了人类世界。秉承“全球专家、卓越智慧”的宗旨，我们特邀50+全球软件领域的技术领袖以及一线实战专家，融合主题演讲、互动研讨、案例分享、高端培训等多种形式，共同探讨软件领域的前沿发展、最佳实践和创新应用，共同打造大师智慧+实践干货的技术盛宴。

杨青

度小满技术委员会执行主席、数据智能应用部总经理

杨青

度小满技术委员会执行主席、数据智能应用部总经理、

度小满AILab负责人

硕士毕业于清华大学计算机系，曾就职于百度、阿里巴巴，从事自然语言处理、有哪些信誉好的足球投注网站、推荐、

SECon2024全球软件工程技术大会：随着信息革命的飞速发展，软件已深入人类生活的方方面面，深刻而彻底地改造了人类世界。秉承“全球专家、卓越智慧”的宗旨，我们特邀50+全球软件领域的技术领袖以及一线实战专家，融合主题演讲、互动研讨、案例分享、高端培训等多种形式，共同探讨软件领域的前沿发展、最佳实践和创新应用，共同打造大师智慧+实践干货的技术盛宴。

大数据架构等相关方向的研发工作。

2018年年初加入度小满，组建数据智能部和AILab团队，从0到1构建度小满的智能引擎核心

算法，深耕计算机视觉、自然语言处理、图模型、机器学习、因果推断等技术领域，多篇文章

被EMNLP、ACL、CIKM等国际会议收录，“智能化征信解读中台”工程荣获吴文俊人工智能

科技进步奖。相关技术广泛应用于度小满营销、经营、风控、反欺诈全流程业务场景，为上千

万客户提供稳定、安全的金融服务。

目前，专注于人工智能在金融场景中的应用落地工作，基于度小满模型即服务（MaaS）的模

式积极探索生成式大语言模型的应用转化。于2023年年初带领团队发布千亿参数规模的中文

大语言模型“轩辕”。2023年9月，“轩辕-70B”大语言模型在C-Eval和CMMLU两大权威

榜单上位列所有开源模型榜首，目前已开源6B/13B/70B/176B全参数的模型体系，并著有

《大语言模型：原理与工程实践》一书。作者公众号：青哥谈AI

CONTENTS

1.开源崛起：大模型普惠时代来临

2.领域模型构建：融合开源优势，打造行业智能引擎

SECon2024全球软件工程技术大会：随着信息革命的飞速发展，软件已深入人类生活的方方面面，深刻而彻底地改造了人类世界。秉承“全球专家、卓越智慧”的宗旨，我们特邀50+全球软件领域的技术领袖以及一线实战专家，融合主题演讲、互动研讨、案例分享、高端培训等多种形式，共同探讨软件领域的前沿发展、最佳实践和创新应用，共同打造大师智慧+实践干货的技术盛宴。

3.领域模型落地：从Llama3到行业解决方案

4.领域模型价值创造：赋能、创新与变革

5.度小满轩辕大模型：跨越认知，走向AGI

PART01

SECon2024全球软件工程技术大会：随着信息革命的飞速发展，软件已深入人类生活的方方面面，深刻而彻底地改造了人类世界。秉承“全球专家、卓越智慧”的宗旨，我们特邀50+全球软件领域的技术领袖以及一线实战专家，融合主题演讲、互动研讨、案例分享、高端培训等多种形式，共同探讨软件领域的前沿发展、最佳实践和创新应用，共同打造大师智慧+实践干货的技术盛宴。

开源崛起：大模型普惠时代来临

供给侧：模型供应生态繁荣，ToB/ToC市场蓬勃发展

“百模大战”中大模型数量已达300+，模型供应商逐渐明确自身定位，满足特定市场需求