DeepSeek应用与部署-DeepSeek培训课件.pptx

DeepSeek应用与部署

山东大学经济学院教授

山东大学国家治理研究院研究员

李铁岗

听听真我数字人讲DeepSeek

AIGC发展历程

ELIZAAlI寒冬1专家系统AI寒冬I统计方法NN再兴起198019801990s1990-2000s2006-

2014

生成式AI

生成式Al:使用生成式模型生成各类数据(语言、语音、图片、视频等)

oAttention:数据依存关系建模

oTransformer:数据生成的统一架构

oScalingLaws:数据学习、生成的扩展法则

oRLHF:生成与人类价值对齐的数据

o01/R1:生成式求解问题——生成复杂问题的答案(推理)

ENIAC图灵测试达特茅斯会议

194519501956

Attention2014

AGI….ASI

01/R1

2024

2024

RLHFIChatGPT2022

AIGC2014-2024

ScalingLaws|GPT-32020

Ta2sf17mer

AtteatloAllYouNood

If

4

t

LanguageModels

Trainediopredidthenextsordnasenlence:

Thecatischasingthe

dog5%

mouse70%

squirret20%

boy5%

house0%

自然语言处理：人类语言的智能化处理与分析，使计算机具备听、说、读、写、译等人所具备的语言能力

语言模型：自然语言统计建模，简单说，就是预测句子中的下一个单词是什么

自然语言处理与语言模型

—2019—2020_

2021

1-4

GPT₃55-8

9-10-

11-12

2022

\1-3

Ernie3,0

PanGu-α

Jurassic-1

2PLUG

NCPM-2LaMDA

Yuan1.0

AlphaCode

Chinchilla

GUL2

G

YaLM

4-6

7-10

O

G

G

水

Sparrow

Flan-T5

Flan-PaLM

Luminous

GLaMG

BLOOM

mTO

BLO0MZGalaticaA

OPT-IML0

MT-NLG

OPT0

CodeGeeXGPT-NeoX-20B

GLMTk-InstructAi2

AlexaTMaCohere

WeLM

0NLLB

-2023

ChatGPTS

StarCoder

CodeGen2ChatGLM

ⅢFalcon

GPaLM2

Pythia

Vicuna

PanGu-L

Bard

LLaMA

InternLME2Qwen

Mistral

Deepseek周Mixtral

E2Qwen2

DeepSeek-V2

ALLaMA3

MiniCPM

GGemma

AnthropicA

WebGPTSErnie3.0Titan

GopherO

TO

HyperCLOVANAVER

InstructGPT身

CodeGen一

大语言模型LLM:2018—2024

PubliclyAvailable

YuLan-Chat

1

1-6-7-12-2024-

GPT4S0LLaMA2

Zhaoetal.ASurveyofLargeLanguageModels.arXiv:2303.18223

GT5GGShard

CoderS—

GmTS

G

mpu

A21

kcbs

FLAN

PaLM

G

11-12.

InnovatorForScience

Industry

行业大模型

InnovatorForCulture

Art

文、图、乐、剧

Innovator

·参与发明和创造，增强人类的创造力和创新能力

InnovatorForSocial

智能角色交互体

人机协同与共生驾驭Al实现新式智能

Organization

·承担整个组织的功能，独立管理并执行复杂的操作

基座大模型