【收藏必备】大模型应用落地指南:从Prompt到Multi-Agent的技术演进之路

本文详解大语言模型应用落地的四大演进阶段:Prompt、Chain编排、Agent和Multi-Agent。从最初的手动提示词工程,到固定流程编排,再到LLM自主规划,最后到多智能体协作,展示了自动化程度不断提升的过程。各阶段均有其目标、原理、优缺点和应用场景,实现了从"+AI"到"AI+"的转变,并介绍了Agent的具体实现方法,为开发者提供了全面的技术指南。

1、Agent是什么?

在大语言模型领域中,Agent是指一种能够自主理解、规划决策、执行复杂任务的智能体。它具备感知、记忆、规划和使用工具的能力,能够在无人干预的情况下,根据环境信息自主决策和控制行为。

而在技术角度来看,Agent是一种增强大模型能力的技术方案路径。它使LLM能够在特定任务或领域中高智能、稳定、自主地进行学习、改进和完成目标。

在基本了解了Agent的概念后,我们进一步了解Agent的由来,理解它的出现解决了什么问题。

2、为什么会有Agent出现?

Agent是随着LLM应用研究的探索而发展起来的。它的出现是为了提高LLM在应用场景中的能力,最主要的体现是在于智能化以及自动化能力的提升。为了具体说明,目前我们可以依据自动化的程度,对LLM应用进行4个层级的划分:

  1. prompt阶段:人类手动补充相关上下文,书写提示词进行提问,来获取llm的回答;
  2. chain编排阶段:通过固定的流程编排,让LLM可以和多种工具组合起来,按流水线执行逻辑流程,从而处理特定的任务;
  3. Agent阶段:通过设定好提示词,准备好工具,由Agent自动化规划流程,完成目标。
  4. Multi-Agent阶段:Multi-Agent实际上算是Agent的一个子集,它用于处理单Agent工作量过重,导致容易陷入幻觉、死循环等问题;

大概了解Agent的自动化能力分层以后,我们再进一步的讲解,每一个阶段都做了什么,又有什么问题。

2.1 Prompt阶段

这个阶段是人类直接书写提示词提问,获取回答。这是LLM应用最原始的用法,此时prompt是一个“编程语言”,大家都在想办法学会这门语言,从而激活LLM更强的智能。这个阶段的代表作是角色扮演类提示词。但是,这个阶段只是停留在了更好地对话的阶段,最终的效果是沉淀了chat类应用的“说明书”。

简单来说,这一阶段可以用以下6点概括:

  1. 目标:挖掘LLM的智能;
  2. 原理:提示词可以引导LLM激活特定参数(概率分布),使其在特定领域上的智能可以被更充分的发挥出来。
  3. 核心流程:人 --> 提示词 (每一个任务得写一份提示词)
  4. 优点:让LLM充分发挥自身在训练阶段获取的知识;
  5. 缺点:仅仅停留在更好地和LLM对话的领域中,无法和其他领域结合;
  6. 应用:各种提示词角色应用市场,以及开源项目,如:GPTs(https://github.com/linexjlin/GPTs)

Prompt阶段让人们意识到了LLM的智能,但是并没有找到应用的场景,直到有人发现了它可以输出规范的json格式。于是,大家开始探索工具和LLM的结合,也就来到了下一阶段Chain编排阶段。

2.2 Chain编排阶段

chain阶段主要是通过固定的流程编排,让LLM可以和多种工具组合起来,按流水线串联执行以处理特定的问题。朴素RAG是典型的例子:它先把用户的问题去向量数据库检索相关的背景,而后一起嵌入到提示词中。此时,不再需要人类手动去拼接问题的背景到提示词了,可以交给流水线去自动化处理。

但是,chain模式下LLM应用基本是固定的流程编排。这样固定的流程有其优势:可以保持程序的稳定性。但是,这也限制了LLM发挥智能的舞台。在这种模型下,LLM能解决的问题都需要穷举出编排流程。下面有两个例子可以说明问题:

  1. 朴素RAG检索过程中,如果检索回来的答案不佳,此时,LLM本可以思考如何更好的检索出相关文档,如:尝试HYDE等策略再次去进行检索。但是固有的chain编排不走回头路,不管检索好坏,都会去给LLM进行提问。这种固定的程序限制了LLM发挥智能的机会。

  2. 日志分析chain例子:假设要实现一个日志分析的工作流,由于程序输出的日志可能有很多的编码字符串,是需要解码后LLM才能理解的。所以,可能就产生了这样的chain编排,如下所示:

    这样的流程看似解决了日志编码问题,可以让LLM对日志进行分析、定位错误。但是,实际线上日志存在字符串被编码过2次的情况,如:前端传入特定字符串的时候会先进行url编码,后台再进行base64编码,最后后台打印出日志。此时,按照上述的chain进行逻辑处理就会发现:只进行一次解码后的字符串并没有达到我们的目标——将需要解码的日志解码为正常的内容。所以,我们又得去修改chain的流程图,兼容这种情况。但是,其实LLM本身就可以调用两种类型的解码工具,理想的情况应该是它自己识别出字符串需要2次解码,然后自行组合工具去完成解码,而不是需要人类去调整流程图。

通过上述的例子,想必你已经看出简单的DAG模式下,chain存在的缺点是:固定的流程编排限制了LLM的能力发挥。

chain阶段总结

总的来说,我们可以将chain阶段概括为以下6个特点:

  1. 目标:使得LLM可以和工具相结合,拥有“手”和“脚”,不再仅仅是对话模型,而是可以真正做出“行动”,完成任务;

  2. 原理:通过编排固定的LLM和工具的交互流程,从而使LLM在特定任务上实现一定程度的自动化;

  3. 核心流程:人 --> 流程编排 (每一个不同流程的任务得写一个新的流程图处理)

  4. 优点:

  5. LLM能力的实际落地:通过流程编排,使得LLM和工具的结合,让LLM拥有了手和脚,不再只是一个对话模型。

  6. 提效:当前的流程编排过程,基本都可以做成一个可视化界面。通过可视化界面对流程进行编排,大幅提高了开发特定任务流程的效率;

  7. 稳定性:流程的编排过程中,由于明确知道LLM下一步会做什么,所以可以做很多兜底的策略,去保证系统的稳定性;

  8. 缺点:固定的流程编排限制了LLM的智能发挥,让他缺少泛化性,一些本可以自己解决的问题,最后没有处理。这一阶段其实还是思维固化在了“编程”中,认为程序一定是一步一步的,每一步都清晰知道会发生什么的。对于这一阶段的LLM应用方式,我们也称其为“+AI”,而不是“AI+”,因为逻辑处理的核心能力还是在编程里。

  9. 应用:

  10. langchain、langIndex等框架;

  11. dify、coze以及我们混元一站式的可视化流程编排平台;

综上所述,chain模式虽然限制了LLM的智能,但是其固定编排带来的稳定性,在短期看应该依然是发展可期的。而可视化编排应该是会继续朝着pipeline、低代码平台方向发展,提效永远是一个值得研究的方向。不过预估未来,当前chain模式中对LLM仅仅是一次对话的限制应该会被抛除,而会把Agent能力接入进来。目前Langchain也已经向着LangGraph进行发展了。

2.3 Agent阶段

Agent阶段主要目的是充分发挥机器学习模型(如LLM)的规划能力和工具调用能力,使其能够自行思考并设计出路线来完成目标。

在这个阶段,代表性的开源项目是AutoGPT。它设计的执行器+规划器编程范式,使LLM能够持续思考、行动,直到达成目标。在这个阶段,我们不再需要设计固定的流程。只需设定目标并提供工具,AI就能自行思考、规划并调用工具来完成目标。相比于Chain阶段对LLM的应用,这样的方式可以让LLM处理工具组合能解决的几乎任何问题,理论上是可以达到真正人类的水平。到了这个阶段,“编程”的固有模式也已经被剔除了,应用也从“xx程序+AI”变成了“AI+xx工具”,真正进入了“AI+”的阶段。

不过,尽管Agent模式充分发挥了LLM的能力,但它也存在一些缺点。例如,AutoGPT中,一份提示词和一个LLM需要完成感知、记忆、规划和使用工具的所有工作,这无疑增加了模型的负担。程序很容易陷入死循环,导致无法在生产环境真正落地。

agent阶段总结

所以,总的来说,我们可以从6个角度看待Agent阶段:

  1. 目标:Agent模式的确定,是充分发挥了LLM的规划能力和工具调用能力,它可以多轮次的思考、利用工具,最后达成目标;
  2. 原理:通过“执行器+规划器”以及“ReAct”的提示词思路,使LLM的一步步思考,每一个想法都可以及时被执行器执行,并且再携带到提示词中,给LLM感知到。这样的设计使LLM拥有了持续思考、观察环境,独立完成任务的能力。
  3. 核心流程:人 --> 工具 (每一个新能力的出现,得写一个新工具)
  4. 优点:只要人类给LLM准备好工具,并且构造好“解释器-执行器”架构,LLM理论上就可以解决工具组合能解决的所有问题,不再需要人类对特定任务进行流程编排。
  5. 缺点:AutoGPT也已经体现出来了,一份提示词和一个LLM需要完成感知、记忆、规划和使用工具的所有工作,无疑是对智能要求依赖太重了,程序非常容易陷入死循环。因此难以在实际生产环境中落地。
  6. 应用:AutoGPT、AgentGPT、Jarvis、babyAGI等。
2.4 Multi-Agent阶段

终于来到最后一个阶段了——Multi-Agent阶段。Multi-Agent阶段其实是Agent阶段的一个子集,所以不算单独的一个LLM应用的阶段,只是自动化程度的一个演进。

早在1995年,就有类似《群体智能》等书有研究粒子群优化算法。算法的核心理论可以表述为:群体智能大于个人。在上面Prompt阶段就已经表明,一份特定的提示词可以有效激活LLM特定能力的智能。所以,我们采用专业的事情给专业的人做的原则,将单一agent分为多个不同领域的专家agent,它们之间互相合作,从而提高Agent的稳定性和智能。这就是现在的Multi-Agent了。

总得来说,我们可以从以下6个方面了解Multi-Agent:

  1. 目标:提高Agent的智能程度、稳定性

  2. 原理:

  3. 让专业的人完成专业的事情:每一个agent只关注特定任务,只使用特定工具,只关心特定信息,从而降低单agent的智能压力。

  4. 数据流管道:agents之间如何共享数据将是multi-agent的关键,此时,我们可以结合集群通信原理:单播、广播和组播;或者结合集群网络的拓扑结构:星型、总线和环型等;又或者结合设计模式中的发布订阅模式等。将集群内各种设计方案结合Agent都能够玩出各种花样来,使智能体集群效果不一。

  5. 核心流程:人 --> agent (每一个新领域的出现,需要新增一个Agent)

  6. 优点:Agent之间互相思考,发挥群体智能效应,能有效提高智能程度;

  7. 缺点:多轮的思考,信息的交互,编程实现起来相对复杂,对LLM的响应速度要求高;

  8. 应用:

  9. metaGPT:模拟一家公司,协作完成任务;

  10. smallville:西部世界,模拟社交场景;

  11. chatDev:自动化程序员;

  12. 宝可梦自动化游戏:https://github.com/OpenBMB/AgentVerse/blob/main/README_zh.md#%E5%AE%9D%E5%8F%AF%E6%A2%A6%E6%B8%B8%E6%88%8F

2.5 小结

通过上面的介绍,相信你已经对于LLM应用中对自动化能力探索的四个发展阶段:Prompt阶段,Chain编排阶段,Agent阶段和Multi-Agent阶段有所了解了。 概括来说就是:

  • Prompt阶段是最初级的阶段,人类直接书写提示词提问,获取LLM的回答。这个阶段主要是激活和挖掘LLM的智能,但只停留在对话的阶段。
  • Chain编排阶段是通过固定的流程编排,让LLM可以和多种工具组合起来,按流水线执行逻辑流程,从而处理特定的任务。这个阶段的优点是稳定性和提效,但缺点是固定的流程编排限制了LLM的能力发挥。
  • Agent阶段是通过设定好提示词,准备好工具,由Agent自动化规划流程,完成目标。这个阶段的优点是LLM能够自行思考、规划并调用工具来完成目标,但缺点是模型的负担过重,容易陷入死循环。
  • Multi-Agent阶段是将单一Agent分为多个不同领域的专家Agent,它们之间互相合作,从而提高Agent的稳定性和智能。这个阶段的优点是能有效提高智能程度,但缺点是多轮的思考,信息的交互,编程实现起来相对复杂,对LLM的响应速度要求高。

总的来说,Agent的出现和发展都是为了提高LLM在应用场景中的能力,包括智能化和自动化能力的提升。了解了Agent的原理以后,接下来我们尝试实现一个Agent吧。

3、Agent要怎么实现?

当前已经有很多的python框架介绍怎么实现一个multi-agent系统了。如:agents、metaGPT等。由于笔者主要是用golang开发,下面用golang演示一下,如何直接手搓一个简单的Agent。

3.1 实现单Agent

实现一个单Agent,主要是要实现一个“规划器+执行器”的结构。采用ReAct的提示词方法,让LLM一步步思考策略,每一步的思考都会被执行器去执行,从实现和环境的交互。具体来说就是

  1. 提示词约定,让LLM给出每一步的方案,并且携带特殊的格式;
  2. 执行器解析LLM的方案,因为有特殊的格式要求,所以程序可以理解LLM想调用什么工具;
  3. 执行器和规划器之间循环交互,直到获取到最终答案,或者最大循环次数到达;

具体实现,大家可以了解langchain-go的实现。下面是作者自己手搓的一个演示代码,作者主要是go语言开发,所以用go写的例子,仅供大家参考:

// BaseAgent 基础agent,设定人设和可以调用的工具,它将会进行思考,解决目标问题 type BaseAgent struct { // LLM思考和行动的最大轮次 maxIterateTimes int // 大语言模型 llm *proxy.LLM // 人设提示词 rolePrompt string // Tools 是代理可以使用的工具列表。 Tools []Tool // 思考步骤 steps []AgentStep } // NewBaseAgent 单agent构造器 func NewBaseAgent(rolePrompt string, tools []Tool, maxIterateTimes int, llm *proxy.LLM) *BaseAgent { if rolePrompt == ""{ rolePrompt = planner } if maxIterateTimes == 0{ maxIterateTimes = len(tools) + 1 //每个工具都调用过一次后,还没有得出答案,则LLM进行一轮总结 } return &BaseAgent{maxIterateTimes: maxIterateTimes, llm: llm, rolePrompt: rolePrompt, Tools: tools} } // think 规划器:分析问题的情况,规划工具调用,此过程将会和执行器进行循环处理,直到规划器能规划出最终结果 func (agent *BaseAgent)think(ctx context.Context, query string) { //1. 获取数据 toolList := agent.Tools llm := agent.llm //2. 循环推理 answer := "" count := 0 for !(answer != "" || agent.maxIterateTimes < count) { count++ //计数+1 //2.1 生成提示词 fullInputs := make(map[string]string) fullInputs["agent_scratchpad"] = agent.constructScratchPad() //获取历史记录 fullInputs["role_setting"] = agent.rolePrompt //角色设定 fullInputs["query"] = query //用户提问 plannerLLM := PromptTemplate{ Template: planner, //角色完整提示词 InputVariables: []string{"query", "agent_scratchpad","role_setting"}, PartialVariables: map[string]any{ "tool_names": toolNames(toolList), "tool_descriptions": toolDescriptions(toolList), "tool_name": toolList[0].Name(), }, } prompt, err := plannerLLM.Format(fullInputs) if err != nil { log.ErrorContextf(ctx, "plannerLLM.Format err: %v", err) return } //3. 执行推理 var msgs []*hunyuan.ChatMsg msgs = append(msgs, &hunyuan.ChatMsg{Role: ChatMessageTypeSystem, Content: fmt.Sprintf("%s。注意:思考问题的时候,需要得出解决问题的下一步行动规划或者最终答案," + "并且推理下一步的行动即可,不需要连续推理多步。", agent.rolePrompt)}) msgs = append(msgs, &hunyuan.ChatMsg{Role: ChatMessageTypeUser, Content: prompt}) resp, err := llm.GenerateContent(context.Background(), msgs) if err != nil { log.ErrorContextf(ctx, "plannerHandler:llm.GenerateContent err: %v", err) return } choice1 := resp.Choices[0] output := choice1.GetMessage().GetContent() log.InfoContextf(ctx, "规划器ai回复: \n%s", output) //4. 处理LLM的决策,判断是否要执行动作 outputSplits := strings.Split(output, "尝试结论:") output = outputSplits[0] if strings.Contains(output, _finalAnswerAction2) { splits := strings.Split(output, _finalAnswerAction2) answer = splits[len(splits)-1] break } else { //判断ai规划方向为调用工具 r := regexp.MustCompile(`(?s)行动:\s*(.+)\s*行动输入:\s*(.+)`) matches := r.FindStringSubmatch(output) if len(matches) == 0 { log.InfoContextf(ctx, "解析Action失败!") //当前执行器一次执行失败,会移除这段“记忆”,进行重试。 //也可以采用填充反思提示词,让LLM思考错在哪儿,帮助解决问题。 continue } //校验工具调用的json是否正确 finalInput, ok := checkJson(matches[2]) if !ok { continue } //工具名称的处理,将返回值和所有工具取交集; toolName := findTool(ctx, toolList, matches[1]) action := AgentAction{ Tool: strings.TrimSpace(toolName), ToolInput: strings.TrimSpace(finalInput), Log: "\n" + output, } agent.doAction(ctx, action) //调用执行器,获取“环境”的信息 } } } // doAction 执行器:执行规划器的任务 func (agent *BaseAgent)doAction(ctx context.Context, action AgentAction) { var nameToTool map[string]Tool observation := "" //1. 获取工具 tool, ok := nameToTool[strings.ToUpper(action.Tool)] if !ok { observation = fmt.Sprintf("%s 是一个无效的工具,请使用其他工具!", action.Tool) agent.steps = append(agent.steps, AgentStep{ Action: action, Observation: observation, }) return } //2. 调用工具 observation, err := tool.Call(ctx, action.ToolInput) if err != nil { observation = fmt.Sprintf("%s 执行失败!请检查原因:err = %v", action.Tool, err) agent.steps = append(agent.steps, AgentStep{ Action: action, Observation: observation, }) return } log.InfoContextf(ctx, "工具执行结果:\n %s", observation) agent.steps = append(agent.steps, AgentStep{ Action: action, Observation: observation, }) return } // constructScratchPad 构造历史记录,将每一步的环境观察结果转化为LLM易于理解的格式 func (agent *BaseAgent) constructScratchPad() string { var scratchPad string steps := agent.steps if len(steps) > 0 { for i, step := range steps { scratchPad += fmt.Sprintf("%d. 问题解答尝试:\n", i+1) scratchPad += step.Action.Log if strings.HasSuffix(scratchPad, "\n") { scratchPad += "\n尝试结论:" + step.Observation } else { scratchPad += "\n\n尝试结论:" + step.Observation } } if !strings.HasSuffix(scratchPad, "\n") { scratchPad += "\n" } } else { scratchPad = "该问题暂时没有参考资料!请你自己尝试解答吧。" } return scratchPad }

提示词可以参考下面的关键部分:

你是一个善于使用工具解答问题的专家。 ## 工具列表: 下面是你可以使用的工具: --- {{.tool_descriptions}} --- ## 指南 当你面对问题的时候,请一步步思考: 1. 它是否已经可以从"已知的尝试"中得出最终答案? 2. 如果不能,下一步行动应该使用什么工具解答问题? 3. 如果工具都无法解决问题,则也给出最终结论。 ## 要求 1. 经过思考以后,如果你觉得应该采取行动,请按下面格式给出你的行动方案: --- 行动:参考工具列表的说明,选择工具去帮你解决问题。注意!此处直接填写工具名称即可,工具必须是 [ {{.tool_names}} ] 之一,如:{{.tool_name}}。 行动输入:工具的输入,请按工具规范填写。 --- 2. 如果你觉得已经可以得出问题的答案了,请按格式给出你对问题的最终答案: --- 最终答案:你总结的用户提问的最终答案 --- ## 用户提问 --- {{.query}} --- ## 已知的尝试 下面是一些已知的尝试,可以参考它们,进行决策: --- {{.agent_scratchpad}} --- 注意:使用工具的时候,请不要用上面已经尝试过的工具,可以直接参考工具的"尝试结论"。 接下来,请你按照"指南"一步步思考,给出你的答案:

上面是简单演示了一个Agent的实现思路。其实就是利用ReAct提示词去让LLM做选择:“使用工具”或“得出结论”。然后LLM的思考是一步步返回的,每一步思考逻辑返回以后,由程序去解析、执行和反馈给LLM。经过上述LLM和程序的交互,就可以实现LLM调用工具的能力,也就是所谓的Agent。

代码仅供参考,不同模型和提示词会有不同效果,大家可以自行调整提示词以获取更好的效果。

3.2 实现Agent通信,完成Multi-Agent

实现了单agent之后,我们再简单了解一下如何实现一个Multi-Agent。

3.2.1 设计范式

我们先具体讲一下multi-agent的应用设计范式。整体设计架构图(图源自网络)如下:

  • 左侧部分:是单agent,代理表现出多种内化行为,例如计划、推理和反思。此外,代理还显现出内在的人格特征,涵盖认知、情感和性格三个方面。
  • 中间部分:是多agent,单个代理可以与其他代理个体组成群体,共同展现出合作等群体行为,例如协同合作等。
  • 右侧部分:是外部环境交互,主要通过开发提供的工具,为agent提供路径,去感知外界反馈。环境的形式可以是虚拟的沙盒环境,也可以是真实的物理世界。环境中的要素包括了人类参与者和各类可用资源。对于单个代理而言,其他代理也属于环境的一部分。
  • 整体互动:代理们通过感知外界环境、采取行动,积极参与整个交互过程。

而实现multi-agent,中间部分的agent交互是核心。当前multi-agent主要有两种交互形式:合作型互动、对抗型互动。

合作型互动

作为实际应用中部署最为广泛的类型,合作型的代理系统可以有效提高任务效率、共同改进决策。具体来说,根据合作形式的不同,业内又将合作型互动细分为无序合作与有序合作。

  • 当所有代理自由地表达自己的观点、看法,以一种没有顺序的方式进行合作时,称为无序合作。这种方式适合于头脑风暴类型的问题处理;
  • 当所有代理遵循一定的规则,例如以流水线的形式逐一发表自己的观点时,整个合作过程井然有序,称为有序合作。这种方式适合于固定流程的任务,如基于Agent的RAG场景,前面举例子的日志格式解析场景等。

对抗型互动

智能代理以一种针锋相对的方式进行互动。通过竞争、谈判、辩论的形式,代理抛弃原先可能错误的信念,对自己的行为或者推理过程进行有意义的反思,最终带来整个系统响应质量的提升。这种例子有:self-RAG,它是在基础的智能文档场景下,加了一个反思的Agent,判断回答是否和用户问题有关,是否违法等。

了解了multi-agent的类型以后,我们自己实现multi-agent的关键就是实现一个controller模块,去控制agent之间的通信。通常controller模块会和agent有以下交互:

  1. controller更新当前环境的状态,选择下一时刻行动的agentA。
  2. agentA与环境交互,更新自身的memory信息。
  3. agentA开始思考:进行“规划——执行”循环推理,直到获取输出message。
  4. 将输出message更新到公共环境中。
  5. controller再次通信路由转发,选择下一时刻行动的agent。

而controller具体的通信路由转发方式也有两类:

  1. 基于LLM;
  2. 基于规则;

作者基于状态机实现了一个简单的基于规则类型的Agent。状态机模块(SOP思路)充当controller来确定agent之间交互的推进方式,管理状态的变换,并将相关状态信息变换记录到环境中,以便不同的agent进行各自任务的推进。不过目前代码尚且未完善,大家可以参考开源项目agents进行学习。

总结

当前的LLM应用从prompt一路发展到了Agent,也从“+AI”阶段摸索到了“AI+”阶段。能感知到这个过程里,LLM的应用确实越来越自动化、通用化。

而当前主要问题还是在于LLM的智能提升问题。在单Agent纵向提升有限时,Multi-Agent系列方案通过设置合理的算法架构,能通过水平扩展的方式提高智能,为我们打开了新的思路。当前Agent还在持续发展,相信后续会有越来越多的方案去进一步提升agent的智能和实用性,期待agent真正落地出能改变生活的应用,目前发展趋势来看,那一天感觉可能不会太远了。

如何学习大模型 AI ?

由于新岗位的生产效率,要优于被取代岗位的生产效率,所以实际上整个社会的生产效率是提升的。

但是具体到个人,只能说是:

“最先掌握AI的人,将会比较晚掌握AI的人有竞争优势”。

这句话,放在计算机、互联网、移动互联网的开局时期,都是一样的道理。

我在一线互联网企业工作十余年里,指导过不少同行后辈。帮助很多人得到了学习和成长。

我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑,所以在工作繁忙的情况下还是坚持各种整理和分享。但苦于知识传播途径有限,很多互联网行业朋友无法获得正确的资料得到学习提升,故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

为什么要学习大模型?

我国在A大模型领域面临人才短缺,数量与质量均落后于发达国家。2023年,人才缺口已超百万,凸显培养不足。随着AI技术飞速发展,预计到2025年,这一缺口将急剧扩大至400万,严重制约我国AI产业的创新步伐。加强人才培养,优化教育体系,国际合作并进是破解困局、推动AI发展的关键。

大模型入门到实战全套学习大礼包

1、大模型系统化学习路线

作为学习AI大模型技术的新手,方向至关重要。 正确的学习路线可以为你节省时间,少走弯路;方向不对,努力白费。这里我给大家准备了一份最科学最系统的学习成长路线图和学习规划,带你从零基础入门到精通!


2、大模型学习书籍&文档

学习AI大模型离不开书籍文档,我精选了一系列大模型技术的书籍和学习文档(电子版),它们由领域内的顶尖专家撰写,内容全面、深入、详尽,为你学习大模型提供坚实的理论基础。

3、AI大模型最新行业报告

2025最新行业报告,针对不同行业的现状、趋势、问题、机会等进行系统地调研和评估,以了解哪些行业更适合引入大模型的技术和应用,以及在哪些方面可以发挥大模型的优势。

4、大模型项目实战&配套源码

学以致用,在项目实战中检验和巩固你所学到的知识,同时为你找工作就业和职业发展打下坚实的基础。

5、大模型大厂面试真题

面试不仅是技术的较量,更需要充分的准备。在你已经掌握了大模型技术之后,就需要开始准备面试,我精心整理了一份大模型面试题库,涵盖当前面试中可能遇到的各种技术问题,让你在面试中游刃有余

适用人群

第一阶段(10天):初阶应用

该阶段让大家对大模型 AI有一个最前沿的认识,对大模型 AI 的理解超过 95% 的人,可以在相关讨论时发表高级、不跟风、又接地气的见解,别人只会和 AI 聊天,而你能调教 AI,并能用代码将大模型和业务衔接。

  • 大模型 AI 能干什么?
  • 大模型是怎样获得「智能」的?
  • 用好 AI 的核心心法
  • 大模型应用业务架构
  • 大模型应用技术架构
  • 代码示例:向 GPT-3.5 灌入新知识
  • 提示工程的意义和核心思想
  • Prompt 典型构成
  • 指令调优方法论
  • 思维链和思维树
  • Prompt 攻击和防范
第二阶段(30天):高阶应用

该阶段我们正式进入大模型 AI 进阶实战学习,学会构造私有知识库,扩展 AI 的能力。快速开发一个完整的基于 agent 对话机器人。掌握功能最强的大模型开发框架,抓住最新的技术进展,适合 Python 和 JavaScript 程序员。

  • 为什么要做 RAG
  • 搭建一个简单的 ChatPDF
  • 检索的基础概念
  • 什么是向量表示(Embeddings)
  • 向量数据库与向量检索
  • 基于向量检索的 RAG
  • 搭建 RAG 系统的扩展知识
  • 混合检索与 RAG-Fusion 简介
  • 向量模型本地部署
第三阶段(30天):模型训练

恭喜你,如果学到这里,你基本可以找到一份大模型 AI相关的工作,自己也能训练 GPT 了!通过微调,训练自己的垂直大模型,能独立训练开源多模态大模型,掌握更多技术方案。

到此为止,大概2个月的时间。你已经成为了一名“AI小子”。那么你还想往下探索吗?

  • 为什么要做 RAG
  • 什么是模型
  • 什么是模型训练
  • 求解器 & 损失函数简介
  • 小实验2:手写一个简单的神经网络并训练它
  • 什么是训练/预训练/微调/轻量化微调
  • Transformer结构简介
  • 轻量化微调
  • 实验数据集的构建
第四阶段(20天):商业闭环

对全球大模型从性能、吞吐量、成本等方面有一定的认知,可以在云端和本地等多种环境下部署大模型,找到适合自己的项目/创业方向,做一名被 AI 武装的产品经理。

  • 硬件选型
  • 带你了解全球大模型
  • 使用国产大模型服务
  • 搭建 OpenAI 代理
  • 热身:基于阿里云 PAI 部署 Stable Diffusion
  • 在本地计算机运行大模型
  • 大模型的私有化部署
  • 基于 vLLM 部署大模型
  • 案例:如何优雅地在阿里云私有部署开源大模型
  • 部署一套开源 LLM 项目
  • 内容安全
  • 互联网信息服务算法备案

学习是一个过程,只要学习就会有挑战。天道酬勤,你越努力,就会成为越优秀的自己。

如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名大模型 AI 的正确特征了。

这份完整版的大模型 AI 学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/1200491.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

铜铸件优质供应商哪家好,扬州雪龙铜制品值得选吗?

一、基础认知篇 问题1:什么是铜铸件优质供应商?如何判断一家企业是否符合标准? 铜铸件优质供应商是指在铜铸件生产领域具备稳定的品质管控能力、丰富的技术经验、高效的定制响应机制,且能为客户提供全生命周期服务…

【开题答辩全过程】以 基于Java Web的足球门票销售系统设计与实现为例,包含答辩的问题和答案

个人简介 一名14年经验的资深毕设内行人&#xff0c;语言擅长Java、php、微信小程序、Python、Golang、安卓Android等 开发项目包括大数据、深度学习、网站、小程序、安卓、算法。平常会做一些项目定制化开发、代码讲解、答辩教学、文档编写、也懂一些降重方面的技巧。 感谢大家…

升降器专业厂家怎么选择,排名来帮你解答

2026年智能办公与数字化会议需求持续爆发,升降器作为会议场景中的核心硬件设备,其稳定性、兼容性与智能化水平直接决定会议效率与企业办公体验。无论是会议室的液晶屏升降器、翻转器,还是多媒体考场的升降屏风,优质…

2026年广州专业工作服定制公司排名,哪家实力雄厚

本榜单依托全维度市场调研与真实行业口碑,深度筛选出五家标杆工作服定制企业,为企业选型提供客观依据,助力精准匹配适配的服务伙伴。 TOP1 推荐:广东尚派服饰有限公司 推荐指数:★★★★★ | 口碑评分:国内服务周…

【实战项目】 基于Swing的学生考勤管理系统

运行效果:https://lunwen.yeel.cn/view.php?id=5938 基于Swing的学生考勤管理系统摘要:随着教育信息化的推进,学生考勤管理成为学校管理工作的重要组成部分。传统的考勤管理方式存在效率低下、数据不准确等问题。本…

JVM 为什么能跨平台?JIT 凭什么“越跑越快”?——用几个例子把核心讲透

引子&#xff1a;为什么不直接按平台编机器码&#xff1f; 很多人&#xff08;包括当年的我&#xff09;在初学 Java 时都有个直觉上的疑惑&#xff1a; “为什么 Java 非要弄个 JVM 虚拟机&#xff1f;多了一层中间层&#xff0c;肯定比直接跑机器码慢啊&#xff01;既然要跨…

收藏级|Java开发者AI大模型转型全攻略:保Java攻AI,筑牢AI时代竞争力

本文专为Java开发者量身定制AI大模型转型指南&#xff0c;深度拆解转型核心优势与潜在坑点&#xff0c;规划低门槛、可落地的渐进式转型路径&#xff0c;提供技术栈平滑过渡方案&#xff0c;重点分享数学基础补强技巧与Java工程经验的AI迁移方法&#xff0c;同步推荐阶梯式实战…

paperzz 毕业论文:搞定本科论文的智能「通关秘籍」

Paperzz-AI官网免费论文查重复率AIGC检测/开题报告/文献综述/论文初稿 paperzz - 毕业论文-AIGC论文检测-AI智能降重-ai智能写作https://www.paperzz.cc/dissertationhttps://www.paperzz.cc/dissertation 当本科毕业论文的 ddl 越来越近&#xff0c;你是否还在对着空白文档发…

收藏!AI就业黄金三年攻略:从岗位选择到入局路径,程序员小白必看

过去十年&#xff0c;互联网行业走完了从野蛮生长的黄金时代到存量博弈的转型期&#xff0c;岗位竞争愈发激烈。 但在全行业都在讨论“岗位缩减”“优化调整”的当下&#xff0c;有一个领域却在逆势爆发&#xff0c;成为就业市场的新风口——AI应用与智能体时代。这绝非技术乐观…

硕士毕业通关秘籍:paperzz 毕业论文智能写作工具,让学术告别焦虑

Paperzz-AI官网免费论文查重复率AIGC检测/开题报告/文献综述/论文初稿 paperzz - 毕业论文-AIGC论文检测-AI智能降重-ai智能写作https://www.paperzz.cc/dissertationhttps://www.paperzz.cc/dissertation 每一位硕士研究生都懂&#xff0c;毕业论文不仅是学术生涯的收官之作&…

【基于dq控制算法的并联有源滤波器】分流有源滤波器的仿真电路可以减轻谐波和无功功率附simulink仿真

✅作者简介&#xff1a;热爱科研的Matlab仿真开发者&#xff0c;擅长数据处理、建模仿真、程序设计、完整代码获取、论文复现及科研仿真。&#x1f34e; 往期回顾关注个人主页&#xff1a;Matlab科研工作室&#x1f34a;个人信条&#xff1a;格物致知,完整Matlab代码及仿真咨询…

硕士毕业通关密码:paperzz 毕业论文功能,重构学术写作新范式

Paperzz-AI官网免费论文查重复率AIGC检测/开题报告/文献综述/论文初稿 paperzz - 毕业论文-AIGC论文检测-AI智能降重-ai智能写作https://www.paperzz.cc/dissertationhttps://www.paperzz.cc/dissertation 对于每一位硕士研究生而言&#xff0c;毕业论文不仅是学术生涯的收官之…

AI诗歌:老街的弦理论的地质振动

11、《老街的弦理论的地质振动》 钟声从巷口传来 “叮——” 像地壳的震动 孩子们用纸船载着钟声 漂过积水的街面 “我们是地球的音符”他们说&#xff0c; 纸船撞上未拆的信封 第四幕&#xff1a;《暗语之河》 1、《镜中密语》 镜面浮起一串数字 “01001001” 是“我”在…

输入电影/书籍名称,自动生成精简版剧情梗概,提取核心人物和主题,帮快速判断是否想看/读。

1. 实际应用场景描述在信息爆炸的时代&#xff0c;我们每天都会看到大量电影、书籍推荐&#xff0c;但往往只有标题和海报&#xff0c;难以快速判断是否值得花时间观看或阅读。- 想看某部电影&#xff0c;但不确定剧情是否喜欢。- 想读一本书&#xff0c;但简介太长或剧透太多。…

2026 年的 AI 赛道,正在上演新一轮 “薪资狂飙”

AI科学家月薪冲破13万&#xff0c;大模型算法工程师平均薪资站稳8万梯队&#xff0c;头部企业核心岗年薪直接冲击200万大关。这场高薪盛宴的背后&#xff0c;是“人工智能”国家战略的深度落地与产业规模化爆发的双重驱动。五大核心岗位已成企业抢人主战场&#xff0c;业内共识…

‌10个习惯:让AI从业者2026年薪资翻倍的日常法则

AI时代软件测试的黄金机遇‌ 在2026年&#xff0c;人工智能&#xff08;AI&#xff09;已深度重塑软件测试行业。据Gartner预测&#xff0c;全球AI测试工具市场规模今年将突破$50亿&#xff0c;测试工程师的薪资涨幅高达30%-50%&#xff0c;而精通AI的专家更易实现翻倍&#x…

爱信食品产品靠谱吗,看看用户真实评价

问题1:爱信食品有哪些特色产品?覆盖哪些消费场景? 爱信食品作为深耕荞麦食品领域二十年的行业先行者,围绕基础营养功能适配B端服务三大维度构建了多元化特色产品矩阵,覆盖C端家庭消费、特定人群膳食及B端食品加工…

拍摄发票照片,自动识别发票金额,开票日期,商家名称,提取关键信息,生成电子记账表。

1. 实际应用场景描述 在个人理财、企业报销、税务管理等领域&#xff0c;我们每天都会收到各种发票&#xff08;纸质或电子图片&#xff09;。 - 个人记账时&#xff0c;需要手动输入发票上的金额、日期、商家名称&#xff0c;费时费力。 - 企业财务需要批量处理大量发票&…

2026年大模型就业全景:技术演进、核心技能与职业发展指南

随着大语言模型&#xff08;Large Language Models, LLMs&#xff09;技术的持续突破&#xff0c;人工智能领域正加速完成从“通用对话工具”到“任务驱动型智能体&#xff08;Agent&#xff09;系统”的深度变革 截至2026年&#xff0c;企业对大模型相关人才的需求呈现爆发式…

学术会议资料管理与共享平台开题报告

学术会议资料管理与共享平台开题报告 一、研究背景 在全球数字化转型加速推进的背景下&#xff0c;学术交流的形式与载体正发生深刻变革。学术会议作为科研工作者分享研究成果、开展学术探讨、建立合作关系的核心场景&#xff0c;其资料的产生、流转与利用模式也面临着新的挑…