阿里云大模型工程师认证(特别是ACP级别)的考试内容主要涉及大模型的相关技术和应用场景,以下是对该认证考试内容的详细归纳:
一、考试形式
考试类型:上机考试,闭卷。
考试时长:120分钟。
题型与分值:满分为100分,其中单选题70道(每题1分),多选题30道(每题1分)。80分及以上为合格。
二、考试内容大纲
1.大模型应用开发(约占16%)
通过OpenAI API调用大模型。
通过特定工具(如LlamaIndex)向通义千问等提问。
理解基本API参数,如model、temperature、top_p等。
批量生成与流式生成的理解。
理解消息与对话历史。
2.大模型提示词工程(约占24%)
构建有效的提示词。
理解提示词框架,如提示词要素、提示词分隔符、提示词模板等。
理解系统角色提示词的作用。
利用大模型创建算法应用。
理解大模型的适用场景,进行大模型算法实验(如批量对员工咨询做意图分类、用大模型做文档审阅、实现针对问题的自动文档修订等)。
3.大模型检索增强(约占24%)
通过特定工具(如LlamaIndex)构建RAG应用的基本使用方法。
理解RAG的核心要素,如文件解析、文本切片、段落召回、段落重排序等。
理解对RAG做召回优化的方法,如句子窗口检索、自动合并检索等。
持续优化检索增强能力,理解更贴近实战的RAG优化方法(如优化文本解析、标题改写优化、表格内容增强、文本分割方法对比等)。
对检索增强的能力做自动化评测,了解RAGAS指标体系,懂得RAG系统的评测方法。
4.大模型微调(约占16%)
此部分具体内容可能涉及大模型的参数调整、优化策略等,但具体细节可能因考试版本和更新而有所变化。
5.大模型应用安全(约占8%,注意:这在某些资料中可能未单独列出,但根据最新信息已加入)
可能涉及大模型应用的安全风险、防护措施、数据保护等方面的知识。
6.AI辅助内容生产(约占12%)
了解如何使用AI工具(如Flux-Merged、Marp、moviepy、ffmpeg等)辅助生成内容,特别是视频内容。
热门:阿里云认证介绍 | 阿里云认证证书怎么考 | 阿里云认证类别
推荐:阿里云ACA认证视频课程 | 阿里云ACA认证网络课堂 | 阿里云认证考试科目