阿里云大数据工程师acp认证考试大纲

阿里云大数据工程师acp认证考试大纲

阿里云大数据工程师（acp）认证介绍：

阿里云大数据专业认证（acp 级 －Alibaba Cloud Certification Professional）是面向使用阿里云大数据产品的架构、开发、运维类人员的专业技术认证，主要涉及阿里云大数据类的几款核心产品，包括大数据计算服务MaxCompute、数据工场 DataWorks、数据集成、Quick BI、机器学习 PAI 等。

通过该技术认证可以有效证明该认证人员具备以下能力：

1、具备大数据的存储、处理、分析以及展现的基础知识。

2、能够根据企业的业务需求，基于阿里云的产品制定有效的技术解决方案和企业最佳实践。

3、能够熟练的使用阿里云的大数据计算服务 MaxCompute、数据工场DataWorks、数据集成、QuickBI 以及机器学习 PAI 等产品。

4、能够诊断基于阿里云大数据产品构建的业务系统在运行中出现的常见问题并找到相应的解决方案。

大数据工程师acp认证线下上机考试试卷内容范围：

一、大数据计算服务考试内容：

（1）熟悉大数据计算服务基本概念，包括项目空间、表、分区、资源、任务等。

（2）了解大数据计算服务的组成架构和各组成部分功能。

（3）掌握大数据计算服务的特点、优势以及适用场景。

（4）掌握大数据计算服务的连接和使用方式，包括使用客户端、管理控制台、Java SDK 等。

（5）掌握大数据计算服务的数据上传和下载，可以熟练的使用Tunnel 命令行工具，了解 Tunnel SDK。

（6）掌握大数据计算服务的 SQL 命令，包括 DDL、DML 以及常见内置函数。

（7）熟悉大数据计算服务的用户自定义函数，包括 UDF、UDAF以及 UDTF，可以编写简单的自定义函数。

（8）熟悉大数据计算服务的 MapReduce 编程框架，可以配置Eclipse 的环境，编写简单的 MR 程序。

（9）了解大数据计算服务的 Graph 编程框架，包括基本概念、处理流程等，可以编写简单的 Graph 程序。

（10）了解大数据计算服务 DataHub 的相关概念和使用方法。

（11）熟悉大数据计算服务的安全和权限管理的概念和实际操作， 包括用户、角色、授权（ACL&Policy）、项目空间保护、例外以及安全等级等。

二、数据工场 DataWorks 考试内容：

（1）熟悉 DataWorks 的基本功能模块，包括数据开发、数据管理、运维中心、组织管理以及项目管理等。

（2）了解 DataWorks 的基本特点，包括角色隔离、环境隔离等。

（3）可以使用项目管理和组织管理模块搭建环境。

（4）熟练使用 DataWorks 的数据开发模块进行设计开发，包括建表、任务开发、资源上传、数据上传、新增函数等。

（5）熟练使用 DataWorks 的数据开发模块进行工作流任务和节点任务的开发设计，并且可以配置合适的依赖和周期性调度。

（6）熟练使用数据管理模块进行数据管理，包括血缘分析、表的使用权限申请和授权等。

（7）对于使用过程中出现的问题，能够识别、定位，对其中基本的问题能进行修复。

三、数据集成考试内容：

（1）了解数据集成的基本概念和工作流程。

（2）熟练使用数据集成进行多种场景下的数据同步，可以从不同的数据源同步数据到大数据计算服务。

（3）了解数据集成中的 DataX 组件，包括概念、功能以及实际使用。

（4）了解并能正确使用数据集成中的字段映射、常量使用、变量使用、导入导出规则等。

（5）了解数据集成的最佳实践，比如切分键配置等。

（6）能够对使用过程中出现的常见问题进行排查，并能解决其中的基本问题。

（7）对于数据集成中的脏数据能够进行正确的处理。

四、Quick BI 考试内容：

（1）了解 QuickBI 的产品特点和使用场景。

（2）掌握服务开通、数据源配置、数据分析等基本操作。

（3）了解各种常见统计图表的适用场景和使用方法。

（4）能够使用 Quick BI 进行仪表盘设计、报表门户设计。

五、机器学习 PAI 考试内容：

（1）了解机器学习的基本知识。

（2）掌握常见的机器学习算法。

（3）能够使用机器学习 PAI 对数据集进行数据处理和探索式统计分析。

（4）能够使用机器学习 PAI 对数据集进行聚类、分类等数据分析。

（5）能够使用 DataWorks 部署应用机器学习中的模型。

六、应用和架构考试内容：

（1）了解其他相关云产品的特点和应用场景，包括云数据库RDS、分布式关系型数据库 DRDS、表格存储（Table Store）、分析型数据库（Analytic DB）、对象存储 OSS 等。

（2）了解大数据计算服务、数据工场 DataWorks、数据集成、QuickBI 及机器学习 PAI 等如何与其他相关产品配合使用。

（3）能根据实际的应用场景，结合阿里云产品的特点设计合理的基础架构。