阿里云大數(shù)據(jù)工程師要考什么？

阿里云大數(shù)據(jù)工程師認證考試主要考察考生對大數(shù)據(jù)相關(guān)概念、阿里云大數(shù)據(jù)產(chǎn)品以及大數(shù)據(jù)應(yīng)用技術(shù)的理解和應(yīng)用能力。以下是對阿里云大數(shù)據(jù)工程師認證考試內(nèi)容的詳細歸納：

一、大數(shù)據(jù)基礎(chǔ)知識

了解大數(shù)據(jù)的基本概念及當(dāng)前大數(shù)據(jù)的發(fā)展趨勢。

熟悉開源大數(shù)據(jù)平臺的經(jīng)典架構(gòu)、常用組件及其應(yīng)用場景。

掌握關(guān)系型數(shù)據(jù)庫和數(shù)據(jù)倉庫的基本概念和常用技術(shù)。

二、阿里云大數(shù)據(jù)產(chǎn)品

熟悉阿里云大數(shù)據(jù)相關(guān)產(chǎn)品的基本概念、特點、應(yīng)用場景以及與其他產(chǎn)品的配合使用。

掌握阿里云大數(shù)據(jù)相關(guān)產(chǎn)品的基本操作，了解各產(chǎn)品的最佳使用實踐。

能識別使用過程中常見的問題，并給出合適的解決方案。

三、大數(shù)據(jù)計算服務(wù)

MaxCompute：了解MaxCompute的產(chǎn)品價值及產(chǎn)品架構(gòu)，熟悉其核心概念及常用開發(fā)工具。掌握MaxCompute SQL的常用DDL、DML操作及內(nèi)置函數(shù)的使用，了解自定義函數(shù)的分類、開發(fā)及使用，以及SQL性能調(diào)優(yōu)的常用方法。

其他計算服務(wù)：了解實時計算的概念及其應(yīng)用場景，熟悉業(yè)界主流實時計算框架。對于阿里云實時計算Flink產(chǎn)品，需要掌握其SQL及其操作，以及作業(yè)管理及調(diào)優(yōu)方法。

四、數(shù)據(jù)工場DataWorks

了解DataWorks的產(chǎn)品架構(gòu)及應(yīng)用場景。

掌握基于數(shù)據(jù)集成進行數(shù)據(jù)離線與實時同步的方法。

熟悉大數(shù)據(jù)建模的方法論、數(shù)據(jù)倉庫規(guī)劃及維度建模的標(biāo)準(zhǔn)。

掌握數(shù)據(jù)開發(fā)與運維的基本流程，了解大數(shù)據(jù)治理的概念及其需求層次。

五、數(shù)據(jù)集成與數(shù)據(jù)遷移

了解數(shù)據(jù)集成的基本概念和工作流程。

熟練使用數(shù)據(jù)集成進行多種場景下的數(shù)據(jù)同步，包括從不同的數(shù)據(jù)源同步數(shù)據(jù)到大數(shù)據(jù)計算服務(wù)。

了解并能正確使用數(shù)據(jù)集成中的字段映射、常量使用、變量使用、導(dǎo)入導(dǎo)出規(guī)則等。

六、數(shù)據(jù)可視化與分析

了解數(shù)據(jù)可視化的作用及設(shè)計原理，熟悉常用的數(shù)據(jù)可視化圖表。

熟悉阿里云數(shù)據(jù)可視化分析Quick BI產(chǎn)品和DataV產(chǎn)品的特點。

掌握基于阿里云機器學(xué)習(xí)PAI-Designer進行可視化建模的方法。

七、機器學(xué)習(xí)

了解機器學(xué)習(xí)及其主要流程。

掌握數(shù)據(jù)預(yù)處理的方法，如數(shù)據(jù)合并、清洗、規(guī)范化等。

掌握機器學(xué)習(xí)算法建模、特征工程、模型評估的主要流程。

了解機器學(xué)習(xí)常見算法的原理，如分類、回歸、聚類等。

八、其他相關(guān)云產(chǎn)品

了解其他相關(guān)云產(chǎn)品的特點和應(yīng)用場景，包括云數(shù)據(jù)庫RDS、分布式關(guān)系型數(shù)據(jù)庫DRDS、表格存儲Table Store、分析型數(shù)據(jù)庫Analytic DB、對象存儲OSS等。

了解大數(shù)據(jù)計算服務(wù)、數(shù)據(jù)工場DataWorks、數(shù)據(jù)集成、QuickBI及機器學(xué)習(xí)PAI等如何與其他相關(guān)產(chǎn)品配合使用。