阿里云大數(shù)據(jù)工程師要考什么？

阿里云大數(shù)據(jù)工程師認(rèn)證考試主要考察考生對(duì)大數(shù)據(jù)相關(guān)概念、阿里云大數(shù)據(jù)產(chǎn)品以及大數(shù)據(jù)應(yīng)用技術(shù)的理解和應(yīng)用能力。以下是對(duì)阿里云大數(shù)據(jù)工程師認(rèn)證考試內(nèi)容的詳細(xì)歸納：

一、大數(shù)據(jù)基礎(chǔ)知識(shí)

了解大數(shù)據(jù)的基本概念及當(dāng)前大數(shù)據(jù)的發(fā)展趨勢(shì)。

熟悉開(kāi)源大數(shù)據(jù)平臺(tái)的經(jīng)典架構(gòu)、常用組件及其應(yīng)用場(chǎng)景。

掌握關(guān)系型數(shù)據(jù)庫(kù)和數(shù)據(jù)倉(cāng)庫(kù)的基本概念和常用技術(shù)。

二、阿里云大數(shù)據(jù)產(chǎn)品

熟悉阿里云大數(shù)據(jù)相關(guān)產(chǎn)品的基本概念、特點(diǎn)、應(yīng)用場(chǎng)景以及與其他產(chǎn)品的配合使用。

掌握阿里云大數(shù)據(jù)相關(guān)產(chǎn)品的基本操作，了解各產(chǎn)品的最佳使用實(shí)踐。

能識(shí)別使用過(guò)程中常見(jiàn)的問(wèn)題，并給出合適的解決方案。

三、大數(shù)據(jù)計(jì)算服務(wù)

MaxCompute：了解MaxCompute的產(chǎn)品價(jià)值及產(chǎn)品架構(gòu)，熟悉其核心概念及常用開(kāi)發(fā)工具。掌握MaxCompute SQL的常用DDL、DML操作及內(nèi)置函數(shù)的使用，了解自定義函數(shù)的分類、開(kāi)發(fā)及使用，以及SQL性能調(diào)優(yōu)的常用方法。

其他計(jì)算服務(wù)：了解實(shí)時(shí)計(jì)算的概念及其應(yīng)用場(chǎng)景，熟悉業(yè)界主流實(shí)時(shí)計(jì)算框架。對(duì)于阿里云實(shí)時(shí)計(jì)算Flink產(chǎn)品，需要掌握其SQL及其操作，以及作業(yè)管理及調(diào)優(yōu)方法。

四、數(shù)據(jù)工場(chǎng)DataWorks

了解DataWorks的產(chǎn)品架構(gòu)及應(yīng)用場(chǎng)景。

掌握基于數(shù)據(jù)集成進(jìn)行數(shù)據(jù)離線與實(shí)時(shí)同步的方法。

熟悉大數(shù)據(jù)建模的方法論、數(shù)據(jù)倉(cāng)庫(kù)規(guī)劃及維度建模的標(biāo)準(zhǔn)。

掌握數(shù)據(jù)開(kāi)發(fā)與運(yùn)維的基本流程，了解大數(shù)據(jù)治理的概念及其需求層次。

五、數(shù)據(jù)集成與數(shù)據(jù)遷移

了解數(shù)據(jù)集成的基本概念和工作流程。

熟練使用數(shù)據(jù)集成進(jìn)行多種場(chǎng)景下的數(shù)據(jù)同步，包括從不同的數(shù)據(jù)源同步數(shù)據(jù)到大數(shù)據(jù)計(jì)算服務(wù)。

了解并能正確使用數(shù)據(jù)集成中的字段映射、常量使用、變量使用、導(dǎo)入導(dǎo)出規(guī)則等。

六、數(shù)據(jù)可視化與分析

了解數(shù)據(jù)可視化的作用及設(shè)計(jì)原理，熟悉常用的數(shù)據(jù)可視化圖表。

熟悉阿里云數(shù)據(jù)可視化分析Quick BI產(chǎn)品和DataV產(chǎn)品的特點(diǎn)。

掌握基于阿里云機(jī)器學(xué)習(xí)PAI-Designer進(jìn)行可視化建模的方法。

七、機(jī)器學(xué)習(xí)

了解機(jī)器學(xué)習(xí)及其主要流程。

掌握數(shù)據(jù)預(yù)處理的方法，如數(shù)據(jù)合并、清洗、規(guī)范化等。

掌握機(jī)器學(xué)習(xí)算法建模、特征工程、模型評(píng)估的主要流程。

了解機(jī)器學(xué)習(xí)常見(jiàn)算法的原理，如分類、回歸、聚類等。

八、其他相關(guān)云產(chǎn)品

了解其他相關(guān)云產(chǎn)品的特點(diǎn)和應(yīng)用場(chǎng)景，包括云數(shù)據(jù)庫(kù)RDS、分布式關(guān)系型數(shù)據(jù)庫(kù)DRDS、表格存儲(chǔ)Table Store、分析型數(shù)據(jù)庫(kù)Analytic DB、對(duì)象存儲(chǔ)OSS等。

了解大數(shù)據(jù)計(jì)算服務(wù)、數(shù)據(jù)工場(chǎng)DataWorks、數(shù)據(jù)集成、QuickBI及機(jī)器學(xué)習(xí)PAI等如何與其他相關(guān)產(chǎn)品配合使用。