《大數(shù)據(jù)處理與應(yīng)用（微課版）》以項(xiàng)目驅(qū)動(dòng)的方式詳細(xì)講解大數(shù)據(jù)生態(tài)體系架構(gòu)各方面的知識(shí)。主要涉及ETL的數(shù)據(jù)采集與清洗、離線數(shù)據(jù)倉(cāng)庫(kù)的構(gòu)建和實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)的構(gòu)建。
《大數(shù)據(jù)處理與應(yīng)用（微課版）》分為三個(gè)模塊：模塊一介紹大數(shù)據(jù)離線數(shù)據(jù)處理與分析，包含項(xiàng)目一和項(xiàng)目二，知識(shí)點(diǎn)覆蓋HDFS、Hive、Sqoop、MapReduce、Spark Core和Flink DataSet；模塊二介紹大數(shù)據(jù)實(shí)時(shí)數(shù)據(jù)處理與分析，包含項(xiàng)目三和項(xiàng)目四，知識(shí)點(diǎn)覆蓋Kafka、Flume、Spark Streaming和Spark SQL；模塊三介紹大數(shù)據(jù)處理與分析的擴(kuò)展知識(shí)，包含項(xiàng)目五和項(xiàng)目六，項(xiàng)目五為基于大數(shù)據(jù)分析處理實(shí)現(xiàn)的推薦系統(tǒng)，項(xiàng)目六為大數(shù)據(jù)ETL數(shù)據(jù)采集的CDC技術(shù)。
《大數(shù)據(jù)處理與應(yīng)用（微課版）》可作為高等院校大數(shù)據(jù)與相關(guān)專業(yè)學(xué)生的教材，也可作為具有一定的Java編程基礎(chǔ)的讀者閱讀，如平臺(tái)架構(gòu)師、開(kāi)發(fā)人員和運(yùn)維管理人員。