有不少想要學習大數據技術的同學對大數據技術學什么課程感到迷茫。今天小千就以千鋒教育大數據培訓課程為例,為大家詳細介紹大數據技術課程大綱。大綱內容涉及linux操作基礎、shell編程、內存數據庫redis、布式協調服務zookeeper、java高級特性增強、輕量級RPC框架開發、hadoop快速入門、HDFS增強、MAPREDUCE、federation介紹和hive使用等內容,具體介紹如下:
第一階段離線數倉(7周)
掌握能力
掌握企業級基建環境部署、Hive和Spark數據開發、數據倉庫搭建、數據抽取、數據清洗、數據轉換、數據加載、數據應用和京東離線ETL。
勝任職位
離線數據工程師、數據倉庫工程師、ETL工程師、數據采集工程師、數據支持工程師、BI商業分析師、數據可視化工程師、Hadoop工程師、Spark工程師
技術點
Java、MySQL、Maven、Git、OpenResty、Linux、Shell、HDFS、YARN、Zookeeper、MapReduce、Scala、Python、SparkCore、Hive、SparkSQL、Presto、Sqoop、DataX、Flume、CDH、數倉架構、維度建模、SuperSet、Azkaban、Airflow等。掌握企業級基建環境部署、Hive和Spark數據開發、數據倉庫搭建、數據抽取、數據清洗、數據轉換、數據加載、數據應用和京東離線ETL。
項目
數據服務、大數據可視化、企業級Hadoop基建項目部署、分布式網絡爬蟲、基于Spark的大數據分析項目、ETL項目之Hive和SparkSQL、BI商業分析等。
第二階段實時倉庫(5周)
掌握能力
掌握流數據接入、基于Flink實時數據開發、流批一體數據倉庫開發、數據湖開發、實時ETL、實時監控系統和京東實時數據開發
勝任職位
實時工程師、Flink工程師、實時數據倉庫工程師、實時ETL工程師、Spark工程師
技術點
Kafka、Structured Streaming、Hudi、Canal、Flink、ClickHouse、HBase、Phoenix、Elasticsearch、Redis
項目
實時監控系統、基于Flink的實時數據開發、實時數據湖、大數據搜索系統
第三階段實踐項目(4周)
掌握能力
掌握企業項目開發流程、用戶畫像開發、企業級推薦系統開發、數據治理、基于生產環境項目部署和京東項目性能調優
勝任職位
數據服務工程師、離線數據倉庫開發工程師、BI商業分析師、實時數據倉庫工程師、實時監控系統工程師、ETL工程師、數據可視化工程師、數據治理工程師、高級數據開發工程師、推薦工程、數據平臺工程師、數據架構師
技術點
數據采集與監控平臺、準實時數據倉庫、用戶畫像、推薦系統、基于Flink的實時數據倉庫、元數據管理與數據治理。
以上是對大數據技術學什么課程相關問題的解答,想要獲取完整學習大綱的同學可以點擊在線名師免費獲取。千鋒好程序員大數據+數據智能,與京東物流大廠合作共建大數據技術領域的實戰型前瞻深度課程,對大廠熱門技術及項目進行系統、深度的研發和建設,形成獨特的教研壁壘,感興趣的同學可以來千鋒教育免費試聽!