¥詳詢(xún)
課程介紹
(Hadoop,Spark,電信項(xiàng)目貫穿)
Hadoop的分布式文件系統(tǒng)HDFS;HDFS的概念、HDFS的API的應(yīng)用、NameNode與SecondaryNameNode與DataNode的原理與通信機(jī)制、數(shù)據(jù)塊Block的概念、NameNode的文檔目錄樹(shù)、NameNode與DataNode的關(guān)聯(lián);Hadoop偽分布式的搭建、利用HDFS的API對(duì)分布式文件系統(tǒng)進(jìn)行操作、掌握NameNode與SecondaryNameNode的通信原理、掌握NameNode與DataNode的通信原理
Hadoop的計(jì)算框架MapReduce;利用MapReducer的計(jì)算框架實(shí)現(xiàn)電信日志的分析、深入理解Shuffle機(jī)制、FileOutPutFormat、FileInPutFormat;熟練Map、Reducer、Sort、Partition的編程、深入理解Shuffle機(jī)制、深入理解OutPutFormat與InputFormat、基于Hadoop的對(duì)象序列化機(jī)制
Hadoop的資源管理與資源調(diào)度;Yarn框架;深入理解MapReducer的通信機(jī)制:利用Yarn的資源管理和資源調(diào)度機(jī)制。理解進(jìn)程ResourceManager,NodeManager,ApplicationMaster等進(jìn)程的作用;深入理解Yarn的資源管理與資源調(diào)度機(jī)制。掌握整個(gè)MapReducer的計(jì)算流程和資源調(diào)度流程
HBase;搭建NOSQL數(shù)據(jù)庫(kù)HBase的集群、利用Zookeeper做HBase的HA機(jī)制 掌握HBase的集群的的搭建
HIVE;數(shù)據(jù)倉(cāng)庫(kù)基礎(chǔ)知識(shí)、Hive定義、Hive體系結(jié)構(gòu)簡(jiǎn)介、Hive集群、客戶(hù)端簡(jiǎn)介、 HiveQL定義、HiveQL與SQL的比較、數(shù)據(jù)類(lèi)型、外部表和分區(qū)表、表的操作與CLI客戶(hù)端演示、數(shù)據(jù)導(dǎo)入與CLI客戶(hù)端演示、查詢(xún)數(shù)據(jù)與CLI 客戶(hù)端演示、數(shù)據(jù)的連接與CLI客戶(hù)端演示、用戶(hù)自定義函數(shù)(UDF)的開(kāi)發(fā)與演示 利用HIVE做日志分析的查詢(xún)
Spark;Spark介紹:Spark應(yīng)用場(chǎng)景、Scala編程語(yǔ)言、Scala高級(jí)編程、Spark集群部署等 利用Spark流式編程做日志的分析
電信項(xiàng)目;把第四階段的電信項(xiàng)目用Hadoop與Spark實(shí)現(xiàn);熟練應(yīng)用Hadoop的MapReducer,Hive與Spark
達(dá)內(nèi)JAVA教學(xué)特色
1.云計(jì)算課程體系:內(nèi)容全,技術(shù)深,涉及JavaEE架構(gòu)級(jí)技術(shù),分布式高并發(fā)技術(shù),云計(jì)算技術(shù),云計(jì)算架構(gòu)技術(shù)等。
2.云計(jì)算云主機(jī):提供真實(shí)的大數(shù)據(jù)云計(jì)算開(kāi)發(fā)部署環(huán)境,學(xué)員可以擁有幾十臺(tái)主機(jī)節(jié)點(diǎn)以完成開(kāi)發(fā)部署,提前適應(yīng)未來(lái)工作。
3.雙模式教學(xué)體驗(yàn):達(dá)內(nèi)強(qiáng)大的TMOOC + TTS8.0在線教學(xué)平臺(tái),為學(xué)員提供線下學(xué)習(xí),線上輔助的雙模式教學(xué)體驗(yàn)。
達(dá)內(nèi)教育優(yōu)勢(shì)
1.學(xué)習(xí)0負(fù)擔(dān)
2005年達(dá)內(nèi)率先創(chuàng)辦先就業(yè)后付款助學(xué)模式,緩解學(xué)費(fèi)壓力,承保就業(yè)效果。
2.教練全天輔導(dǎo)
為保證零基礎(chǔ)學(xué)員學(xué)會(huì)專(zhuān)業(yè)技術(shù),達(dá)內(nèi)特邀千名教練全天候輔導(dǎo)學(xué)員,隨時(shí)解答技術(shù)難題。
3.專(zhuān)家團(tuán)授課
70名行業(yè)專(zhuān) 家親授課程,每個(gè)專(zhuān)家只講解更擅長(zhǎng)的技術(shù)。
4.融入課程
2005年達(dá)內(nèi)率先創(chuàng)辦可先就業(yè)后付款助學(xué)模式,緩解學(xué)費(fèi)壓力,承保就業(yè)效果。
5.保證教學(xué)效果
2005年達(dá)內(nèi)率先創(chuàng)辦可先就業(yè)后付款助學(xué)模式,緩解學(xué)費(fèi)壓力,承保就業(yè)效果。
機(jī)構(gòu)簡(jiǎn)介
達(dá)內(nèi)致力于面向IT互聯(lián)網(wǎng)行業(yè),培養(yǎng)軟件開(kāi)發(fā)工程師、測(cè)試工程師、系統(tǒng)管理員、智能硬件工程師、UI設(shè)計(jì)
師、網(wǎng)絡(luò)營(yíng)銷(xiāo)工程師、會(huì)計(jì)等職場(chǎng)人才。2015年起,推出面向青少年的少兒編程、智能機(jī)器人編程、編程數(shù)
學(xué)等課程。達(dá)內(nèi)的使命:締造年輕人的中國(guó)夢(mèng)、締造達(dá)內(nèi)員工的中國(guó)夢(mèng)
倒計(jì)時(shí)
更多詳情請(qǐng)咨詢(xún)客服 15830143330
客服在線時(shí)間:9:00-22:00,其他時(shí)間請(qǐng)?jiān)诰€預(yù)約或留言,謝謝。石家莊達(dá)內(nèi)教育:新華區(qū)中山西路83號(hào)
達(dá)內(nèi)石家莊中山路中心:新華區(qū)中山路西路83號(hào) 全部校區(qū)>>
本周僅剩 個(gè)試聽(tīng)名額
請(qǐng)鍵入信息,稍后系統(tǒng)將會(huì)把領(lǐng)獎(jiǎng)短信發(fā)至您的手機(jī)