朋友圈

13140882082

全國(guó)統(tǒng)一學(xué)習(xí)專線 9:00-21:00

位置:程序開(kāi)發(fā)培訓(xùn)班 > 大數(shù)據(jù)開(kāi)發(fā)培訓(xùn)班 > 深圳大數(shù)據(jù)Spark實(shí)戰(zhàn)培訓(xùn)班

深圳大數(shù)據(jù)Spark實(shí)戰(zhàn)培訓(xùn)班

深圳大數(shù)據(jù)Spark實(shí)戰(zhàn)培訓(xùn)班

授課機(jī)構(gòu): 深圳IT認(rèn)證機(jī)構(gòu)

課程價(jià)格: 請(qǐng)咨詢客服

開(kāi)班時(shí)間:隨到隨學(xué)

上課地址: 請(qǐng)咨詢客服

優(yōu)惠價(jià)格: 請(qǐng)咨詢客服

咨詢電話:13140882082

課程介紹

發(fā)布日期:2024-12-23

課程亮點(diǎn)


師資:*講師團(tuán)隊(duì),豐富行業(yè)經(jīng)驗(yàn)和企業(yè)培訓(xùn)經(jīng)驗(yàn)


特色:小班培訓(xùn),精品課程,面授+直播+錄播,上課方式多樣


培訓(xùn):免費(fèi)重聽(tīng)


適用對(duì)象


不限


學(xué)習(xí)目標(biāo)

了解大數(shù)據(jù)業(yè)內(nèi)*新發(fā)展趨勢(shì),深入掌握Hadoop的原理,Hadoop生態(tài)系統(tǒng)


課程內(nèi)容


大數(shù)據(jù)背景與思維


1. 什么是大數(shù)據(jù)


2. 大數(shù)據(jù)技術(shù)的產(chǎn)生背景


3. 大數(shù)據(jù)應(yīng)用場(chǎng)景


4. 大數(shù)據(jù)思維


5. 大數(shù)據(jù)產(chǎn)業(yè)鏈


6. 大數(shù)據(jù)是如何變革各行業(yè)的技術(shù)架構(gòu)、商業(yè)模式和組織方式


7. 大數(shù)據(jù)必備的技術(shù)基礎(chǔ)


*天


互聯(lián)網(wǎng)電信大數(shù)據(jù)應(yīng)用案例深度解析


大數(shù)據(jù)在通信及互聯(lián)網(wǎng)行業(yè)的應(yīng)用案例解析-以下幾個(gè)案例將貫穿整個(gè)培訓(xùn)內(nèi)容, 作為每個(gè)章節(jié)的案例分析細(xì)化到每個(gè)大數(shù)據(jù)的知識(shí)點(diǎn)


互聯(lián)網(wǎng)企業(yè)遇到大數(shù)據(jù)的問(wèn)題


案例分享:海量數(shù)據(jù)通信行業(yè)解決方案


案例分享:基于通信網(wǎng)元實(shí)時(shí)數(shù)據(jù)的海量數(shù)據(jù)解決方案


案例分享:*電信用戶畫(huà)像分析系統(tǒng)的大數(shù)據(jù)變現(xiàn)案例分析


案例分享:淘寶大數(shù)據(jù)分析案例分析


*天


海量數(shù)據(jù)處理系統(tǒng)


的架構(gòu)設(shè)計(jì)


這個(gè)部分主要講解海量數(shù)據(jù)處理的架構(gòu)設(shè)計(jì),針對(duì)海量數(shù)據(jù)的問(wèn)題設(shè)計(jì)海量數(shù)據(jù)的架構(gòu)解決方案。


海量數(shù)據(jù)處理的系統(tǒng)場(chǎng)景


大數(shù)據(jù)時(shí)代的數(shù)據(jù)架構(gòu)解決方案


海量數(shù)據(jù)處理的架構(gòu)匯總


8種海量數(shù)據(jù)處理的架構(gòu)設(shè)計(jì)比較


分布式系統(tǒng)架構(gòu)的海量數(shù)據(jù)處理設(shè)計(jì)


海量數(shù)據(jù)處理設(shè)計(jì)


典型案例分析:結(jié)合一個(gè)500強(qiáng)實(shí)時(shí)數(shù)據(jù)系統(tǒng)的實(shí)例案例進(jìn)行分析,詳細(xì)分析海量數(shù)據(jù)處理的架構(gòu)設(shè)計(jì)


第二天


案例及動(dòng)手實(shí)驗(yàn)


HDFS實(shí)戰(zhàn)-Java API使用


PB 級(jí)大數(shù)據(jù)存儲(chǔ)系統(tǒng)的項(xiàng)目案例分析


HDFS部署、配置與性能調(diào)優(yōu)實(shí)戰(zhàn)


典型案例分析:通過(guò)HDFS API完成一個(gè)復(fù)雜數(shù)據(jù)系統(tǒng)的操作過(guò)程


Hadoop MapReduce深入解析


使用 Hadoop MapReduce Streaming 編程


MapReduce流程


基本MapReduceAPI 概念


MapReduce的優(yōu)化


MapReduce的任務(wù)調(diào)度


MapReduce編程實(shí)戰(zhàn)


滿足解決實(shí)際數(shù)據(jù)分析問(wèn)題的高級(jí)Hadoop API


第三天


Hive架構(gòu)及實(shí)踐案例沙盤(pán)演練


Hive系統(tǒng)部署與搭建


Hive工作機(jī)制


基于Hive的大數(shù)據(jù)加載過(guò)程


Hive程序編寫(xiě)性能建議


MapJoin


數(shù)據(jù)傾斜


Join順序


UDF編寫(xiě)注意事項(xiàng)


快速獲取結(jié)果TopN


通過(guò)Explain觀察Hive行為


動(dòng)手實(shí)驗(yàn):完成Hive的搭建與配置


典型案例分析:基于Hive的大型電信通話記錄分析示例,詳細(xì)分析Hive的架構(gòu)應(yīng)用、性能調(diào)優(yōu)及其使用場(chǎng)景與整體系統(tǒng)架構(gòu)的結(jié)合


第四天


Spark架構(gòu)及實(shí)踐


案例沙盤(pán)演練


1.2 Spark的重要擴(kuò)展


1.2.1 Spark SQL和Dataframe


1.2.2 Spark Streaming


1.2.3 Spark MLlib和ML


1.2.4 GraphX


1.2.5 SparkR


2.3 運(yùn)行Spark應(yīng)用程序


2.3.1 Local模式運(yùn)行Spark應(yīng)用程序


2.3.2 Standalone模式運(yùn)行Spark應(yīng)用程序


2.3.3 YARN模式運(yùn)行Spark


2.3.4 應(yīng)用程序提交和參數(shù)傳遞


3 Spark程序開(kāi)發(fā)


3.1 使用Spark Shell編寫(xiě)程序


3.1.1 啟動(dòng)Spark Shell


3.1.2 加載text文件


3.1.3 簡(jiǎn)單RDD操作


3.1.4 簡(jiǎn)單RDD操作應(yīng)用


3.1.5 RDD緩存


3.2 構(gòu)建Spark的開(kāi)發(fā)環(huán)境


3.2.1 準(zhǔn)備環(huán)境


3.2.2 構(gòu)建Spark的Eclipse開(kāi)發(fā)環(huán)境


3.2.3 構(gòu)建Spark的IntelliJ IDEA開(kāi)發(fā)環(huán)境


3.3 獨(dú)立應(yīng)用程序編程


3.3.1 創(chuàng)建SparkContext對(duì)象


3.3.2 編寫(xiě)簡(jiǎn)單應(yīng)用程序


3.3.3 編譯并提交應(yīng)用程序


第五天


Spark Streaming應(yīng)用開(kāi)發(fā)


Spark Streaming Java實(shí)例開(kāi)發(fā)、運(yùn)行


Spark Streaming Java實(shí)例的運(yùn)行過(guò)程分析


Spark Streaming內(nèi)部數(shù)據(jù)傳輸過(guò)程分析


Spark Streaming應(yīng)用開(kāi)發(fā)總結(jié)(API回顧,典型應(yīng)用模式總結(jié))


Spark Streaming消息可靠性保證機(jī)制介紹


Spark Streaming實(shí)時(shí)大數(shù)據(jù)算法解析案例


Spark Streaming實(shí)時(shí)大數(shù)據(jù)報(bào)警案例


Spark Streaming實(shí)時(shí)大數(shù)據(jù)的調(diào)整與改進(jìn)

學(xué)員評(píng)價(jià)ASK list

  • 周**評(píng)價(jià):晚上是跟朋友一起過(guò)來(lái)參加個(gè)試聽(tīng)課,也了解一下Linux認(rèn)證的項(xiàng)目,因?yàn)槲沂橇慊A(chǔ),課上老師簡(jiǎn)單講了一點(diǎn),整體我比較滿意,體驗(yàn)感不錯(cuò)。
    手機(jī)號(hào)碼: 186****7437   評(píng)價(jià)時(shí)間: 2024-12-23
  • 未**評(píng)價(jià):現(xiàn)在的互聯(lián)網(wǎng)市場(chǎng)還挺有發(fā)展前景,涉及到日常生活各個(gè)方面,什么大數(shù)據(jù),云計(jì)算,5g之類的,小白一個(gè)沒(méi)什么基礎(chǔ)來(lái)了解一下......環(huán)境還不錯(cuò),正規(guī)的學(xué)校,算是大又亮吧,老師給我講解了互聯(lián)網(wǎng)近兩年的發(fā)展和就業(yè),課程是不斷更新和淘汰的,所以是新和市場(chǎng)融合度很高了!
    手機(jī)號(hào)碼: 181****5123   評(píng)價(jià)時(shí)間: 2024-12-23
  • 朱**評(píng)價(jià):因?yàn)橐咔樽约旱墓ぷ鞑铧c(diǎn)沒(méi)了,現(xiàn)在緊迫感很強(qiáng),抓緊時(shí)間在IT認(rèn)證報(bào)名了提升Java技能的課程,希望能夠順利的掌握,也為自己未來(lái)的職業(yè)前景提供點(diǎn)幫助。
    手機(jī)號(hào)碼: 182****4408   評(píng)價(jià)時(shí)間: 2024-12-23
  • 未**評(píng)價(jià):現(xiàn)在就業(yè)壓力太大了,自己現(xiàn)在大三,想學(xué)點(diǎn)實(shí)用的技術(shù),在老師的推薦下報(bào)名了IT認(rèn)證的Java課,剛開(kāi)始學(xué)還是有難度的,老師后來(lái)幫我梳理了疑點(diǎn),現(xiàn)在能跟上進(jìn)度了 開(kāi)心!
    手機(jī)號(hào)碼: 186****4712   評(píng)價(jià)時(shí)間: 2024-12-23
  • 未**評(píng)價(jià):一直想找一個(gè)更加專業(yè)的PMP輔導(dǎo)機(jī)構(gòu),在同事的推薦下報(bào)名了IT認(rèn)證的課程,上了一個(gè)星期了,老師講得很好,而且會(huì)即時(shí)解答提問(wèn),確實(shí)不錯(cuò)
    手機(jī)號(hào)碼: 159****2924   評(píng)價(jià)時(shí)間: 2024-12-23
  • 未**評(píng)價(jià):之所以能做這么久確實(shí)是不一般的,從授課到就業(yè)主任的知道,這個(gè)服務(wù)理念是我非常認(rèn)可的,尤其李老師,很熱情和耐心,對(duì)于無(wú)從下手的職業(yè)規(guī)劃,給我很多指點(diǎn),有這么好看又負(fù)責(zé)的老師真是幸運(yùn),選擇IT認(rèn)證沒(méi)錯(cuò)!!
    手機(jī)號(hào)碼: 182****5091   評(píng)價(jià)時(shí)間: 2024-12-23

更多培訓(xùn)課程,學(xué)習(xí)資訊,課程優(yōu)惠,課程開(kāi)班,學(xué)校地址等學(xué)校信息,請(qǐng)進(jìn)入 深圳IT認(rèn)證機(jī)構(gòu)網(wǎng)站詳細(xì)了解
咨詢電話:13140882082   微信:13140882082

如果本頁(yè)不是您要找的課程,您也可以百度查找一下:

還沒(méi)有找到合適的課程?趕快告訴課程顧問(wèn),讓我們顧問(wèn)馬上聯(lián)系您! 靠譜 的培訓(xùn)課程,省時(shí)又省力!

微信訪問(wèn)

#tel_020#