國內(nèi)人才缺口
31.7%每年行業(yè)需求增長
10000+每天獵聘網(wǎng)大數(shù)據(jù)招聘
17210月薪北京大數(shù)據(jù)工程師
?大數(shù)據(jù)就業(yè)前景分析?據(jù)職業(yè)社交平臺LinkedIn發(fā)布的《2016年*互聯(lián)網(wǎng)最熱職位人才報告》顯示,研發(fā)工程師、產(chǎn)品經(jīng)理、人力資源、市場營銷、運營和數(shù)據(jù)分析是當下*互聯(lián)網(wǎng)行業(yè)需求最旺盛的六類人才職位。其中研發(fā)工程師需求量*,而數(shù)據(jù)分析人才最為稀缺。領英報告表明,數(shù)據(jù)分析人才的供給指數(shù)*,僅為0.05,屬于高度稀缺。數(shù)據(jù)分析人才跳槽速度也最快,平均跳槽速度為19.8個月。[圖片7] 潮流技能 顛覆性課程 拒絕用老掉牙的淘汰項目練手 要做就做前沿覆蓋大數(shù)據(jù)行業(yè)主流技術崗位,課程半年升級一次,緊跟市場與企業(yè)步伐 01 大數(shù)據(jù)入門基礎課程 1.JavaSE;2.MySQL;3.JDBC;4.Linux;5.shell;6.HTML;7.CSS;8.JavaScript;9.JSP;10.Servlet 02 大數(shù)據(jù)Hadoop基礎 1.大數(shù)據(jù)概論;2.Hadoop框架;3.HDFS分布式文件系統(tǒng);4.MapReduce計算模型;5.全真實訓項目 03 大數(shù)據(jù)離線分析 1.Hive數(shù)據(jù)倉庫;2.Sqoop ETL工具;3.Azkaban工作流引擎;4.Ooize;5.Impala;6.全真實訓項目 04 大數(shù)據(jù)實時計算 1.Zookeeper分布式協(xié)調(diào)系統(tǒng);2.HBase分布式數(shù)據(jù)庫;3.Redis數(shù)據(jù)庫;4.mogDB數(shù)據(jù)庫;5.Kudu列式存儲系統(tǒng);6.Storm實時數(shù)據(jù)處理平臺;7.Kafka分布式發(fā)布訂閱消息系統(tǒng);8.Flume海量日志采集系統(tǒng);9.全真實訓綜合項目 05 Spark數(shù)據(jù)計算 1.Scala;2.Spark;3RDD;4.Spark SQL;5. Streaming;6. Mahout;7.MLlib;8.GraphX;9.Spark R;10.Python;11.Alluxio;12.Python爬蟲;13.ElasticSearch;14.Lucene Hadoop基礎實戰(zhàn) 項目名稱:搜狗搜索日志分析系統(tǒng) 數(shù)據(jù)體量:5000W+/日 硬件環(huán)境:Hadoop集群 12臺 軟件環(huán)境:Hadoop2.5.2+Hive1.2.1+MR+Oracle10g 項目描述:搜狗每天產(chǎn)生大量的日志數(shù)據(jù),從日志數(shù)據(jù)里面能提取到有用的數(shù)據(jù)包括每個用戶的ID、瀏覽次數(shù)、月/日瀏覽頻率、訪問源、瀏覽內(nèi)容等等,提取這些內(nèi)容、統(tǒng)計數(shù)據(jù)分析每個用戶行為,從而做出有利的決定。 大數(shù)據(jù)離線實戰(zhàn) 項目名稱:新浪微博數(shù)據(jù)分析系統(tǒng) 日均數(shù)據(jù)體量:3GB+ 硬件環(huán)境:Hadoop集群 50臺 軟件環(huán)境:MapReduce+HBase0.98.9+Storm0.9.6+Hadoop2.5.2+Kafka2.10+Zooke eper3.4.5+CentOS-6.5-X86 項目描述:此次項目我們需要處理微博產(chǎn)生的數(shù)據(jù),通過對數(shù)據(jù)的處理得到所需的數(shù)據(jù),微博擁有大量的用戶,大量的用戶潛在的價值是巨大,怎么挖掘這些潛在的寶藏就是我們項目最直接的目的,為了能夠?qū)崟r的進行數(shù)據(jù)處理使用Storm流式計算系統(tǒng),和HBase、Zookeeper、Kafka組成框架,對數(shù)據(jù)進行處理,當然這些都是建立在hadoop集群上實現(xiàn)的,底層的存儲還是HDFS。 大數(shù)據(jù)實時計算 項目名稱:網(wǎng)絡流量流向異常賬號統(tǒng)計項目 數(shù)據(jù)體量:每天1000億,每秒峰值100 000 硬件環(huán)境:Hadoop集群 600臺 軟件環(huán)境:Hadoop2.5.2+Hive1.2.1+MR+Oracle10g 項目描述:運營商骨干網(wǎng)上采集現(xiàn)網(wǎng)流量流向信息,根據(jù)這些原始信息檢測賬號是否存在異常,如果多個終端使用同一個寬帶賬號,超過一定閾值則觸發(fā)報警機制,例如閾值為5時,同一個賬號同時連接的終端數(shù)量不能超過該值,如果超過則報警。 Spark階段項目 項目名稱:京東網(wǎng)上商城數(shù)據(jù)統(tǒng)計分析平臺 數(shù)據(jù)體量:5000W+/日 硬件環(huán)境:centos-6.5-x86 集群:spark standalone(Master-1,Worker-3) 軟件環(huán)境:hadoop,spark,hive,mysql,idea,navicat,kafka,flume 每日處理的數(shù)據(jù)量:3GB 項目描述:基于京東網(wǎng)上商城數(shù)據(jù)統(tǒng)計分析平臺--該項目采用了目前大數(shù)據(jù)領域非常流行的技術——Spark。本項目使用了Spark技術生態(tài)棧中最常用的三個技術框架,Spark Core、Spark SQL和Spark Streaming,進行離線計算和實時計算業(yè)務模塊的開發(fā)。實現(xiàn)了包括:統(tǒng)計和分析UV、PV、登錄、留存、熱門商品離線統(tǒng)計、廣告流量實時統(tǒng)計3個業(yè)務模塊。 ★課程價格根據(jù)所報讀的班級不同,價格從幾百到數(shù)萬不等,詳情請咨詢客服。 來自主流高校和企業(yè)的骨灰級大咖授課他們將十余年實戰(zhàn)經(jīng)驗傾囊相授,他們在鄭州兄弟連為你的職業(yè)發(fā)展保駕護航 [圖片8]馬如忠 兄弟連總監(jiān)級講師 icon精通Java、C、C++等主流開發(fā)語言,5年以上開發(fā)經(jīng)驗,非常豐富的IT從業(yè)經(jīng)驗和教育心得,鄭州兄弟連金牌JAVA講師,曾擔任達內(nèi)課程總監(jiān)級講師。
[圖片9]王溯 兄弟連總監(jiān)級講師 icon軟件工程碩士,二十年系統(tǒng)開發(fā)經(jīng)驗,具有大規(guī)模集群建設、開發(fā)及運維經(jīng)驗;擁有Apache Hadoop、Oracle OCM等多項產(chǎn)品的技術認證證書。
360°全方位輔導 締造行業(yè)培優(yōu)模式學不會不是理由,相信我你可以。不拋棄不放棄,6大保障讓每一位學員成人成才! 學習中途落課了怎么辦 icon中途耽誤幾天的話可以通過看視頻同步完成老師的作業(yè)彌補進度,不會的可以隨時問老師。
是否可以重修呢? icon學生因?qū)W習中途落課或者學習效果不扎實等原因可以向教務老師申請重修或降級,本期學不會下期免費再學,直到學會為止!
考核方式 icon學習的流程分為預習、聽課、整理筆記、作業(yè)(每周定期檢查作業(yè),并針對反饋情況進行講解)、復習、默寫、項目階段跟蹤檢查。
嚴格規(guī)范的預習筆記 icon預習筆記是鄭州兄弟連一再強調(diào)的學習法寶,每個同學在鄭州兄弟連都必須養(yǎng)成課前預習的習慣,對老師第二天要講授的內(nèi)容重點、難點做到心里有數(shù),聽課事半功倍。
定期召開關懷學員會議 icon開課后根據(jù)學生的作業(yè)及測驗情況形成關懷名單,進入關懷名單的學生會被所有老師所關注,相應的對其作業(yè)、預習筆記、默寫等要求會更高,要求會更嚴格。
人性化的班組機制 icon學習中遇到問題,小組成員共同討論解決,小組內(nèi)有學習懈怠完不成學習任務的同學,小組內(nèi)全體成員會集體被罰(罰手抄代碼n遍喲)。
學習氛圍濃厚 人性化服務助你一站成才集衣食住學為一體,舒適生活區(qū)域,先進教學設備 鄭州兄弟連注重細節(jié),傾力為學員打造貼心學習環(huán)境 [圖片10] ? [圖片11] ? [圖片12] ? [圖片13] ? [圖片14] [圖片15] [圖片16] [圖片17] 業(yè)內(nèi)獨有四大班型 為你而生 為你所需 [圖片18] 零基礎周末班課程設置與脫產(chǎn)班相同 學習工作兩不誤 適合需要周末上課的人群
[圖片19] 全日制脫產(chǎn)就業(yè)班面向零基礎小白 5個月完成Python 開發(fā)課程
[圖片20] 精英提高班面向掌握一定Python技術 但需提升職場競爭力的 在職人群
[圖片21] 在線精品課程同步線下面授課程 純干貨技術課堂 隨到隨學
? ? ? 相關資訊: 大數(shù)據(jù)不僅改變企業(yè)的運營方式,也將成為供應鏈協(xié)同創(chuàng)新提供新的發(fā)展方向。 ? 伴隨著信息技術全面的融入社會生活,人類世界充斥著比以往更多的信息,而且信息數(shù)據(jù)的增長速度還在不斷地加快。在科技的高速發(fā)展以及數(shù)據(jù)信息不斷增加的背景下,“大數(shù)據(jù)”這一全新的信息科學概念給我們的社會發(fā)展帶來兩個方面的巨變:一方面,在沒有數(shù)據(jù)積累的時代下無法實現(xiàn)的解決方案終于可以實現(xiàn);另一方面,從數(shù)據(jù)匱乏時代到數(shù)據(jù)泛濫時代的轉(zhuǎn)變帶來新的挑戰(zhàn)與困擾,使傳統(tǒng)的數(shù)據(jù)分析解決方案已經(jīng)不能從海量數(shù)據(jù)中高效地獲取最重要的機會洞察點。 ? 作為**規(guī)模的零售連鎖企業(yè)華潤萬家集團(以下簡稱華潤萬家)和國際*的快速消費品公司寶潔(*)公司(以下簡稱寶潔)在如何運用“大數(shù)據(jù)”進行了積極的嘗試。雙方選取供應鏈作為突破口,利用“大數(shù)據(jù)”工具在實現(xiàn)零售生意增長的同時降低運作成本并提升現(xiàn)金流。 ? 雙方合作創(chuàng)建的基于門店的實時銷售以及庫存信息的智能運營系統(tǒng)解決方案,將大數(shù)據(jù)解決方案成功地運用于生意趨勢分析,貨架缺貨降低,檔期需求預測等關鍵零供供應鏈協(xié)作領域。該成功案例也為“大數(shù)據(jù)”在商業(yè)智能,特別是針對供應鏈這一特定領域的運用提出了全新的解決思路和方向。 ? 華潤萬家是*規(guī)模的零售連鎖企業(yè)品牌之一,旗下?lián)碛腥A潤萬家、蘇果、歡樂頌、中藝、華潤堂、Ole’、blt、VanGO、Voi_la"VIVO采活、太平洋咖啡Pacific Coffee等多個著名品牌。目前已進入28 個盛自治區(qū)、直轄市和特別行政區(qū)的100 多個主要城市,門店數(shù)量超過4000多家。 ? 寶潔擁有眾多深受信賴的優(yōu)質(zhì)、領先品牌,包括幫寶適、汰漬、碧浪、護舒寶、潘婷、飄柔、海飛絲、威娜、佳潔士、舒膚佳、玉蘭油、SK-II、歐樂B、金霸王、吉列、博朗等等。寶潔目前在廣州、北京、上海、成都、天津、東莞及南平等地設有多家分公司及工廠,員工總數(shù)超過七千人,在華投資總額超過十七億美元。 ? 大型零售商和快速消費品企業(yè)必將在大數(shù)據(jù)的運用實施上處于領先地位。 ? 2011年5 月,在“云計算相遇大數(shù)據(jù)”為主題的EMC World 2011 會議中,EMC 拋出了“大數(shù)據(jù)”(Big Data)概念。最早提出大數(shù)據(jù)時代到來的麥肯錫:“數(shù)據(jù),已經(jīng)滲透到當今每一個行業(yè)和業(yè)務職能領域,成為重要的生產(chǎn)因素。人們對于海量數(shù)據(jù)的挖掘和運用,預示著新一波生產(chǎn)率增長和消費者盈余浪潮的到來。”業(yè)界(IBM 最早定義)將大數(shù)據(jù)的特征歸納為4個“V”:大量化(Volume)、多樣化(Variety)、價值密度低(Value)、快速化(Velocity)。簡而言之,大數(shù)據(jù)有四個層面的特征:*,數(shù)據(jù)體量巨大;第二,數(shù)據(jù)類型繁多;第三,價值密度低,但是商業(yè)價值高;第四,處理速度快。這幾點也使“大數(shù)據(jù)”和傳統(tǒng)的數(shù)據(jù)挖掘技術有著本質(zhì)的不同(如圖1)。 ? 總而言之,“大數(shù)據(jù)”是信息技術發(fā)展到現(xiàn)在的一種特征,在給人類帶來巨變的同時也使得各個企業(yè)能在以云計算為代表的信息技術革命的背景下,逐步開始收集和使用一些尚未被發(fā)掘的數(shù)據(jù)。 ? 通過各行各業(yè)的不斷創(chuàng)新,大數(shù)據(jù)逐步地為人類創(chuàng)造出了更多的價值。特別是商業(yè)智能、公共服務和市場營銷這三大領域。目前,越來越多的企業(yè)供應鏈負責人已經(jīng)將目光投向這一全新的信息技術解決方案中。依據(jù)國外*咨詢公司EFT的一項調(diào)查,84%的大型企業(yè)供應鏈負責人已開始重視大數(shù)據(jù),他們一致認為大數(shù)據(jù)項目能夠在提升供應鏈運營的有效性的同時降低成本,并能夠推動供應鏈管理從一般的基于歷史數(shù)據(jù)的決策進化為即時的智能決策。而且有將近2/3的供應鏈負責人目前正在嘗試或者在考慮實施“大數(shù)據(jù)”項目。 ? 更重要的是,業(yè)界一致認為大型零售商和快速消費品企業(yè)將在大數(shù)據(jù)的運用實施上處于領先地位。這也是多年來業(yè)界所倡導的零供協(xié)同供應鏈這一大的基礎上激發(fā)的新成果,也必將為零供雙方構建新型聯(lián)合商務框架添加新的動力能量。 ? 作為長期的戰(zhàn)略合作伙伴,華潤萬家和寶潔在生意發(fā)展的過程中遇到了共同的挑戰(zhàn): 即需要在不斷滿足消費者的需求的同時降低運營成本, 實現(xiàn)門店運營效率的*化(如圖2)。 ? 圖2 零供雙方共同的挑戰(zhàn)和機遇 ? 供應鏈的高效協(xié)同是實現(xiàn)雙方生意發(fā)展共同目標的重要基石,也是雙方高層領導確定的重要合作方向。在聯(lián)合商務合作框架的理念下,過去幾年寶潔和華潤萬家在供應鏈領域取得了一系列的成績:從精益供應鏈愿景的提出,到JBP(聯(lián)合生意發(fā)展計劃)計劃的落地,再到EDI/GDSN(電子數(shù)據(jù)交換/全球商品數(shù)據(jù)同步網(wǎng)絡)等項目的成功實施,充分展示出雙方供應鏈管理團隊通過精細化的管理手段、信息化的管理工具深入挖掘供應鏈的潛力,提升供應鏈的整體效能。 ? 正是有了這樣相互信任的合作理念以及技術基礎能力,雙方團隊開創(chuàng)性的提出了“以店為先”這一全新的門店智能運營模式,這一模式的關鍵點是從門店實際出發(fā),以大數(shù)據(jù)為基礎,使用實時數(shù)據(jù)進行預測性分析和決策,從而優(yōu)化門店的每一個運營環(huán)節(jié),通過實時數(shù)據(jù)分析把門店業(yè)務流程和決策過程中存在的每一份潛在價值都“擠”出來,從而提升門店單產(chǎn),實現(xiàn)“低成本、高效率”的運營模式。 ? 項目實施 ? 借助以往的供應鏈項目成功經(jīng)驗,由華潤萬家和寶潔供應鏈相關負責人牽頭,雙方組建了跨*聯(lián)合工作小組,其中包括華潤萬家信息部、物流部、商品部、營運部和寶潔公司銷售部、物流部、信息部的主要負責人。確定了將現(xiàn)有系統(tǒng)和“大數(shù)據(jù)”方案整合的工作思路,并關注在門店執(zhí)行可視化,消費者需求計劃以及風險管理作為主攻方向以提升項目的收益。 ? 首先,項目組系統(tǒng)地梳理了門店運營工作中的系列流程,重點探討了通過可比門店增長數(shù)據(jù)以及品類組發(fā)展的生意數(shù)據(jù)對比,挖掘出在新品,分銷以及陳列上的機會點;利用門店寶潔單品實時的銷售和庫存數(shù)據(jù)進行預防性的補貨以便降低貨架缺貨率和分析檔期銷售的各項參數(shù)以提升商品去化率優(yōu)化商品庫存這三個最重要的生意增長機會點。 ? 然后,項目組確定了最終的技術方案以及運營方案。在技術解決方案中,主要關注在如何解決每日門店銷售及庫存數(shù)據(jù)的傳輸,存貯及加工的全套信息化解決方案。這也是對應“大數(shù)據(jù)”大量化(Volume)、多樣化(Variety)、價值密度低(Value)、快速化(Velocity)這四大特征所必須要解決的問題。華潤萬家(包含蘇果)4000多家門店所產(chǎn)生的巨大的銷售庫存數(shù)據(jù)信息,不同業(yè)態(tài)的數(shù)據(jù)清算方式的差異,以及最重要的三個生意需求的數(shù)據(jù)信息要求都給項目的實施帶來了各種障礙。 ? 項目組最終確認了一個囊括了門店實時數(shù)據(jù)和主數(shù)據(jù)的標準提取格式,以華潤萬家不同區(qū)域為單位對數(shù)據(jù)進行打包并最終采用T+1的頻率通過EDI(電子數(shù)據(jù)交換)平臺將原始數(shù)據(jù)傳輸給寶潔全球數(shù)據(jù)倉庫。在獲取數(shù)據(jù)之后,寶潔相關團隊會按照設定的邏輯對數(shù)據(jù)進行校驗,清洗和結構化處理,使其成為能被寶潔全球智能分析平臺能所接受的標準數(shù)據(jù)格式。并最終產(chǎn)生可視化的智能報表,以*效的方式給門店一線運作人員運營建議。需要強調(diào)的是,項目組依托移動供應鏈的理念,設計了總部和門店兩個邏輯層級的報表展示方式??偛繉蛹壍膱蟊碇饕P注在宏觀層面,門店層級的報表主要關注在微觀門店的執(zhí)行層面,而且門店的層級報表可以直接在iPad等多平臺上呈現(xiàn),以*程度地方便門店一線人員的交流和執(zhí)行(如圖3)。 ? 圖3 門店智能運作系統(tǒng)解決方案 ? 在技術解決方案明確后,雙方團隊還研究了門店一線人員對相關工具的使用方式和流程,因為信息系統(tǒng)解決方案只是這個項目的一部分,更重要的是雙方一線運營團隊需要用好這些通過“大數(shù)據(jù)”所挖掘商業(yè)洞察。結合目前門店的操作實踐,項目組共同設計并量身定做了能*效地服務于一線業(yè)務運營人員、寶潔門店運營經(jīng)理、華潤萬家門店管理人員系列可視化報表。通過這些報表的有效運用,各種生意機會一目了然地呈現(xiàn)在一線運作人員面前,清晰可執(zhí)行的改進建議讓運作人員關注在*的生意機會點上,從而將他們從繁雜的數(shù)據(jù)分析工作中解放出來。在這個過程中,華潤萬家和寶潔的一線運作人員也總結了很多更貼合門店實踐的修改意見,實現(xiàn)了信息系統(tǒng)解決方案的持續(xù)進化(如圖4)。 ? 圖4 智能運作系統(tǒng)解決方案在門店的執(zhí)行測試 ? 項目成就和收益 ? 據(jù)麥肯錫的估計,如果零供雙方能夠充分發(fā)揮大數(shù)據(jù)的優(yōu)勢,將各種商業(yè)洞察運用到供應鏈效率提升上,其生產(chǎn)效益將會實現(xiàn)年均0.5% ~1%的增長幅度。在這個項目中,寶潔可以更好地建議商品在店內(nèi)的陳設,可以通過店內(nèi)工作人員更多地接觸,提高產(chǎn)品經(jīng)營的知識;華潤萬家可以降低庫存成本,提升銷售,減少店內(nèi)商品陳設的投入。綜合起來,整個供應鏈可以在成本降低的情況下,更好地滿足消費者的需求。 ? 在對于測試門店的試運行中,項目組已經(jīng)取得了一些顯著的效果,對比于基礎門店,測試門店的零售生意增長了7%。(其中0.9%來源于貨架缺貨率的降低;3%來自于檔期銷量的提升;1.1%來自于分銷系統(tǒng)的提升;2.1%來自于門店庫存效率的提升)測試結果再一次證明了大數(shù)據(jù)解決方案的有效性,也有助于該項目在華潤萬家*門店的推廣計劃,并實現(xiàn)實時智能運作系統(tǒng)運用到華潤萬家的每一家門店中的項目目標。 ? 在推廣目前已有的解決方案的同時,項目組也在思考如何利用現(xiàn)有的大數(shù)據(jù)信息,從門店追溯回寶潔的上端供應鏈,例如寶潔的生產(chǎn)計劃環(huán)節(jié)通過在整條供應鏈上分享大數(shù)據(jù)技術,引爆零售業(yè)的生產(chǎn)效率革命。最終更快,更好,更高效地親近和美化更多消費者的生活!