[課程簡介]:現如今,大數據的應用并不僅存在于一些“理工類領域”,它已經滲透到我們生活的方方面面,將來,大數據在能源、金融、電信、汽車、消費等大多數行業都有用武之地,行業發展潛力巨大。去年,國內數據創業已是風起云涌,其實,2016才是真正意義上的大數據元年。據IDC預測,到2020年,大數據分析技術將成為所有國家經濟增長的關鍵動力。 ...
【時間地點】 | 2018年4月17-21日 上海(17日全天報到) | ||
【培訓講師】 | 張老師 | ||
【參加對象】 | 各地政府,院校云計算物聯網產業相關負責人,各類 IT/軟件企業和研發機構的軟件架構師、軟件設計師、程序員、技術總監、數據挖掘負責人、數據挖掘開發工程師等 | ||
【參加費用】 | ¥6800元/人 (含培訓費、考試費、證書費、資料費、午餐) 食宿統一安排,費用自理。 | ||
【會務組織】 | 森濤培訓網(m.gzlkec.com).廣州三策企業管理咨詢有限公司 | ||
【咨詢電話】 | 020-34071250;020-34071978(提前報名可享受更多優惠) | ||
【聯 系 人】 | 龐先生,鄧小姐;13378458028、18924110388(均可加微信) | ||
【在線 QQ 】 | 568499978 | 課綱下載 | |
【溫馨提示】 | 本課程可引進到企業內部培訓,歡迎來電預約! |
為貫徹落實黨中央國務院“十三五”規劃指導精神,實施網絡強國戰略,加快建設數字中國;構建高效信息網絡,推進物聯網發展;實施“互聯網+”行動計劃,促進多領域融合發展;實施國家大數據戰略,加快政府數據開放;加強數據安全包含,全面保障信息系統安全;推進軍民融合發展立法。要實施國家大數據戰略,把大數據作為基礎性戰略資源,全面實施促進大數據發展行動,加快推動數據資源共享開放和開發應用,助力產業轉型升級和社會治理創新。加快政府數據開放共享,促進大數據產業健康發展。
現如今,大數據的應用并不僅存在于一些“理工類領域”,它已經滲透到我們生活的方方面面,將來,大數據在能源、金融、電信、汽車、消費等大多數行業都有用武之地,行業發展潛力巨大。去年,國內數據創業已是風起云涌,其實,2016才是真正意義上的大數據元年。據IDC預測,到2020年,大數據分析技術將成為所有國家經濟增長的關鍵動力。大數據分析及其相關的市場的復合年增長率將達到26.4%,在2018年全球將發展到415億美元的規模。同時,IDC認為,到2020年大數據分析技術將成為所有國家經濟增長的關鍵動力。然而大數據架構最火熱的莫過于Hadoop,Spark和Storm這三種
課程目標
1、了解Hadoop與Spark的歷史及目前發展的現狀、以及Hadoop與Spark的技術特點,從而把握分布式計算框架及未來發展方向,在大數據時代能為企業的技術選型及架構設計提供決策參考。
2、全面掌握Hadoop與Spark的架構原理和使用場景,并通過貫穿課程的項目進行實戰鍛煉,從而熟練使用Hadoop進行MapReduce程序開發。課程還涵蓋了分布式計算領域的常用算法介紹,幫助學員為企業在利用大數據方面體現自身價值。
3、深入理解Hadoop與Spark技術架構,對Hadoop與Spark運作機制有清晰全面的認識,可以獨立規劃及部署生產環境的Hadoop與Spark集群,掌握Hadoop與Spark基本運維思路和方法,對Hadoop與Spark集群進行管理和優化。
師資介紹
張老師:阿里大數據高級專家,國內資深的Spark、Hadoop技術專家、虛擬化專家,對HDFS、MapReduce、HBase、Hive、Mahout、Storm、spark和openTSDB等Hadoop生態系統中的技術進行了多年的深入的研究,更主要的是這些技術在大量的實際項目中得到廣泛的應用,因此在Hadoop開發和運維方面積累了豐富的項目實施經驗。近年主要典型的項目有:某電信集團網絡優化、中國移動某省移動公司請賬單系統和某省移動詳單實時查詢系統、中國銀聯大數據數據票據詳單平臺、某大型銀行大數據記錄系統、某大型通信運營商全國用戶上網記錄、某省交通部門違章系統、某區域醫療大數據應用項目、互聯網公共數據大云(DAAS)和構建游戲云(Web Game Daas)平臺項目等。
培訓特色
注重應用:分析國內實際情況,結合國際、國內成功經驗。采用實戰的項目,讓學員在短時間內掌握Hadoop與Spark的搭建與配置。并進行高效的大數據清洗和分析。
形式靈活:互動課堂、免費技術沙龍、提供云計算項目建設咨詢、大數據Hadoop平臺的搭建。
頒發證書
參加相關培訓并通過考試的學員,可以獲得:
工業和信息化部頒發的-《大數據開發高級工程師證書》。該證書可作為專業技術人員職業能力考核的證明,以及專業技術人員崗位聘用、任職、定級和晉升職務的重要依據。注:請學員帶一寸彩照2張(背面注明姓名)、身份證復印件一張。
培訓內容(4天課程)
HADOOP模塊 |
課程主題 |
主要內容 |
案例和演示 |
模塊一 |
Hadoop在云計算技術的作用和地位 |
|
|
模塊二 |
Hadoop生態系統介紹和演示 |
|
|
模塊三 |
Hadoop組件詳解 |
|
|
模塊四 |
Hadoop安裝和部署 |
|
|
模塊五 |
Hadoop集群規劃 |
|
|
模塊六 |
MapReduce 算法原理 |
|
|
模塊七 |
編寫MapReduce高級程序 |
|
|
模塊八 |
集成Hadoop到現有工作流 |
|
|
模塊九 |
使用Hive和Pig開發及技巧 |
|
|
模塊十 |
Hbase安裝和使用 |
|
|
模塊十一 |
Hadoop2.0 集群探索 |
|
|
模塊十二 |
Hadoop企業級別案例解析 |
|
|
模塊十三 |
RedHadoop 企業版本 |
|
|
模塊十四 |
Spark |
Mapreduce、storm和spark模型的比較和使用場景介紹 |
模塊十五 |
Spark |
Spark安裝簡介 |
模塊十六 |
Spark |
Spark的運行架構 |
模塊十七 |
Spark |
• Scala基本語法與高階語法 |