班級規(guī)模及環(huán)境--熱線:4008699035 手機(jī):15921673576( 微信同號) |
每期人數(shù)限3到5人。 |
上課時間和地點(diǎn) |
上課地點(diǎn):【上海】:同濟(jì)大學(xué)(滬西)/新城金郡商務(wù)樓(11號線白銀路站) 【深圳分部】:電影大廈(地鐵一號線大劇院站)/深圳大學(xué)成教院 【北京分部】:北京中山學(xué)院/福鑫大樓 【南京分部】:金港大廈(和燕路) 【武漢分部】:佳源大廈(高新二路) 【成都分部】:領(lǐng)館區(qū)1號(中和大道) 【沈陽分部】:沈陽理工大學(xué)/六宅臻品 【鄭州分部】:鄭州大學(xué)/錦華大廈 【石家莊分部】:河北科技大學(xué)/瑞景大廈 【廣州分部】:廣糧大廈 【西安分部】:協(xié)同大廈
最近開課時間(周末班/連續(xù)班/晚班):2020年3月16日 |
實(shí)驗(yàn)設(shè)備 |
☆資深工程師授課
☆注重質(zhì)量
☆邊講邊練
☆合格學(xué)員免費(fèi)推薦工作
★實(shí)驗(yàn)設(shè)備請點(diǎn)擊這兒查看★ |
質(zhì)量保障 |
1、培訓(xùn)過程中,如有部分內(nèi)容理解不透或消化不好,可免費(fèi)在以后培訓(xùn)班中重聽;
2、培訓(xùn)結(jié)束后,授課老師留給學(xué)員聯(lián)系方式,保障培訓(xùn)效果,免費(fèi)提供課后技術(shù)支持。
3、培訓(xùn)合格學(xué)員可享受免費(fèi)推薦就業(yè)機(jī)會。 |
課程大綱 |
|
《Spark大數(shù)據(jù)平臺》課程
主要內(nèi)容:
1.Spark在Ubuntu虛擬機(jī)上的分布式集群環(huán)境搭建
2.基于Python的Spark編程基礎(chǔ)
3.Spark MLlib的使用(.py文件):回歸預(yù)測、聚類、關(guān)聯(lián)規(guī)則、神經(jīng)網(wǎng)絡(luò)預(yù)測
4.Spark在阿里云的使用(.py文件)
5.Spark在AWS亞馬遜云的使用
6.預(yù)測算法介紹
課程大綱:
1.Spark入門及生態(tài)體系
概述
Spark生態(tài)
Spark(內(nèi)存計(jì)算框架)
SparkSteaming(流式計(jì)算框架)
Spark SQL(ad-hoc)
Mllib(Machine Learning)
GraphX(bagel將被取代)
彈性分布式數(shù)據(jù)集(RDD)
2.Python Spark基礎(chǔ)介紹
Spark 編程模型
RDD緩存策略
Spark Python編程入門
PySpark
惰性計(jì)算(Lazy Evaluation)
流水線(Pipelines)
3.分布式集群搭建
Spark-1.6.1、Hadoop-2.6.4、VMware Ubuntu分布式集群搭建全過程
Ubuntu基本環(huán)境配置
集群安裝準(zhǔn)備
安裝配置Hadoop
安裝配置Spark
4.基于Python的Spark編程實(shí)戰(zhàn)
概述
連接Spark
初始化Spark
使用命令行
彈性分布式數(shù)據(jù)集(RDD)
RDD操作
RDD持久化
在集群上部署
用Python編寫的一個簡單Spark應(yīng)用
5.Spark MLlib的使用
機(jī)器學(xué)習(xí)概念
Spark MLlib介紹
Spark MLlib架構(gòu)解析
MLlib的算法庫分析
用Spark Python構(gòu)建分類模型
使用 Spark MLlib 做 K-means 聚類分析
6.Spark在阿里云的使用
阿里云服務(wù)介紹
阿里云搭建Spark集群過程
計(jì)算π值和Kmeans實(shí)驗(yàn)
7.spark在AWS亞馬遜云的使用
亞馬遜AWS云服務(wù)的內(nèi)容
亞馬遜的EMR中提供的3種主要組件
Spark on Amazon EMR架構(gòu)解析
應(yīng)用案例:構(gòu)建1000個節(jié)點(diǎn)的Spark集群
Spark應(yīng)用
8.預(yù)測算法介紹
用Spark Python構(gòu)建回歸模型
9.案例介紹
使用 Spark 模塊解析
?
?
·
?
?
?
?
?
?
?
?
?
?
?
?
?
?
|