1、什么是Spark GraphX,？

Spark GraphX是一個(gè)分布式的圖處理框架,。社交網(wǎng)絡(luò)中,，用戶與用戶之間會(huì)存在錯(cuò)綜復(fù)雜的聯(lián)系，如微信,、QQ,、微博的用戶之間的好友、關(guān)注等關(guān)系,，構(gòu)成了一張巨大的圖,，單機(jī)無(wú)法處理，只能使用分布式圖處理框架處理,，Spark GraphX就是一種分布式圖處理框架,。

2、Spark GraphX優(yōu)點(diǎn)：

相對(duì)于其他分布式圖計(jì)算框架,，Graphx最大的貢獻(xiàn),，也是大多數(shù)開(kāi)發(fā)喜歡它的原因是，在Spark之上提供了一站式解決方案,，可以方便且高效地完成圖計(jì)算的一整套流水作業(yè),；即在實(shí)際開(kāi)發(fā)中，可以使用核心模塊來(lái)完成海量數(shù)據(jù)的清洗與與分析階段,，SQL模塊來(lái)打通與數(shù)據(jù)倉(cāng)庫(kù)的通道,，Streaming打造實(shí)時(shí)流處理通道，基于GraphX圖計(jì)算算法來(lái)對(duì)網(wǎng)頁(yè)中復(fù)雜的業(yè)務(wù)關(guān)系進(jìn)行計(jì)算,，最后使用MLLib以及SparkR來(lái)完成數(shù)據(jù)挖掘算法處理,。

3、SparkGraphX的整體架構(gòu)

（1）存儲(chǔ)層和原語(yǔ)層：Graph類是圖計(jì)算的核心類,，內(nèi)部含有VertexRDD,、EdgeRDD和RDD。GraphImpl是Graph類的子類,，實(shí)現(xiàn)了圖操作,。

（2）接口層：在底層RDD的基礎(chǔ)之上實(shí)現(xiàn)Pragel模型，BSP模式的計(jì)算接口,。

（3）算法層：基于Pregel接口實(shí)現(xiàn)了常用的圖算法,。包含：PageRank、SVDPlusPlus,、TriangleCount,、ConnectedComponents、StronglyConnectedConponents等算法,。

4,、[2019好程序員大數(shù)據(jù)教程]如何快速入門SparkGraphx（33集視頻+源碼+筆記）

如何學(xué)習(xí)SparkGraphx？好程序員為大家準(zhǔn)備了33集視頻+源碼+筆記,，希望能對(duì)你學(xué)習(xí)有所幫助,。

（1）課程介紹

在本課程中,，主要講述了Graphx的特性、存儲(chǔ)原理,， 圖構(gòu)建的方法,、過(guò)程，構(gòu)建點(diǎn)集合,， PageRank算法,，代碼操作，深度優(yōu)先算法等,。

（2）本課程適用人群

具有一定大數(shù)據(jù)基礎(chǔ)的人群

（3）課程目錄：

01. Graphx的優(yōu)勢(shì)

02. 彈性分布式屬性圖（圖計(jì)算的優(yōu)勢(shì)）

03. Graphx圖存儲(chǔ)原理

04. Partition分區(qū)策略

05. Graphx中的vertices,、edges、triples

06. 圖構(gòu)建

07. 圖構(gòu)建之方法

08. 圖構(gòu)建之過(guò)程

09. 構(gòu)建點(diǎn)集合

10. 構(gòu)建點(diǎn)和邊的集合例子

11. 構(gòu)建邊集合

12. 構(gòu)建圖

13. 轉(zhuǎn)換操作（mapVertices）

14. 轉(zhuǎn)換操作（mapEdges,、mapTriplets）

15. 結(jié)構(gòu)操作

16. 關(guān)聯(lián)操作

17. 聚合操作（map階段）

18. 緩存操作

19. 代碼操作

20. 代碼操作（2）

21. 代碼操作（3）

22. 代碼操作（4）

23. 代碼操作（5） 

24. 代碼操作（6）

25. 深度優(yōu)先算法（上）

26. 深度優(yōu)先算法（中）

27. 深度優(yōu)先算法（下）

28. 聯(lián)通分量

29. 廣度優(yōu)先算法

30. PageRank算法（動(dòng)態(tài)和靜態(tài)）

31. PageRank（源碼解析）

32. PageRank（案例實(shí)現(xiàn)）

33. PageRank（測(cè)試總結(jié)）

尾注：

精心整理,，實(shí)屬不易，手動(dòng)點(diǎn)贊,，以示鼓勵(lì)

關(guān)注作者vx公眾號(hào)“好程序員”,，回復(fù)“DT2”即可領(lǐng)取33集“SparkGraphx從入門到精通”視頻+源碼+筆記！想學(xué)習(xí)大數(shù)據(jù)的小伙伴抓緊時(shí)間領(lǐng)??！