衡阳派盒市场营销有限公司

您好,歡迎來電子發燒友網! ,新用戶?[免費注冊]

您的位置:電子發燒友網>源碼下載>數值算法/人工智能>

一種在分布式環境下實現冪迭代聚類的方法

大小:0.69 MB 人氣: 2017-12-11 需要積分:1

  為解決冪迭代聚類算法并行實現中存在的編程繁瑣、效率低下等問題,基于Spark大規模數據通用計算引擎及其GraphX組件,提出了一種在分布式環境下實現冪迭代聚類的方法。首先,利用某種相似性度量方法,將原始數據轉換成一個可以視為圖的親和矩陣;然后,通過頂點切割,把行歸一化后的親和矩陣切分成若干個小圖,分別存儲在不同的機器上;最后,利用Spark基于內存計算的特點,對存儲在集群中的圖進行多次迭代計算,得到這個圖的一個切割,圖的每一個劃分子圖對應一個類簇。在不同規模的數據集和不同executor個數下進行的實驗結果表明,基于GraphX的分布式冪迭代聚類算法具有良好的可擴展性,算法運行時間與executor個數呈負相關的線性關系,在6個executor下,與單個executor相比,算法的加速比達到了2.09到3.77。同時,通過與基于Hadoop的冪迭代聚類進行對比,在新聞數量為40000篇時,運行時間降低了6l%。

一種在分布式環境下實現冪迭代聚類的方法

非常好我支持^.^

(0) 0%

不好我反對

(0) 0%

      發表評論

      用戶評論
      評價:好評中評差評

      發表評論,獲取積分! 請遵守相關規定!

      ?
      百家乐赢谷输缩| 罗盘24山作用| 百家乐官网信息| 大发888怎么了| 捷豹百家乐官网的玩法技巧和规则 | 宝龙百家乐官网娱乐城| 连环百家乐官网的玩法技巧和规则 | 大发888中文版下载| 百家乐智能投注系统| 七胜百家乐官网娱乐平台| 鱼台县| 大发888扑克合营商| 百家乐香港六合彩| 金博士百家乐官网娱乐城 | 六合彩报纸| 怎么看百家乐走势| 百家乐分析博彩正网| 百家乐官网赌博现金网平台排名| 百家乐官网外挂程式| 庆城县| 沙龙开户| 大发888合作伙伴| 百家乐二号博彩正网| 杨公风水24山分金水法| 百家乐官网庄闲机率| bet365扑克| 娱乐城注册送奖金| 申城棋牌2.0| 六合彩资料| 新皇冠现金网怎么样| 百家乐官网赌博代理| 百家乐官网投注秘笈| 现金百家乐官网破解| 金域百家乐官网娱乐城| 百家乐官网网站制作| 富二代百家乐的玩法技巧和规则 | 百家乐官网平台是最好的娱乐城 | 网上百家乐官网骗人的| 大亨百家乐官网娱乐城| 百家乐官网游戏真人游戏| 百家乐官网如何写路|