>>> YieldNull
  • /blog
  • /archives
  • /github
  • /about

Entries tagged with Spark

  • Spark files 传输流程

    2018-07-14 18:49:37 / Spark /6661 hits

    在编写Spark应用时,有时需要使用到一些额外的jar包、额外的资源文件,因此在每个Executor上都需要一份files的拷贝。那么files是怎么被复制到各个Executor上的呢?本文将基于Spark 1.1.1来分析Spark files的传输流程。

    Read more...


  • Maven 仓库依赖网络分析

    2017-11-20 22:10:11 / Maven Spark /4487 hits

    使用 Spark GraphX 以及 Gephi 对 Maven 仓库中的 Artifact, Group 间的依赖网络进行可视化的分析。

    Read more...


  • « Previous
  • Next »

About this site © YieldNull,