Get Mystery Box with random crypto!

这段时间做了点与 Apache Flink 相关的工作,对大数据计算引擎有了 | Phonograph

这段时间做了点与 Apache Flink 相关的工作,对大数据计算引擎有了一些非常浅薄的理解。 如果大家以前只是普通的 Spark Flink 的用户,想去稍微深入地做一些原理上的理解,可以从它们的 shuffle 过程看起。比如你可以去谷歌上搜索 MapReduce shuffle。其他计算引擎的这个过程也可以看看,做一些对比。 这个过程之所以重要,是因为它直接决定了数据是如何从一个算子流向另一个算子的。