需要有大数据技能才能成为算法工程师。

如何通过分布式方法实现数据的离线处理，算法处理成千上万甚至更多的数据可以说是家常便饭。使用大数据可以加快数据处理。早期有mapreduce，现在的spark在hadoop生态下也很成熟。这些方法可以用来处理，可以大大提高处理效率