猪分布式缓存

Question

getShipFiles和getCacheFiles在EvalFunc类中有什么区别？

假设此方法中指定的任何文件都可从分布式缓存中为exec方法所用

Answer 1

getCacheFiles()允许UDF指定它希望放在分布式缓存.中的hdfs文件列表。

getShipFiles()允许UDF指定它希望放在分布式缓存中的本地文件列表.

因此，getShipFiles从本地文件中获取文件，缓存从HDFS中获取它们。