Hadoop GPG SerDe

Question

我目前正在研究需要数据加密的Hadoop项目（因为数据将存储在S3中）。尽管我主要期望通过Hive访问数据，但能够通过Pig和任何其他MapReduce方法访问数据将会很好。

我知道Hadoop内置了对gzip，snappy等压缩编解码器的支持......还有对加密编解码器（特别是GPG）的支持吗？是否有人编写了公开发布的GPG SerDe（或类似的）？

Answer 1

最后我知道Hadoop没有任何内部的加密支持。好像你可以用你的GPG代码超载CompressionCodec，ala http://www.mail-archive.com/common-user@hadoop.apache.org/msg06229.html

快乐黑客&让我们知道你是否找到解决方案！