Hadoop（HDFS） - 文件版本控制

Question

在给定时间，我的应用程序（apache CMIS）中有用户文件系统。 随着它越来越大，我怀疑是否要转向hadoop（HDFS），因为我们还需要对它进行一些统计。 问题：当前文件系统提供文件的版本控制。 当我读到hadoop - HDFS-和文件版本控制时，我发现大多数时候我必须自己编写这个（版本控制）层。 是否已有可用于管理HDFS中文件版本的东西，或者我是否真的必须自己编写（不想重新发明热水，但也找不到合适的解决方案）。

回答

有关详细信息：请参阅下面的答案评论

Hadoop（HDFS）不支持文件版本控制。 当您将hadoop与（amazon）S3结合使用时，您可以获得此功能：Hadoop将使用S3作为文件系统（没有chuncks，但S3将提供恢复）。 此解决方案附带S3提供的文件版本控制。 Hadoop仍将使用YARN进行分布式处理。

Answer 1

HDFS无法进行版本控制。
相反，您可以使用Amazon S3 ，它提供版本控制并且还与Hadoop 兼容 。

Answer 2

HDFS支持快照。 我认为这与使用HDFS进行“版本控制”的情况一样接近。