小文件但数量大的数据库创建

Question

我有大量的小尺寸文件，这些文件可能是结构化的（Json、csv）或可能是非结构化的（视频）。 我想创建一个数据库，以系统的方式整合所有这些文件，将来可以用于数据分析。

到目前为止，我一直在考虑使用 HDF5、MongoDB 来完成这项任务。

请根据上述情况提出一些其他选项，以及 HDF5 和 MongoDB 中哪一个最好

Answer 1

在我看来，您可以将所有文件存储在 HDFS 中，但对于非结构化（视频）MangoDB 将是最好的。