目录
1. Filesystem Catalog
概述
特点
适用场景
2. Hive Catalog
概述
特点
适用场景
Filesystem Catalog 与 Hive Catalog 的对比
总结
Apache Paimon 提供了多种 Catalog(元数据管理)方式,用于统一管理表的元数据,如表结构、存储位置、分区等。以下是 Filesystem Catalog 和 Hive Catalog 的特点及适用场景:
1. Filesystem Catalog
概述
Filesystem Catalog 是 Apache Paimon 的内置 Catalog,它将元数据直接存储在文件系统中(如 HDFS、S3、本地文件系统等)。元数据通过文件的形式(通常是 JSON 或其他结构化格式)组织,具备轻量化和简单易用的特点。
特点
- 轻量级:无需额外的元数据服务(如 Hive Metastore)。
- 简单易用:只需配置文件路径即可使用,适合开发和测试环境。
- 依赖性低:只依赖