Lagos de dados

Documentação sobre lagos de dados

Nesta seção, veremos o suporte do ClickHouse a lagos de dados. O ClickHouse oferece suporte a muitos dos formatos de tabela e catálogos de dados mais populares, incluindo Iceberg, Delta Lake, Hudi, AWS Glue, Catálogo REST, Unity Catalog e Microsoft OneLake.

​

Formatos abertos de tabela

​

Iceberg

Consulte iceberg, que oferece suporte à leitura a partir do Amazon S3 e de serviços compatíveis com S3, HDFS, Azure e sistemas de arquivos locais. icebergCluster é a variante distribuída da função iceberg.

​

Delta Lake

Consulte deltaLake, que oferece suporte à leitura no Amazon S3, em serviços compatíveis com S3, no Azure e em sistemas de arquivos locais. deltaLakeCluster é a variante distribuída da função deltaLake.

​

Hudi

Consulte hudi, que oferece suporte à leitura a partir do Amazon S3 e de serviços compatíveis com S3. hudiCluster é a variante distribuída da função hudi.

​

Catálogos de dados

​

AWS Glue

O AWS Glue Data Catalog pode ser usado com tabelas Iceberg. Você pode usá-lo com o motor de tabela iceberg ou com o mecanismo de banco de dados DataLakeCatalog.

​

Catálogo REST do Iceberg

O Catálogo REST do Iceberg pode ser usado com tabelas Iceberg. Você pode utilizá-lo com o motor de tabela iceberg ou com o motor de banco de dados DataLakeCatalog.

​

Snowflake Horizon Catalog

O Snowflake Horizon Catalog disponibiliza a API REST do Iceberg para tabelas Iceberg gerenciadas pelo Snowflake. Use DataLakeCatalog com catalog_type = 'horizon'. Consulte o guia do catálogo Horizon.

​

Unity Catalog

O Unity Catalog pode ser usado com tabelas Delta Lake e Iceberg. Você pode usá-lo com os motores de tabela iceberg ou deltaLake, ou com o mecanismo de banco de dados DataLakeCatalog.

​

Microsoft OneLake

O Microsoft OneLake pode ser usado com tabelas Delta Lake e Iceberg. Você pode usá-lo com o mecanismo de banco de dados DataLakeCatalog.