Bem-vindo à documentação da Carlton, uma poderosa biblioteca de ingestão de dados na cloud. Carlton foi projetada para simplificar o processo de captura e transformação de dados armazenados em um data lake, seguindo os padrões de ingestão da arquitetura de medalhão da Databricks.
A arquitetura de medalhão organiza os dados em três camadas: Bronze, Silver, e Gold. Cada uma dessas camadas desempenha um papel crucial na preparação dos dados para consumo final, e Carlton automatiza as etapas necessárias para mover os dados entre essas camadas de forma eficiente.
- Captura de Dados: Carlton permite capturar dados de diversas fontes e armazená-los na camada Bronze do data lake.
- Transformação de Dados: Após a captura, os dados são transformados e movidos para as camadas Silver e Gold, garantindo que estejam prontos para consumo.
- Conformidade com Padrões: Todos os dados ingeridos e transformados seguem os padrões de ingestão e qualidade da arquitetura de medalhão da Databricks.
- Interface Simplificada: Carlton oferece uma interface fácil de usar para configuração e execução de pipelines de ingestão de dados.
Carlton é ideal para:
- Equipes de dados que precisam automatizar o processo de ingestão em ambientes de nuvem.
- Organizações que utilizam a arquitetura de medalhão da Databricks para gerenciar seus dados.
- Aplicações que exigem dados prontos para análise, ciência de dados ou aprendizado de máquina.
Para começar a utilizar Carlton, siga as instruções detalhadas na seção Instalação.
Interessado em contribuir? Confira as diretrizes na seção Contribuindo para saber como ajudar no desenvolvimento da Carlton.
Para informações detalhadas sobre a configuração, uso e exemplos, explore a documentação completa nas seções subsequentes.