TECNOLOGIA

Meltano vai além do ELT para se tornar um ‘SO de operações de dados de código aberto’

Publicidade

[ad_1]

Meltanoa empresa de integração de dados saiu do GitLab no ano passado, apresentou hoje a versão 2.0 de sua plataforma. E para potencializar sua transição para o que chama de “open-source dataops OS”, a empresa também anunciou um novo financiamento inicial de US$ 8,2 milhões.

Estreando internamente no GitLab de volta em 2018, Meltano surgiu como o que é conhecido como uma plataforma “extrair, carregar, transformar” (ELT) que ajuda as empresas a “extrair” dados brutos de silos díspares (por exemplo, vários aplicativos SaaS); “carregar” esses dados em um warehouse ou sistema de armazenamento de arquivos; e “transformar” os dados em um formato padronizado que é mais fácil de analisar.

A Meltano ocupa um espaço mais amplo de integração de dados que inclui inúmeros incumbentes, desde gamers proprietários como Fivetran para iniciantes em código aberto como Airbyte. O Meltano, por sua vez, live diretamente no reino de código aberto e promete flexibilidade e extensibilidade aos engenheiros de dados – ele pode ser hospedado onde quiser e acessado por meio de suas próprias ferramentas de orquestração ou pela própria interface da Internet do Meltano.

Fita adesiva

Com o Meltano 2.0, que está oficialmente disponível hoje, Meltano diz que está encerrando a technology das “plataformas de dados com fita adesiva”, oferecendo um produto abrangente que as equipes podem usar para criar e gerenciar sua pilha de dados “perfect”.

Publicidade

O que isso significa é que a Meltano está indo além do ELT, empacotando ferramentas de toda a pilha de dados – da integração à inteligência de negócios (BI) e análise.

“Isso permite que não apenas os pipelines de dados de uma equipe sejam gerenciados como um projeto de tool, mas toda a plataforma de dados de ponta a ponta, de EL (extração e carregamento) a BI”, disse o CEO da Meltano, Douwe Maan, à VentureBeat.

Embora a plataforma Meltano seja um produto de código aberto por si só – lançado sob uma licença permissiva do MIT – na verdade, adota uma abordagem modular, apoiando-se em uma série de ferramentas de código aberto de terceiros, como dbtuma ferramenta de linha de comando para transformação de dados; Apache Airflow para orquestração; e Cantor, que é um “padrão de código aberto” para escrever scripts de integração de dados. E no início deste ano, Meltano introduziu suporte para padrão aberto de qualidade de dados Grandes Expectativas.

A empresa estava sempre planejando apoiar Superconjunto Apache para visualização de dados, e com a versão 2.0 esse plano agora se concretizou, com os usuários agora capazes de instalar, configurar, integrar, testar e implantar o Superset diretamente através do Meltano. Além disso, a Meltano também suporta ferramentas alternativas de visualização de dados e BI, como Lightdash e Proof.dev.

“Isso faz de Meltano o MVP [minimal viable product] de nossa visão de SO de dataops e o primeiro grande passo para lidar com a complexidade e a fragilidade da pilha de dados moderna de hoje, trazendo uma infraestrutura muito necessária para manter tudo junto e as melhores práticas de desenvolvimento de tool para permitir uma iteração rápida com confiança”, Maan continuou.

Noutras áreas, a Meltano alargou agora o âmbito da sua hub de plug-inspermitindo que os usuários encontrem não apenas conectores EL compatíveis, mas todas as ferramentas de código aberto para alimentar sua pilha de dados.

“Pretendemos que isso se torne uma biblioteca de todas as ferramentas de dados de código aberto no ecossistema, com Meltano a maneira mais fácil de instalá-las e usá-las juntas”, disse Maan.

Finalmente, o Meltano removeu vários recursos antigos, como sua funcionalidade herdada de BI / visualização que ele projetou internamente, que agora abre caminho para as encarnações de terceiros de código aberto mencionadas acima.

Do GitLab para o GitHub

O lançamento da versão 2.0 também segue emblem após Meltano migrou de sua casa authentic no GitLab sobre para o GitHub, que disse ser para apoiar seu crescimento contínuo na fraternidade de código aberto. Simplificando, o GitHub tem um alcance mais amplo em termos de projetos de ferramentas de dados orientados pela comunidade.

“O GitLab é uma ótima ferramenta para colaboração dentro das empresas, especialmente as totalmente remotas, e obviamente está no nosso coração desde que nascemos lá”, disse Maan. “Mas à medida que nosso crescimento acelera e a comunidade se diversifica, a mudança para o GitHub faz sentido.”

Em sua saída oficial do GitLab no ano passado, Meltano revelou uma rodada de financiamento inicial de US $ 4,2 milhões liderada pelo braço de capital de risco da Alphabet, GV, juntamente com uma série de investimentos anjo de nomes como o fundador do WordPress Matt Mullenweg e o antigo patrocinador do Google Ram Shriram. Meltano agora estendeu esta rodada inicial para US$ 12,4 milhões no general, com Venrock liderando o aumento adicional e GV, Uncorrelated Ventures e Information Tech Fund todos participando.

[ad_2]

Fonte da Notícia

Publicidade

Osmar Queiroz

Osmar é um editor especializado em tecnologia, com anos de experiência em comunicação digital e produção de conteúdo voltado para inovação, ciência e tecnologia.

Artigos relacionados

Botão Voltar ao topo
HexTec News