Simplificando sua migração para as tabelas do Amazon S3 com o Clumio

Pontos principais

• O Apache Iceberg tornou-se um formato essencial para data lakehouses, e muitos clientes da AWS estão migrando das tabelas Iceberg gerenciadas pelo Glue para as tabelas Amazon S3 totalmente gerenciadas, em busca de melhor desempenho e automação.
• A Clumio permite um processo de migração fluido e compatível com o Iceberg, que ajuda a manter a integridade dos dados, os metadados e o histórico de versões, ao mesmo tempo em que oferece proteção imutável e isolada da rede.
• A plataforma realiza a migração por meio de um fluxo de trabalho simples de backup e restauração, ajudando a reduzir a necessidade de scripts personalizados ou configurações manuais.
• Em comparação com métodos manuais ou nativos de migração da AWS, a Clumio oferece uma opção mais rápida, escalável e resiliente para a modernização do data lakehouse corporativo.
• A parceria da Clumio com a AWS e a disponibilidade da solução no AWS Marketplace permitem que as organizações modernizem seus data lakes com segurança e confiança.

As cargas de trabalho de IA e análise sensíveis à latência dependem cada vez mais dos data lakehouses como sua arquitetura de dados subjacente. Entre os clientes da AWS que estão criando esses ambientes, o Apache Iceberg tornou-se um dos formatos de tabela que mais crescem no Amazon S3, oferecendo a consistência transacional, a evolução do esquema e o desempenho necessários para a análise moderna.

Atualmente, os clientes da AWS gerenciam tabelas Iceberg por meio do AWS Glue Data Catalog ou adotam a opção totalmente gerenciada da AWS, as Amazon S3 Tables, para otimizar as operações e melhorar o desempenho. À medida que os clientes da AWS avaliam a crescente importância de seus data lakehouses baseados em Iceberg, considerações sobre proteção, resiliência e migração para as Amazon S3 Tables naturalmente passam a fazer parte desse planejamento. Muitas equipes estão agora buscando uma maneira simples e confiável de migrar das tabelas Iceberg gerenciadas pelo Glue para as S3 Tables, ao mesmo tempo em que reforçam a proteção desses conjuntos de dados críticos. Como Parceira Global do Ano de 2025 da AWS na área de armazenamento, a Commvault está aprofundando sua colaboração com a AWS para ajudar os clientes a modernizar, proteger e otimizar seus dados na nuvem.

Por meio da Clumio, a Commvault oferece uma solução de resiliência cibernética compatível com o Iceberg e com isolamento físico para a AWS – e agora ajuda a automatizar a migração de tabelas do Iceberg registradas no AWS Glue Data Catalog para tabelas do Amazon S3, garantindo proteção e recuperação a longo prazo. Você pode iniciar sua avaliação gratuita no AWS Marketplace.

O desafio: opções limitadas para migrar para tabelas do S3

As organizações estão cada vez mais avaliando a migração de tabelas do Iceberg gerenciadas pelo Glue para tabelas do Amazon S3 totalmente gerenciadas, a fim de melhorar o desempenho do data lake e simplificar as operações. De acordo com a AWS, as tabelas do S3 podem oferecer um desempenho de consulta até três vezes mais rápido e um número de transações por segundo até dez vezes maior em comparação com as tabelas do Iceberg armazenadas em buckets do S3 de uso geral.

Muitas equipes também desejam delegar tarefas pesadas e rotineiras — como compactação, gerenciamento de instantâneos e limpeza de arquivos sem referência —, ao mesmo tempo em que reduzem os custos gerais de armazenamento e consulta. No entanto, as orientações existentes da AWS e da comunidade, como a estrutura de migração da AWS, descrevem um processo manual de várias etapas que exige scripts personalizados e orquestração. Migrar dados mantendo o esquema, os metadados e o histórico de versões pode ser demorado e propenso a erros, e a maioria das abordagens atuais se concentra na replicação, em vez da Recovery ou reversão compatível com o Iceberg. O suporte à migração da Clumio para tabelas do Apache Iceberg oferece recursos de migração e resiliência de nível empresarial, otimizados para o Iceberg, que faltavam nos data lakehouses modernos. Solicite uma demonstração para ver como a Clumio simplifica sua migração.

Como a Clumio simplifica a migração e a proteção

O Clumio para Apache Iceberg na AWS ajuda a automatizar a migração de tabelas do Iceberg registradas no AWS Glue Data Catalog para tabelas do Amazon S3, ao mesmo tempo em que garante a proteção a longo prazo desses ativos modernos de data lakehouse.

A mesma plataforma compatível com o Iceberg oferece backups isolados da rede e imutáveis, pontos de recuperação isolados, restaurações em um momento específico ou no nível de instantâneo, além de recursos de retenção que ajudam a atender aos requisitos de conformidade – ampliando a liderança da Commvault em resiliência cibernética na nuvem. A migração e a proteção andam de mãos dadas:

• Ajude a proteger as tabelas do Iceberg registradas no AWS Glue Data Catalog.
• Restaure-as como tabelas totalmente gerenciadas do Amazon S3.
• Continue ajudando a proteger essas tabelas do Iceberg com os recursos de resiliência cibernética da Clumio.

Para equipes que preferem a implantação de Infraestrutura como Código, a Clumio oferece um módulo Terraform disponível publicamente que é compatível com o Apache Iceberg. À medida que os clientes da AWS adotam as tabelas do Amazon S3, proteger esses ativos de dados modernos se torna ainda mais importante. Vetores de ameaça, como ransomware, exclusão acidental, alterações maliciosas ou equivocadas e comprometimento de contas, podem interromper os pipelines de IA e análise e levar a um reprocessamento oneroso. A Clumio ajuda os clientes a mitigar esses riscos com backups imutáveis e fisicamente isolados, além de opções flexíveis de Recovery entre contas, regiões, snapshots e pontos no tempo. Para uma análise mais aprofundada sobre por que os data lakehouses precisam de proteção específica, consulte “Preenchendo a lacuna na proteção dos data lakehouses”.

Como funciona – Do backup à restauração

O processo de migração com a Clumio segue um fluxo de trabalho simples de backup e restauração, projetado para minimizar o esforço e ajudar a manter a integridade das tabelas do Iceberg. Passo 1: Entre em contato com a equipe da Commvault para análise e aprovação do programa de migração. Entre em contato conosco. Etapa 2: Identifique e faça backup das tabelas do Iceberg registradas no AWS Glue Data Catalog, cujos dados subjacentes estão armazenados no S3, usando o Clumio.

Etapa 3: Restaure os backups da tabela do Iceberg — seja o histórico completo de instantâneos, um subconjunto selecionado ou uma versão específica de um determinado momento — como tabelas do Amazon S3 em qualquer conta ou região. Passo 4: Ative os backups incrementais para manter a proteção de suas novas tabelas do Amazon S3.

A arquitetura do Clumio ajuda a reduzir a necessidade de recuperação do Iceberg e contribui para garantir a consistência transacional dessa recuperação entre contas, regiões e instantâneos. Para ver o fluxo de trabalho completo de migração em ação — incluindo a descoberta do Iceberg, a seleção de backups, as opções de instantâneos e a restauração para tabelas do Amazon S3 —, assista ao vídeo de demonstração incorporado abaixo. Ele apresenta todo o fluxo de backup e restauração de ponta a ponta, mostrando como o Clumio lida com a migração de dados, metadados e instantâneos sem a necessidade de configuração manual.

Comparando opções de migração

Atualmente, a maioria das migrações para o Amazon S3 Tables depende de scripts manuais ou ferramentas nativas. Veja a seguir uma comparação entre esses métodos e a abordagem da Clumio, compatível com o Iceberg.

Solicite uma demonstração para saber como o Clumio simplifica a migração em grande escala.

Por que isso é importante para os clientes da AWS

À medida que os clientes da AWS modernizam seus data lakehouses, eles precisam de uma maneira simples e escalável de migrar tabelas do Iceberg para as Amazon S3 Tables e protegê-las contra riscos operacionais e cibernéticos. O Clumio oferece essa solução por meio de uma migração compatível com o Iceberg, aliada a uma proteção imutável e isolada da rede.

A AWS está trabalhando com a Commvault para ajudar os clientes a usar o Clumio tanto para proteção quanto para migração para as Tabelas do Amazon S3. A solução já está disponível no AWS Marketplace e oferece suporte a tabelas do Iceberg tanto em ambientes de Tabelas do S3 gerenciados pelo Glue quanto em ambientes totalmente gerenciados. Juntas, a Commvault e a AWS oferecem às empresas uma maneira simples e escalável de modernizar seus pipelines de dados de IA.

Para organizações que desejam reforçar a resiliência em toda a pilha de dados da AWS, consulte nossos blogs sobre como proteger dados do Amazon S3 com o Clumio e o Clumio Backtrack para o Amazon DynamoDB. Se desejar discutir sua estratégia de modernização de dados na AWS, entre em contato conosco.

Avançando com a Clumio e a AWS

À medida que as organizações modernizam suas plataformas de dados para IA, a Clumio as ajuda a migrar com segurança para o S3 Tables, manter a integridade dos dados e fortalecer sua resiliência cibernética. A Clumio simplifica a migração e a proteção, ajudando as organizações a proteger, recuperar e transferir seus dados mais valiosos com maior rapidez. Comece seu teste gratuito no AWS Marketplace.

Perguntas frequentes

P: Por que as organizações estão migrando das tabelas Iceberg autogerenciadas para as tabelas do Amazon S3? R: Muitas equipes estão migrando para as tabelas do S3 a fim de melhorar o desempenho e simplificar o gerenciamento. As tabelas do Amazon S3 oferecem um desempenho de consulta até três vezes mais rápido e uma taxa de processamento de transações 10 vezes maior do que as tabelas Iceberg autogerenciadas, ao mesmo tempo em que reduzem os custos operacionais.

P: Como o Clumio simplifica o processo de migração? R: O Clumio automatiza a migração por meio de um fluxo de trabalho de backup e restauração que mantém a consistência do esquema e dos metadados. Ele evita a criação manual de scripts e permite restaurar backups do Iceberg diretamente como tabelas do S3 em diferentes contas e regiões.

P: O que diferencia o Clumio de outras abordagens de migração? R: Ao contrário dos scripts criados pelo próprio usuário ou dos métodos nativos da AWS, o Clumio é compatível com o Iceberg e automatizado, além de oferecer recursos integrados de resiliência cibernética, como backups imutáveis, recuperação em um ponto específico no tempo e recursos de retenção que ajudam a atender aos requisitos de conformidade. P: Como o Clumio aprimora a proteção de dados durante e após a migração?
R: O Clumio fornece backups imutáveis e isolados que ajudam a proteger contra ransomware, exclusão acidental ou alterações maliciosas. Ele também oferece suporte à recuperação flexível entre instantâneos, contas e regiões. P: O Clumio já está disponível para os clientes da AWS? R: Sim, o Clumio está disponível no AWS Marketplace e se integra tanto ao AWS Glue quanto aos ambientes Amazon S3 Tables, permitindo que os clientes modernizem e protejam seus pipelines de dados de IA.

P: Qual é o primeiro passo para começar a usar o Clumio na migração de tabelas do S3? R: As organizações podem começar entrando em contato com a Commvault para obter a aprovação do programa de migração e, em seguida, usar o Clumio para identificar, fazer backup e restaurar tabelas Iceberg como tabelas do Amazon S3. Está disponível uma versão de avaliação gratuita no AWS Marketplace. Vir Choksi é gerente sênior de marketing de produtos da Commvault. Blogs relacionados

• Como a mudança para o Clumio proporcionou uma economia de 66,7% nos backups da AWS
• Preenchendo a lacuna na proteção do Data Lakehouse: Clumio para Apache Iceberg na AWS
• Clumio se destaca entre as novas soluções de agentes de IA no AWS Marketplace
• Protegendo seus dados do Amazon S3 com o Clumio: uma solução abrangente