Skip to content
Clumio

Simplifying Your Migration to Amazon S3 Tables with Clumio

Commvault offering provides an automated, scalable, and resilient option for enterprise data lakehouse modernization.


Pontos principais

  • O Apache Iceberg tornou-se um formato essencial para data lakehouses,emuitos clientes da AWS estão migrando das tabelas Iceberg gerenciadas pelo Glue para as tabelas Amazon S3 totalmente gerenciadas, em busca de melhor desempenhoeautomação.
  • A Clúmio permite um processo de migração fluidoecompatível com o Iceberg, que ajuda a manter a integridade dos dados, os metadadoseo histórico de versões, ao mesmo tempo em que oferece proteção imutáveleisolada da rede.
  • A platform a migração por meio de um fluxo de trabalho simples de backuperestauração, ajudando a reduzir a necessidade de scripts personalizados ou configurações manuais.
  • Em comparação com métodos manuais ou nativos de migração da AWS, a Clúmio oferece uma opção mais rápida, escaláveleresiliente para a modernização do data lakehouse corporativo.
  • A parceria da Clúmio com a AWSea disponibilidade da solução no AWS Marketplace permitem que as organizações modernizem seus data lakes com segurançaeconfiança.

As cargas de trabalho de IAeanálise sensíveis à latência dependem cada vez mais dos data lakehouses como sua arquitetura de dados subjacente. Entre os clientes da AWS que estão criando esses ambientes, o Apache Iceberg tornou-se um dos formatos de tabela que mais crescem no Amazon S3, oferecendo a consistência transacional, a evolução do esquemaeo desempenho necessários para a análise moderna.Atualmente, os clientes da AWS gerenciam tabelas Iceberg por meio do AWS Glue Data Catalog ou adotam a opção totalmente gerenciada da AWS, as Amazon S3 Tables, para otimizar as operaçõesemelhorar o desempenho. À medida que os clientes da AWS avaliam a crescente importância de seus data lakehouses baseados em Iceberg, considerações sobre proteção, resiliênciaemigração para as Amazon S3 Tables naturalmente passam a fazer parte desse planejamento. Muitas equipes estão agora buscando uma maneira simpleseconfiável de migrar das tabelas Iceberg gerenciadas pelo Glue para as S3 Tables, ao mesmo tempo em que reforçam a proteção desses conjuntos de dados críticos. Como Parceira Global do Ano de 2025 da AWS na área de armazenamento, a Commvault está aprofundando sua colaboração com a AWS para ajudar os clientes a modernizar, protegereotimizar seus dados cloud.Por meio da Clúmio, a Commvault oferece umasolução de resiliência cibernética compatível com o Icebergecom isolamento físico para a AWS –eagora ajuda a automatizar a migração de tabelas do Iceberg registradas no AWS Glue Data Catalog para tabelas do Amazon S3, ao mesmo tempo em que garante proteçãoerecuperação a longo prazo. Você pode iniciar sua avaliação gratuita no AWS Marketplace.

O desafio: opções limitadas para migrar para tabelas do S3

As organizações estão cada vez mais avaliando a migração de tabelas Iceberg gerenciadas pelo Glue para tabelas Amazon S3 totalmente gerenciadas, a fim de melhorar o desempenho do data lakeesimplificar as operações. De acordo com a AWS, as tabelas S3 podem oferecer o desempenho das consultas até três vezes mais rápidoeum número de transações por segundo até dez vezes maior em comparação com as tabelas Iceberg armazenadas em buckets S3 de uso geral.Muitas equipes também desejam delegar tarefas pesadaserotineiras — como compactação, gerenciamento de instantâneoselimpeza de arquivos sem referência —, ao mesmo tempo em que reduzem os custos gerais de armazenamentoeconsulta. No entanto, as orientações existentes da AWSeda comunidade, como a estrutura de migração da AWS, descrevem um processo manual de várias etapas que exige scripts personalizadoseorquestração. Migrar dados mantendo o esquema, os metadadoseo histórico de versões pode ser demoradoepropenso a erros,ea maioria das abordagens atuais se concentra na replicação, em vez de na Recovery ou reversão compatível com o Iceberg. O suporte à migração da Clúmio para tabelas do Apache Iceberg oferece recursos de migraçãoeresiliência de nível empresarial, otimizados para o Iceberg, que faltavam nos data lakehouses modernos. Solicite uma demonstração para ver como a Clúmio simplifica sua migração.

Como a Clúmio simplifica a migraçãoea proteção

O Clúmio para Apache Iceberg na AWS ajuda a automatizar a migração de tabelas do Iceberg registradas no AWS Glue Data Catalog para tabelas do Amazon S3, ao mesmo tempo em que garante a proteção a longo prazo desses ativos modernos de data lakehouse.A mesma platform compatível com o Iceberg platform backups isolados da redeeimutáveis, pontos de recuperação isolados, restaurações em um momento específico ou no nível de instantâneo, além de recursos de retenção que ajudam a atender aos requisitos de conformidade – ampliando a liderança da Commvault em resiliência cibernética cloud. A migraçãoea proteção andam de mãos dadas:

  • Ajude a proteger as tabelas do Iceberg registradas no AWS Glue Data Catalog.
  • Restaure-as como tabelas totalmente gerenciadas do Amazon S3.
  • Continue ajudando a proteger essas tabelas do Iceberg com os recursos de resiliência cibernética da Clúmio.

Para equipes que preferem a implantação de Infraestrutura como Código, a Clúmiooferece ummódulo Terraform disponível publicamente que é compatível com o Apache Iceberg. À medida que os clientes da AWS adotam as tabelas do Amazon S3, proteger esses ativos de dados modernos se torna ainda mais importante. Vetores de ameaça, como Ransomware, exclusão acidental, alterações maliciosas ou equivocadasecomprometimento de contas, podem interromper os pipelines de IAeanáliseelevar a um reprocessamento oneroso. Clúmio ajuda os clientes a mitigar esses riscos com backups imutáveiseisolados fisicamente, além de opções flexíveis de Recovery entre contas, regiões, snapshotsepontos no tempo. Para uma análise mais aprofundada sobre por que os data lakehouses precisam de proteção específica, consulte “Preenchendo a lacuna na proteção de data lakehouses”.

Como funciona – Do backup à restauração

O processo de migração com o Clúmio segue um fluxo de trabalho simples de backuperestauração, projetado para minimizar o esforçoeajudar a manter a integridade das tabelas Iceberg. Passo 1: Entre em contato com a equipe da Commvault para análiseeaprovação do programa de migração. Entre em entre em entre em contato conosco. Etapa 2: Identifiqueefaça backup das tabelas do Iceberg registradas no AWS Glue Data Catalog, cujos dados subjacentes estão armazenados no S3, usando o Clúmio.Etapa 3: Restaure backups da tabela Iceberg — seja o histórico completo de instantâneos, um subconjunto selecionado ou uma versão específica de um determinado momento — como tabelas do Amazon S3 em qualquer conta ou região. Passo 4: Ative os backups incrementais para manter a proteção das suas novas tabelas do Amazon S3.A arquitetura da Clúmio ajuda a reduzir a necessidade de recuperação do Icebergecontribui para garantir a consistência transacional dessa recuperação entre contas, regiõeseinstantâneos. Para ver o fluxo de trabalho completo de migração em ação – incluindo a descoberta do Iceberg, a seleção de backups, as opções de instantâneosea restauração para tabelas do Amazon S3 –, assista ao vídeo de demonstração incorporado abaixo. Ele apresenta todo o fluxo de backuperestauração de ponta a ponta, mostrando como o Clúmio lida com a migração de dados, metadadosesnapshots sem a necessidade de configuração manual.

Comparando opções de migração

Atualmente, a maioria das migrações para o Amazon S3 Tables depende de scripts manuais ou ferramentas nativas. Veja a seguir uma comparação entre esses métodosea abordagem da Clúmio, compatível com o Iceberg.

Método Descrição Considerações importantes
Scripts DIY/
ferramentas de código aberto
Scripts personalizados que utilizam as APIs do Athena ou do Glue para copiar dadosemetadados Ideal para equipes com experiência em scriptsenecessidades específicas de migração
Processos nativos da AWS/
instantâneos
A documentação da AWSeos guias da comunidade descrevem migrações baseadas em snapshots ou orientadas por consultas Ideal para equipes que utilizam serviços nativos da AWSegerenciam processos de migração em várias etapas
Clúmio Solução de backuperecuperação SaaSecompatível com o Iceberg para a AWS Fluxo de trabalho de migração simplesecompatível com o Iceberg, que ajuda a preservar os metadadosea linhagem dos instantâneos, ao mesmo tempo em que integra a proteção contínua

Solicite uma demonstração para saber como o Clúmio simplifica a migração em grande escala.

Por que isso é importante para os clientes da AWS

À medida que os clientes da AWS modernizam seus data lakehouses, eles precisam de uma maneira simpleseescalável de migrar tabelas do Iceberg para as Amazon S3 Tableseprotegê-las contra riscos operacionaisecibernéticos. A Clúmio oferece essa solução por meio de uma migração compatível com o Iceberg, aliada a uma proteção imutáveleisolada da rede.A AWS está trabalhando com a Commvault para ajudar os clientes a usar o Clúmio tanto para proteção quanto para migração para as Tabelas do Amazon S3. A solução já está disponível no AWS Marketplaceeoferece suporte a tabelas do Iceberg tanto em ambientes de Tabelas do S3 gerenciadas pelo Glue quanto em ambientes totalmente gerenciados. Juntas, a Commvaultea AWS oferecem às empresas uma maneira simpleseescalável de modernizar seus pipelines de dados de IA.Para organizações que desejam reforçar a resiliência em toda a pilha de dados da AWS, consulte nossos blogs sobre como proteger dados do Amazon S3 com o Clúmioeo Clúmio Backtrack para o Amazon DynamoDB. Se desejar discutir sua estratégia de modernização de dados na AWS, entre em entre em entre em contato conosco.

Avançando com a Clúmioea AWS

À medida que as organizações modernizam suas plataformas de dados para IA, a Clúmio as ajuda a migrar com segurança para o S3 Tables, manter a integridade dos dadosefortalecer sua resiliência cibernética. A Clúmio simplifica a migraçãoea proteção, ajudando as organizações a proteger, recuperaretransferir seus dados mais valiosos com maior rapidez. Comece seu teste gratuito no AWS Marketplace.


Perguntas frequentes

P: Por que as organizações estão migrando das tabelas Iceberg autogerenciadas para as tabelas do Amazon S3? R: Muitas equipes estão migrando para as tabelas do S3 a fim de melhorar o desempenhoesimplificar o gerenciamento. As tabelas do Amazon S3 oferecem o desempenho das consultas até três vezes mais rápidoeuma taxa de processamento de transações 10 vezes maior do que as tabelas Iceberg autogerenciadas, ao mesmo tempo em que reduzem os custos operacionais.P: Como o Clúmio simplifica o processo de migração? R: O Clúmio automatiza a migração por meio de um fluxo de trabalho de backuperestauração que mantém a consistência do esquemaedos metadados. Ele evita a criação manual de scriptsepermite restaurar backups do Iceberg diretamente como tabelas S3 em diferentes contaseregiões.P: O que diferencia o Clúmio de outras abordagens de migração? R: Ao contrário dos scripts criados pelo próprio usuário ou dos métodos nativos da AWS, o Clúmio é compatível com o Icebergeautomatizado, além de oferecer recursos integrados de resiliência cibernética, como backups imutáveis, recuperação em um ponto específico no tempoerecursos de retenção que ajudam a atender aos requisitos de conformidade. P: Como o Clúmio aprimora a proteção de dados duranteeapós a migração?
R: O Clúmio fornece backups imutáveiseisolados que ajudam a proteger contra Ransomware, exclusão acidental ou alterações maliciosas. Ele também oferece suporte à recuperação flexível entre instantâneos, contaseregiões. P: O Clúmio já está disponível para os clientes da AWS? R: Sim, o Clúmio está disponível no AWS Marketplaceese integra tanto ao AWS Glue quanto aos ambientes Amazon S3 Tables, permitindo que os clientes modernizemeprotejam seus pipelines de dados de IA.P: Qual é o primeiro passo para começar a usar o Clúmio para a migração de tabelas do S3? R: As organizações podem começar entrando em contato com a Commvault para obter a aprovação do programa de migração e, em seguida, usar o Clúmio para identificar, fazer backuperestaurar tabelas Iceberg como tabelas do Amazon S3. Está disponível uma versão de avaliação gratuita no AWS Marketplace. Vir Choksi é gerente principal de marketing de produtos da Commvault. Blogs relacionados

More related posts


Clumio

Read more about Clumio