pj

Guia CLF Armazenamento

Índice

Os serviços de armazenamento da AWS atendem a diferentes necessidades, como guardar objetos, fornecer discos para instâncias, compartilhar arquivos e proteger dados com backups. A escolha depende de como os dados serão utilizados e do tipo de acesso necessário.

Tipos de armazenamento

TipoComo funcionaExemplos
ObjetosArmazena dados como objetos, identificados por chaves, em buckets.Amazon S3 e classes S3 Glacier.
BlocosFornece armazenamento que pode ser utilizado como disco por uma instância.Amazon EBS e EC2 Instance Store.
ArquivosOferece sistemas de arquivos compartilhados, acessados por protocolos como NFS ou SMB.Amazon EFS e Amazon FSx.

Persistência: o Amazon S3, o Amazon EBS e o Amazon EFS armazenam dados de forma persistente. Já o EC2 Instance Store é efêmero e deve ser usado para dados temporários ou que possam ser recriados.

Amazon Simple Storage Service (Amazon S3)

O Amazon S3 é um serviço de armazenamento de objetos utilizado para backups, arquivamento, repositórios de dados para análise, arquivos de aplicações, imagens, vídeos e conteúdo de sites estáticos.

  • Bucket: contêiner que armazena objetos, criado em uma Região AWS.
  • Objeto: um arquivo ou conjunto de dados armazenado, acompanhado de informações chamadas metadados.
  • Chave: identificador do objeto dentro do bucket.
  • Pastas: nos buckets de uso geral, são uma representação de prefixos das chaves. Não são diretórios tradicionais de um sistema de arquivos.
  • Consistência: o S3 oferece consistência forte após gravações e exclusões de objetos.

Classes de armazenamento do Amazon S3

A escolha depende da frequência de acesso, do tempo de recuperação aceitável, da resiliência necessária e do custo. Cada classe atende a um padrão de uso.

ClasseQuando usarPonto de atenção
S3 StandardDados acessados com frequência.Acesso em milissegundos e armazenamento em várias Zonas de Disponibilidade.
S3 Intelligent-TieringPadrões de acesso desconhecidos ou variáveis.Move automaticamente objetos elegíveis entre camadas conforme o acesso, ajudando a reduzir custos.
S3 Standard-IAAcesso pouco frequente, com recuperação imediata.Várias zonas; há cobrança de recuperação.
S3 One Zone-IADados recriáveis acessados com pouca frequência.Uma zona; não resiste à perda dessa zona.
S3 Glacier Instant RetrievalArquivamento com acesso raro e imediato.Recuperação em milissegundos.
S3 Glacier Flexible RetrievalArquivamento que tolera espera.É necessário restaurar o objeto. A recuperação leva minutos ou horas.
S3 Glacier Deep ArchiveRetenção de longo prazo com acesso muito raro.É necessário restaurar o objeto. A recuperação leva horas.
S3 Express One ZoneAplicações que exigem baixa latência.Uma zona, utilizando buckets de diretório.

As classes de acesso pouco frequente e arquivamento podem ter cobrança de recuperação e períodos mínimos de armazenamento. Por isso, o menor preço para guardar dados nem sempre significa o menor custo total.

Proteção e gerenciamento de dados

  • Criptografia: novos uploads são criptografados em repouso por padrão com chaves gerenciadas pelo S3 (SSE-S3). É possível configurar outras opções, como SSE-KMS.
  • Controle de acesso: utilize políticas do IAM e do bucket. ACLs estão desabilitadas por padrão em novos buckets, e o bloqueio de acesso público está habilitado por padrão.
  • Versionamento: mantém diferentes versões de objetos quando habilitado, ajudando a recuperar dados sobrescritos ou excluídos acidentalmente.
  • Ciclo de vida: automatiza a mudança de classe e a exclusão de objetos ou versões conforme regras. Por exemplo, arquivos antigos podem ser movidos para uma classe de arquivamento.
  • URL pré-assinada: permite compartilhar acesso temporário a um objeto privado sem tornar o bucket público.

A hospedagem de site estático no S3 atende a conteúdo estático e código executado no navegador. Ela não executa código de servidor, como PHP. Para entregar o conteúdo por HTTPS, podem ser utilizadas soluções como Amazon CloudFront ou AWS Amplify Hosting.

Amazon Elastic Block Store (Amazon EBS)

O Amazon EBS fornece volumes de armazenamento em bloco persistente para instâncias Amazon EC2. É adequado para discos de inicialização, bancos de dados e aplicações que precisam de acesso a um volume de disco.

  • O volume e a instância à qual ele é anexado devem estar na mesma Zona de Disponibilidade.
  • Os dados são replicados entre componentes dentro dessa zona. Isso não substitui um backup.
  • Uma instância pode utilizar vários volumes. Um volume também pode permanecer sem estar anexado a uma instância.
  • Existem volumes SSD e HDD para diferentes necessidades de desempenho e custo.
  • A cobrança considera os recursos provisionados, mesmo quando o volume não está anexado.

Volumes de unidade de estado sólido (SSD)

Os volumes SSD são adequados para aplicações que fazem muitas operações de leitura e gravação, como bancos de dados. IOPS representa a quantidade de operações de entrada e saída por segundo.

Tipo de volume SSDCaracterísticas
gp3Uso geral. Permite configurar IOPS e taxa de transferência separadamente da capacidade, respeitando os limites do serviço.
gp2Uso geral. O desempenho de base está relacionado ao tamanho do volume.
io2 Block ExpressIOPS provisionadas para aplicações críticas que exigem desempenho consistente e baixa latência.
io1IOPS provisionadas para cargas de trabalho que exigem muitas operações de leitura e gravação.

Volumes de disco rígido (HDD)

Os volumes HDD atendem a cargas de trabalho que leem e gravam grandes quantidades de dados de forma sequencial. O st1 é otimizado para taxa de transferência, enquanto o sc1 é voltado a dados acessados com pouca frequência. Esses tipos não podem ser usados como disco de inicialização da instância.

Normalmente, um volume EBS é anexado a uma única instância por vez. A exceção é o EBS Multi-Attach, disponível para volumes compatíveis io1 e io2, com requisitos específicos. Para compartilhar arquivos entre várias instâncias, considere um serviço de arquivos como o Amazon EFS.

Ao encerrar uma instância, um volume pode ser excluído ou preservado conforme sua configuração de exclusão. O volume raiz normalmente é excluído por padrão. Parar uma instância não exclui automaticamente seus volumes EBS.

Snapshots do EBS

Snapshots são backups de um volume EBS em um determinado momento. Os snapshots padrão são incrementais: após o primeiro, são armazenados os blocos alterados desde o snapshot anterior.

Os snapshots regionais são armazenados em infraestrutura do Amazon S3 gerenciada pela AWS. Eles são administrados pelas interfaces do EC2 e do EBS, e não como arquivos de um bucket do cliente. Um snapshot regional permite criar um novo volume em outra Zona de Disponibilidade da mesma Região.

Armazenamento de instância do Amazon EC2

O EC2 Instance Store fornece armazenamento temporário em discos fisicamente conectados ao host da instância. É útil para caches, buffers e dados temporários que podem ser recriados.

  • Os dados persistem durante uma reinicialização da instância.
  • Os dados são perdidos quando a instância é interrompida, hibernada ou encerrada, e também podem ser perdidos em falhas do disco subjacente.
  • Não utilize esse armazenamento como única cópia de dados importantes. Copie os dados que precisam ser preservados para armazenamento persistente.

Amazon Elastic File System (Amazon EFS)

O Amazon EFS é um serviço de armazenamento de arquivos elástico e totalmente gerenciado. Utiliza NFS e permite acesso compartilhado por várias instâncias e serviços de computação. É adequado para aplicações Linux, gerenciamento de conteúdo, servidores web e diretórios de usuários.

  • A capacidade cresce e diminui conforme os arquivos são adicionados ou removidos, sem provisionar previamente o tamanho do sistema de arquivos.
  • EFS Regional: armazena dados de forma redundante em várias Zonas de Disponibilidade da mesma Região.
  • EFS One Zone: armazena dados em uma única zona, com menor resiliência à perda dessa zona.
  • Permite que diferentes recursos de computação acessem os mesmos arquivos, conforme as permissões e a configuração de rede.

Amazon FSx

O Amazon FSx oferece sistemas de arquivos totalmente gerenciados. O Amazon FSx for Windows File Server é uma dessas opções, adequada para aplicações que precisam de compartilhamentos de arquivos Windows.

  • Utiliza o protocolo SMB e integra-se ao Microsoft Active Directory.
  • Oferece recursos como permissões de arquivos, cotas de usuários e backups.
  • Possui opções de implantação Single-AZ e Multi-AZ. A implantação Multi-AZ oferece alta disponibilidade e failover entre zonas.
  • Clientes Linux e macOS também podem acessar compartilhamentos SMB compatíveis.

AWS Storage Gateway

O AWS Storage Gateway conecta ambientes locais ao armazenamento na AWS. É indicado para cenários híbridos, como compartilhamento de arquivos, armazenamento de volumes e backup de fitas virtuais.

  • Amazon S3 File Gateway: disponibiliza compartilhamentos NFS e SMB. Os arquivos são armazenados como objetos no S3, com cache local para reduzir a latência.
  • Volume Gateway: fornece volumes em bloco por iSCSI. No modo cached volumes, os dados principais ficam na AWS e os mais acessados permanecem no cache local. No modo stored volumes, os dados principais ficam localmente, com backups na AWS.
  • Tape Gateway: oferece fitas virtuais para aplicações de backup, permitindo arquivar dados na AWS sem manter fitas físicas.

AWS Backup

O AWS Backup centraliza e automatiza a proteção de dados de recursos compatíveis, como Amazon EBS, Amazon EC2, Amazon EFS, Amazon S3, Amazon RDS, Amazon DynamoDB e Amazon FSx.

  • Planos de backup: definem frequência, retenção e regras de cópia.
  • Atribuição de recursos: determina quais recursos serão protegidos.
  • Cofres de backup: organizam e protegem os pontos de recuperação.
  • Monitoramento: permite acompanhar tarefas de backup e restauração.

Os recursos disponíveis variam conforme o serviço e a Região.

AWS Elastic Disaster Recovery

O AWS Elastic Disaster Recovery (AWS DRS) ajuda a recuperar aplicações após desastres. Replica continuamente os dados de servidores de origem para a AWS e permite iniciar instâncias de recuperação quando necessário.

É indicado para recuperar cargas de trabalho de ambientes locais ou de outras infraestruturas. A replicação e os testes de recuperação ajudam a reduzir a perda de dados e o tempo de indisponibilidade.

Diferença principal: o AWS Backup gerencia backups e pontos de recuperação; o AWS DRS concentra-se na replicação contínua e na recuperação de servidores e aplicações.

Referências