Amazon S3 Express One Zone

Prepare-se para elevar seus projetos de armazenamento a um novo patamar com o Amazon S3 Express One Zone.

Data: 26/03/2024

Por Kauê Fernandes Braz

O Amazon S3 Express One Zone é uma novidade de armazenamento para quem busca alta performance. Quer saber como funciona? Acompanhe neste blog abaixo.

O que é?

O Amazon S3 Express One Zone é uma nova classe de armazenamento que foi provisionada para aplicações que precisam de alta performance, acesso aos dados em milissegundos. Comparado com o S3 Standard, o Express One Zone é 10x mais rápido, custo 50% menor de requisições de API e escala elasticamente para processar milhões de requisições por minuto. Para aumentar a performance, os recursos devem ser mantidos em uma mesma zona de disponibilidade e garantem que esta nova classe é voltada para uso com serviços como:

Amazon SageMaker
Amazon EMR
Amazon Athena
AWS Glue
Amazon ECS
AWS Lambda
Amazon EC2

Benefícios

Velocidade Sem Precedentes: Oferece velocidades de acesso aos dados até 10 vezes mais rápidas do que a classe S3 Standard, com custos de solicitação 50% mais baixos, proporcionando um impulso significativo no desempenho.
Flexibilidade de Armazenamento: Elasticidade de desempenho semelhante a outras classes de armazenamento S3, permitindo escalonamento contínuo da capacidade de armazenamento conforme a demanda.
Disponibilidade e Redundância: Projetada para uma disponibilidade de 99,95% numa única Zona de Disponibilidade, respaldada pelo Acordo de Nível de Serviço do Amazon S3. O armazenamento redundante em vários dispositivos garante acesso ininterrupto aos dados, mesmo diante de falhas simultâneas de dispositivos.
Armazenamento Co-Localizado: Exclusivo do S3 Express One Zone, permite que os usuários escolham uma única Zona de Disponibilidade, maximizando a velocidade de acesso.
Tipo de Bucket de Diretório: Introduz um novo tipo de bucket, o bucket de diretório do Amazon S3, otimizando a velocidade de acesso e suportando centenas de milhares de transações por segundo.

Demonstração

Para a criação de um S3 Express One Zone, há novas etapas de configurações a serem feitas durante a implementação de um novo bucket. Ao criar um bucket, selecione o Diretório como o Tipo de Bucket, esta opção usa o S3 Express One Zone.

Para otimizar a baixa latência, os objetos são armazenados em uma única AZ, então você precisa especificar a região e uma AZ e após a implementação do bucket o ID da AZ vai ser automaticamente incluso no sufixo do nome do bucket. Ao selecionar a AZ, reconheça que os dados podem ser perdidos em caso de interrupção da zona de disponibilidade, insira o nome do seu Bucket conforme as regras de nomenclatura e prossiga com a configuração.

Continuando com a configuração, quando selecionamos o diretório como tipo de bucket, algumas configurações não podem ser modificadas, por exemplo, a propriedade do objeto onde as ACLs são desabilitadas, o acesso público é bloqueado e a criptografia utilizada é de SSE-S3.

Contudo, com o bucket implementado, será possível realizar upload de suas pastas e arquivos para armazenamento. Entretanto, algumas features não são suportadas dentro do S3, como na parte de Propriedades do Bucket, que não podem ser alteradas e em permissões, onde só é possível alterar na política do bucket.

Conclusão

O S3 Express One Zone é uma classe inovadora de armazenamento divulgada durante o Re:Invent de 2023. Ela oferece velocidade e flexibilidade que superam a das outras classes de armazenamento, tornando-se uma escolha convincente para aplicações onde a minimização da latência é o ponto crucial. Se for utilizada para fluxos de trabalho interativos ou análises intensivas de dados, seus recursos exclusivos e benefícios de desempenho tornam esta classe uma peça valiosa ao armazenamento da aplicação na AWS.

Kauê Braz Assistente de Infraestrutura em Nuvem.
kaue.braz@darede.com.br

Kauê Braz é formado em Técnico em Redes de Computadores pelo SENAI e atualmente cursa Análise e Desenvolvimento de Sistemas pela FIAP. Ele possui as Certificações AWS: Cloud Practitioner, Solutions Architect Associate e Developer Associate.

OUTRAS PUBLICAÇÕES

Novidades da semana – 22 a 26 de março

Por Flávio Rescia Todos os dias a AWS lança uma série novidades e atualizações em seus produtos que visam melhorar a vida de seus usuários. Reunimos algumas delas que fazem mais sentido para nosso mercado e que certamente aplicaremos em nosso dia a dia. Confira as novidades da última semana. Segurança e Governança AWS Cost Categories – Suporte a hierarquia e valores default O AWS Cost Categories permite criar uma visão baseada em categorias compostas de contas, tags, tipos de serviços etc. Ou seja, agora é possível ter subcategorias baseadas nesses atributos e “setar” uma categoria padrão para o que não for categorizado AWS License Manager – Recurso de exclusão de condições para licenças AWS License Manager é um serviço gratuito da AWS que permite controlar licenças na AWS e onPremise, e agora é possível excluir determinadas condições para não consumirem licenças gerenciadas pelo serviço. AWS Security Hub – Suporte à integração com dados do Amazon Macie AWS Security Hub, que concentra diversos serviços de segurança da AWS agora suporta adicionar automaticamente os dados do Macie, serviço gerenciado que busca por dados sensíveis em massa de dados. AWS Audit Manager – Compatibilidade com PCI e suporte a CIS AWS Foundation Benchmark AWS Audit Manager, um serviço que foi lançado no Re:Invent 2020 e que concentra inventário para auditoria, já é compatível com PCI, e agora também suporta CIS AWS Foundation Benchmark Level 1 e 2. AWS Backup – Recurso de deleção em lote AWS Backup, o serviço de gerenciamento de backup compatível com diversos serviços como EFS, RDS, S3, FSx e outros, agora possui recurso para deleção em lote, o Bulk Deletion, onde é possível deletar diversos pontos de restore em apenas uma chamada. AWS SSO – Suporte a Virtual Studio Code Toolkit AWS SSO agora é suportado pelo Visual Studio Code Toolkit, ou seja, a novidade possibilita integrar a autenticação do serviço diretamente com seu VSCode. Na postagem do Blog da AWS, Garret Sweetwood dá detalhes de como usar a integração. Amazon CloudTrail – Versão com DynamoDB com nova funcionalidade Nova funcionalidade do CloudTrail com o DynamoDB, agora no CloudTrail é possível registrar eventos que aconteceram no nível do banco de dados, podendo incluir quem e quando foi feito chamadas no DynamoDB, sendo possível habilitar baseado em tabelas ou filtros de leitura e escrita. Database & Compute Amazon Timestream – Suporte a VPC Amazon Timestream, o banco de dados time series da AWS agora possui suporte a VPC Endpoint, o que traz mais segurança além de redução de custo para alguns cenários. AWS Proton – Novo recurso para templates do serviço AWS Proton, serviço de gerenciamento e criação de microserviços usando Container e Serverless, adicionou o recurso “Termination Protection” para uso nos seus templates. Amazon EC2 – suporte a UEFI Boot Amazon EC2 agora suporta UEFI Boot quando migrado de on-premises, esse recurso não era suportado no passado, agora ele possibilita migrar servidores ou VMs com Boot UEFI usando ferramentas como Server Migration Services ou CloudEndure. AWS Fargate – Versão LATEST 1.4.0 disponibilizado AWS Fargate, a modalidade de Containers Serverless da AWS disponibiliza como versão LATEST 1.4.0, que conta entre outras coisas com o esperado suporte à EFS, o NFS gerenciado da AWS, e o Amazon ECS Exec, que permite acessar a CLI de containers via web console. Um Blog post bem legal escrito por Massimo Re Ferre é possível traz todos os detalhes Amazon EKS – Aumento na velocidade do controle Plane Novidade no Amazon EKS, agora a criação do controle Plane está mais rápida. O processo se dá no máximo em 9 minutos, isso é ótimo para produtividade, mas principalmente para cenários onde o plano de DR depende da criação de um novo cluster. Detalhes em: https://aws.amazon.com/blogs/containers/aws-fargate-launches-platform-version-1-4/ ROSA – Nova solução A Amazon em conjunto com a RedHat lançaram Openshift Gerenciado, nomeado de ROSA, RedHat Openshift Service on AWS. O Kubernetes “com roupinha de sair da turma do chapéu vermelho” já vem compatível com SOC-2, PCI e ISO-27001 e já pode ser iniciado em minutos ao custo de $20/mês + $15/mês para cada node de 4vCPU, é cobrado por hora e possui valores para reserva de 1 ano. Analytics Amazon Lookout for Metrics – Novo serviço Amazon Lookout for Metrics é um novo serviço da AWS, que analisa diversos tipos de Datasets, como Cloudwatch, ou um SQL Server por exemplo, buscando por anomalias de comportamento, e assim poder, por exemplo gerar alarmes mais assertivos. Detalhes em: https://www.youtube.com/watch?v=nT6Jn-eoviw https://www.youtube.com/watch?v=nX_YipA_-QQ AWS Glue Studio – Suporte a transformações com Queries SQL AWS Glue Studio agora suporta transformações usando Queries SQL, além do tradicional suporte a Py Spart, e agora é possível usar o novo Spark SQL. Amazon QuickSight – Novo recurso de “tootips” Amazon QuickSight, o visualizador de BI Serverless da AWS ganhou “tootips”, que dá dicas de novas visualizações e dimensões para o usuário. Além disso, o já conhecido Detector de Anomalias que permite analisar e notificar anomalias com uma métrica de top-level, sendo um agregador das outras métricas e não dos detalhes. Outra novidade é possibilidade de adicionar no dashboard quem é o autor, além de gerenciar acessos. Quer saber as novidades da AWS das últimas semanas? Leia nosso blog! E acompanhe toda sexta-feira em nosso canal do Youtube nossa live sobre as Novidades da Semana.

Novidades da AWS – DevOps: 18 de junho a 18 de julho

Os #cloudspecialists da Darede reuniram as principais novidades de DevOps da AWS! Confira quais são elas e como elas podem te ajudar!

Novidades da semana – 15 a 19 de março

Todos os dias a AWS lança uma série novidades e atualizações em seus produtos que visam melhorar a vida de seus usuários. Reunimos algumas delas que fazem mais sentido para nosso mercado e que certamente aplicaremos em nosso dia a dia. Confira as novidades da última semana. Security AWS IAM – Access Analyzer com suporte a 100 verificações de políticas de segurança O AWS IAM Access Analyzer facilita a implementação de permissões de privilégios mínimos, analisando políticas de recursos para fornecer segurança comprovável e ajuda para identificar o acesso púbico não intencional ou entre contas, sendo possível agora fazer mais de 100 validações de acesso (proativas) antes de implantar as alterações das permissões, usando o editor de políticas JSON do Console. Sem custos adicionais e disponível em todas as regiões comerciais da AWS. AWS Config – adiciona três novas regras de configuração para o Amazon Secrets Manager O AWS Config agora oferece suporte a três novas regras gerenciadas, ajudando a verificar se seus segredos no AWS Secrets Manager estão em conformidade com os requisitos de segurança das organizações. • secretsmanager-using-cmk são verificados todos os segredos no AWS Secrets Manager são criptografados usando uma chave CMK do AWS KMS. • secretsmanager-secret-unused verifica se os segredos do AWS Secrets Manager foram acessados dentro de um determinado número de dias. • secretsmanager-secret-periodic-rotation verifica de os segredos do Secrets Manager foram rotacionados nos últimos dias especificados. AWS IoT – SiteWise Monitor adiciona suporte ao AWS IAM O AWS IoT SiteWise é um serviço gerenciado que facilita a coleta, armazenamento, organização e monitoramento de dados de equipamentos industriais em escala para apoiar na tomada de decisões baseada em dados. Agora com o suporte de IAM os clientes podem escolher entre IAM e AWS Single Sign-On como fonte de identidade corporativa preferida e os clientes também podem usar a federação de identidade SAML 2.0 que é um padrão que muitos provedores de identidade usam (IdPs). AWS SSO – simplificação do acesso a configuração do Azure AD com AWS O novo aplicativo AWS Single Sign-On (SSO), agora está disponível na galeria do Azure Active Directory, facilitando usar identidades do Azure AD para entrar em várias contas AWS e aplicativos integrados SSO da AWS, isso permite que usuários façam login usando o Azure AD para acessar contas e aplicativos da AWS. Ex: Notebooks do Amazon SageMaker Studio. Storage and Database Amazon S3 – S3 Object Lambda permite adicionar seu próprio código às solicitações S3 GET padrão Com o S3 Object Lambda é possível adicionar seu próprio código às solicitações S3 GET padrão para modificar e processar dados conforme eles são retornados para um aplicativo, possibilitando filtrar linhas, redimensionar imagens dinamicamente, editar dados confidenciais etc. Amazon RDS for MySQL – suporte ao recurso rollback protection As atualizações de banco de dados de versões principais podem ser desafiadoras em ambientes autogerenciados onde gerenciar backups, monitorar o processo de upgrade e restaurações manuais podem gerar em tempo de inatividade, então este processo de reversão automática ajuda a garantir um tempo mínimo de inatividade no caso de problemas durante o processo de atualização. AWS Glue – DataBrew disponível em novas regiões O AWS Glue DataBrew é uma ferramenta de preparação de dados visuais que torna mais fácil para analistas e cientistas de dados, limpar e normalizar dados para análise e aprendizado de máquina e oferece mais de 250 transformações pré-construídas para automatizar tarefas de preparação de dados. Ex. Filtrar anomalias, padronizar formatos e corrigir valores inválidos. O recurso agora está disponível em três novas regiões, Seul, Montreal e São Paulo. Amazon RDS – Proxy adiciona endpoints para réplicas do Amazon Aurora O Amazon RDS Proxy permite criar um endpoint adicional somente leitura para conectar seu aplicativo ao Amazon Aurora Replicas, ajudando em alguns casos melhorar a escalabilidade, resiliência e segurança do aplicativo, podendo se estender a réplicas Aurora conectadas. Amazon RDS – Proxy agora oferece suporte à conectividade de banco de dados de VPCs O Amazon RDS Proxy adicionou o recurso de criar endpoints adicionais, cada um com suas próprias configurações do Amazon VPC, permitindo o acesso aos seus bancos de dados Aurora ou RDS a partir de aplicativos em um VPC diferente. Compute Amazon EC2 – Auto Scaling adiciona recurso de programar fuso horário O Amazon EC2 Auto Scaling agora permite que você defina um fuso horário local para ações de escalonamento agendados por meio do AWS CLI e SDKs, com suporte ao AWS Managment Console e CloudFormation. Amazon EC2 – Auto Scaling Instance Refresh agora suporta recurso de implantações Os pontos de verificação de atualização de instância ajudam os clientes a implantar atualizações de aplicativos com mais segurança, uma vez que os clientes podem aplicar personalizações com base nas necessidades de testes e podem implementar estratégias de implantação comuns, quando o cenário exige teste em um pequeno número de instâncias antes de lançar a nova configuração de aplicativo para todos o grupo. Amazon ECS – Agora permite executar comandos em um container em execução O Amazon Elastic Container apresenta o Amazon ECS Exec – uma maneira mais simples, segura e auditável para que os clientes executem comandos em um container em instâncias do Amazon EC2 ou AWS Fargate, oferecendo um shell interativo ou acesso de comando único a contêiner em execução, tornando mais fácil depurar problemas, diagnosticar erros, coletar dados e estatísticas únicos e interagir com processos no container. AWS Copilot – Nova versão v1.4 O AWS Copilot lançou a versão 1.4 que agora oferece mais recursos operacionais para aplicativos hospedados no Amazon ECS, permitindo acesso direto ao container para solucionar problemas e executar comandos com o Amazon ECS Exec. Cost Optimization & Performance AWS Cost Anomaly Detection – suporte a AWS CloudFormation O AWS Cost Anomaly agora oferece suporte aos monitores de custo de provisionamento e assinaturas de alerta por meio de modelos do AWS CloudFormation, sendo possível configurar e detectá-las por meio de comandos JSOAN ou YAML, trazendo agilidade, consistência e escalabilidade nas contas da AWS. Amazon QLDB – Aumento de desempenho e redução de latência O

Como melhorar sua análise de métricas com Inteligência Artificial?

A integração da inteligência artificial (IA) com ferramentas de observabilidade em ambientes cloud possibilita uma gestão avançada, oferecendo previsões mais precisas, automação de respostas e otimização contínua. Saiba mais neste blog.

Balanceadores de carga – BigIP: Pools

Seguindo a série de artigos sobre balanceadores de carga, vamos falar sobre Pools!