fbpx
Como a segment.com economizou US$ 1 milhão por ano em sua conta da AWS
Publicado em: sábado, 18 de mar de 2017

Veja como a Segment economizou US $ 1 milhão por ano em sua conta da AWS em três meses. Seus esforços de investigação são interessantes e detalhados, há muito para aprender com eles. Provavelmente não deveria ser uma surpresa que a AWS não facilite a descoberta de onde há oportunidades de economizar.

Processo

  • Analisar cada recurso em sua conta linha-a-linha
  • Ativar Faturamento detalhado AWS
  • Importar o arquivo de log bruto para Redshift (que ironicamente custa dinheiro)
  • A análise profunda anotou uma lista das 15 áreas mais problemáticas, que totalizavam até aproximadamente 40% da conta mensal:
    • Centenas de grandes unidades EBS
    • Cache super-provisionado e instâncias RDS
    • DynamoDB “quentes” (0% de ociosidade) (US $ 300.000 por ano)
    • Auto-scaling de serviços (US $ 60.000 por ano)
    • Bin-embalagem e consolidação tipos de instância (US $ 240.000 por ano).
    • Troca do ELB (Elastic Load Balancer‎) por ALB (Application Load Balancer) para remover restrições que impediam melhor aproveitamento da densidade computacional com docker.

Foi preciso esforço de engenharia para decidir se esses custos são necessários ou se há uma maneira de fazer alterações para reduzir os custos.

Correções

  • Melhor seleção de chave de partição DynamoDB (distribuindo melhor a carga e possibilitando trocar escala vertical por horizontal e reduzir drasticamente seu custo)
  • Melhor escala automática
  • Mover para instâncias maiores e aumentar a densidade computacional com 100-200 containers por instância.

Lição

o investimento mais importante é evitar que os problemas ocorram em primeiro lugar.

[dt_highlight color=”” text_color=”” bg_color=”#BC2C2C”]Este post é uma tradução do post highscalability.com, originalmente publicado em segment.com/blog. [/dt_highlight]

Bonus – Teraform e Packer

No post da Segment tem um link para um repositório do github da Segment que é um verdadeiro pote de ouro! O repositório segmentio/stack tem toda a configuração que a Segment usa com Terraform e Packer, ambos da Hashicorp, para a automação da alocação de recursos na Amazon. Para quem nunca ouviu falar, Terraform e Packer são ferramentas que fazem a mágica do IaC: Infrastructure as Code, e o repositório tem esse código!

 

O Cloud Native .NET é meu principal projeto.

Onde empenho energia para ajudar, acompanhar, direcionar Desenvolvedores, Líderes Técnicos e jovens Arquitetos na jornada Cloud Native.

Conduzo entregando a maior e mais completa stack de tecnologias do mercado.

Ao trabalhar com desenvolvedores experientes, eu consigo usar seu aprendizado com .NET, banco de dados, e arquitetura para encurtar a jornada.

Ao restringir à desenvolvedores .NET eu consigo usar do contexto de tecnologias e problemas do seu dia-a-dia, coisas que você conhece hoje, como WCF, WebForms, IIS e MVC, por exemplo, para mostrar a comparação entre o que você conhece e o que está sendo apresentado.

É assim que construímos fundamentos sólidos, digerindo a complexidade com didática, tornando o complexo, simples.

É assim que conseguimos tornar uma jornada densa, em um pacote de ~4 meses.

Eu não acredito que um desenvolvedor possa entender uma tecnologia sem compreender seus fundamentos. Ele no máximo consegue ser produtivo, mas isso não faz desse desenvolvedor um bom tomador de decisões técnicas.

É preciso entender os fundamentos para conseguir tomar boas decisões.

0 comentários

Enviar um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *

Esse site utiliza o Akismet para reduzir spam. Aprenda como seus dados de comentários são processados.

Luiz Carlos Faria

Mensagem do Autor

Espero que goste desse post. Não deixe de comentar e falar o que achou.

Se acha que esse post pode ajudar alguém que você conheça, compartilhe!

 

Lives

Fique de olho nas lives

Fique de olho nas lives no meu canal do Youtube, no Canal .NET e nos Grupos do Facebook e Instagram.

Aceleradores

Existem diversas formas de viabilizar o suporte ao teu projeto. Seja com os treinamentos, consultoria, mentorias em grupo.