Cientistas, desenvolvedores e muitos outros tecnólogos de diversos setores estão se beneficiando da Amazon Web Services para executar análises de big data e superar os desafios do aumento no volume, na variedade e na velocidade das informações digitais. A Amazon Web Services oferece um portfólio completo e abrangente de serviços de computação em nuvem para ajudá-lo a gerenciar big data mediante redução de custos, escalabilidade para atender à demanda e aceleração da inovação.
Confira as soluções de big data da AWS para cada estágio do ciclo de vida de big data:
Coleta > Transferência > Armazenamento > RDBMS | Armazém de dados | NoSQL > Análise > Arquivo
Ganhar velocidade com big data na nuvem nunca foi tão fácil. Explore a seção Conceitos Básicos, com tutoriais e recursos para ajudá-lo a começar seu primeiro projeto.
Este breve vídeo descreve como a Amazon Web Services pode ser usada para ajudá-lo a oferecer mais percepções empresariais usando tecnologia de big data. Você aprenderá a usar as tecnologias de big data mais familiares, Pig, Hive, Spark e Hadoop, para acelerar a conclusão de seus projetos de big data.
Faça o download de uma cópia do novo whitepaper Big Data Analytics Options on AWS
Esse novo whitepaper proporciona uma visão geral das diferentes opções de big data disponíveis na Nuvem AWS para arquitetos, cientistas de dados e desenvolvedores. Para cada opção de análise de big data, este artigo descreve padrões de uso ideais, desempenho, durabilidade e disponibilidade, modelo de custo, escalabilidade, elasticidade, interfaces e antipadrões. Esse artigo descreve dois cenários que demonstram as opções de análise em uso e oferece recursos adicionais para começar a usar análises de big data na AWS.
O blog sobre big data da AWS é destinado a arquitetos de solução, cientistas de dados e desenvolvedores para aprenderem sobre as práticas recomendadas para big data, descobrirem quais serviços de big data gerenciados pela AWS são a melhor opção para seu caso de uso e para ajudar a começarem e se aprofundarem nos serviços de big data da AWS. O objetivo do blog é ser um centro para que qualquer pessoa descubra novas formas de coletar, armazenar, processar, analisar e visualizar dados em qualquer escala. Os leitores encontrarão tutoriais rápidos com amostras de código, estudos de caso que demonstram os benefícios exclusivos de trabalhar com big data na AWS, anúncios de novos recursos, demonstrações e tutoriais gerados por parceiros e clientes, dicas e práticas para usar os serviços de big data da AWS.
Parece que tudo, hoje, gera dados, desde os seus clientes nas redes sociais até as instâncias executando os seus aplicativos web. A AWS facilita o provisionamento de serviços de armazenamento, computação e bancos de dados de que você precisa para transformar esses dados em informação para sua empresa. A AWS também conta com serviços de transferência de dados que podem mover big data para dentro e para fora da nuvem rapidamente, como o AWS Direct Connect e o nosso serviço Import/Export. Além disso, todo o tráfego de entrada de dados na AWS é gratuito.
Aprenda a enviar discos rígidos para a nuvem com o AWS Import/Export »
Saiba como adquirir sua linha de fibra ótica particular para a nuvem com o AWS Direct Connect »
O RDS está disponível para MySQL, PostgreSQL, Oracle e SQL Server.
O Amazon Kinesis é um serviço gerenciado para processamento em tempo real de streaming de big data. O Amazon Kinesis é compatível com taxas de transferência que vão de megabytes a gigabytes de dados por segundo e pode expandir sem dificuldade de centenas a milhares de origens diferentes. Desenvolvido para fornecer alta disponibilidade e durabilidade de maneira econômica, você pode agora se concentrar em analisar seus dados, o que lhe permitirá tomar decisões mais rápidas e com custos mais baixos.
Se você está armazenando dados farmacêuticos para análise, dados financeiros para computação e definição de preço ou arquivos de multimídia, como fotos e vídeos, o Amazon Simple Storage Service (S3) é a solução ideal de nuvem para big data para armazenar conteúdo original de forma durável. Projetado para onze noves de durabilidade, sem um ponto único de falha, o Amazon S3 é o seu armazém de objetos big data essencial.
Saiba mais sobre o Amazon S3 »
O Amazon Elastic Block Store (EBS) fornece discos rígidos para armazenamento persistente para máquinas virtuais. Os volumes do Amazon EBS oferecem o desempenho consistente e de baixa latência necessários para executar cargas de trabalho com big data, como os seus próprios bancos de dados relacionais ou NoSQL, aplicativos empresariais e sistemas de arquivo distribuídos de alto desempenho.
Os armazéns de dados NoSQL se beneficiam da agilidade dos discos de estado sólido (SSDs). O Amazon DynamoDB as utiliza por padrão, mas ao utilizar alternativas do AWS Marketplace como o Cassandra ou o MongoDB, você pode acelerar o acesso com o acesso sob demanda a terabytes de armazenamento de estado sólido com a classe de instância de E/S elevada.
Quando precisar de um banco de dados NoSQL sem encargos operacionais para executá-lo, conte com o Amazon DynamoDB. É um serviço de banco de dados NoSQL rápido e totalmente gerenciado que permite armazenar e recuperar com facilidade qualquer quantidade de dados e atender a qualquer nível de tráfego de solicitações.
A taxa de transferência provisionada garantida e a latência inferior a 10 milissegundos fazem do Amazon DynamoDB uma ótima opção para jogos, tecnologia de anúncios, mobilidade e diversas outras aplicações de big data.
Saiba mais detalhes sobre o Amazon RDS
A inovação do big data vai além do NoSQL e trata em boa parte de levar a tecnologia apropriada aos seus dados, dependendo da sua necessidade de negócio. Os bancos de dados relacionais fornecem desempenho veloz, previsível e consistente e são otimizados para cargas de trabalho transacionais, como pontos de venda ou histórico financeiro. Os bancos de dados relacionais cumprem um papel complementar aos bancos de dados NoSQL em várias arquiteturas abrangentes de big data.
O Amazon RDS facilita a configuração, a operação e o escalonamento de um banco de dados relacional na nuvem. Ele fornece uma capacidade econômica e redimensionável enquanto gerencia tarefas demoradas de administração do banco de dados, liberando você para que se concentre nos aplicativos e em seu negócio.
O Amazon Redshift oferece um armazém de dados rápido, totalmente gerenciado e em escala de petabytes por menos de 1.000 USD por terabyte por ano. O Amazon Redshift proporciona consulta rápida e desempenho de E/S para conjuntos de dados de praticamente qualquer tamanho por usar tecnologia de armazenamento colunar, paralelização e distribuição de consultas entre vários nós. Em apenas alguns minutos, você pode provisionar facilmente um armazém de dados totalmente gerenciado, com backups automáticos e criptografia integrada. Conecte-se facilmente às suas ferramentas de inteligência de negócio existentes.
O Amazon Elastic MapReduce (EMR) fornece a poderosa estrutura Hadoop no Amazon EC2 como um serviço gerenciado de fácil utilização. Com o Amazon EMR, você pode se concentrar nas suas consultas de map/reduce e aproveitar o amplo ecossistema de ferramentas do Hadoop, enquanto implementa em uma plataforma de infraestrutura segura e de alta escala. Execute tarefas de análise de big data na nuvem com facilidade; deixe que o Amazon EMR cuide do trabalho de gerenciar os seus clusters Hadoop.
Qual seria a aceleração do seu projeto com 1.000 máquinas virtuais adicionais? E que tal 10.000? O Amazon Spot Market, integrado ao Amazon Elastic MapReduce, permite que você escolha seu próprio preço para os recursos de computação que precisa para executar análises com a computação em nuvem. Isso significa que você pode escolher seu próprio equilíbrio de custo e desempenho, aprimorando sua análise quando necessário ou reduzindo os custos significativamente.
O Amazon Glacier permite que você elimine cargas administrativas de operação e escalabilidade do armazenamento de arquivos para a AWS, bem como torna a retenção de dados por longos períodos, seja em anos ou décadas, especialmente simples. O Amazon Glacier é um serviço de armazenamento de custo extremamente baixo, com tarifas a partir de 0,01 USD por GB ao mês. Não é necessário compromisso de capital inicial e todas as despesas operacionais contínuas estão incluídas no preço.
