A evolução dos modelos de implantação no Big Data Era

Com o advento do big data, os modelos de implementação para gerenciamento de dados estão mudando. O data warehouse tradicional é tipicamente implementado em um único sistema, grande dentro do centro de dados. Os custos deste modelo têm levado as organizações a otimizar esses armazéns e limitar o alcance e tamanho dos dados a ser gerido.

No entanto, quando as organizações querem aproveitar a enorme quantidade de informação gerada por fontes de dados grandes, as limitações dos modelos tradicionais não funcionam mais. Portanto, o aparelho armazém de dados tornou-se um método prático de criar um ambiente otimizado para suportar a transição para a nova gestão da informação.

O modelo de grande aparelho de dados

Quando as empresas precisam de combinar a sua estrutura de data warehouse com dados grandes, o modelo do aparelho pode ser uma resposta para o problema de escala. Normalmente, o aparelho é um sistema integrado que incorpora hardware (normalmente em um rack), que é otimizada para o armazenamento e gerenciamento de dados.

Porque eles são auto-suficientes, os aparelhos podem ser relativamente fácil e rápida de implementar, bem como oferecer menores custos de operação e manutenção, por isso, o sistema será pré-carregado com um banco de dados relacional, a estrutura Hadoop, MapReduce, e muitos dos ferramentas que ajudam a ingerir e organizar os dados a partir de uma variedade de fontes.

Ele também incorpora motores de análise e ferramentas para simplificar o processo de análise de dados a partir de múltiplas fontes. O aparelho é, portanto, um sistema de finalidade única que normalmente inclui interfaces para torná-lo mais fácil de se conectar a um armazém de dados existente.

O modelo de nuvem grande de dados

A nuvem está se tornando uma plataforma atraente para gerenciar dados grandes e pode ser usado em um ambiente híbrido com ambientes no local. Algumas das novas inovações no carregamento e transferência de dados já estão mudando a viabilidade potencial da nuvem como uma grande plataforma de armazenamento de dados.

Por exemplo, Aspera, uma empresa especializada em dados rápidos transferência entre redes, associa-se a Amazon.com para oferecer serviços de gerenciamento de dados em nuvem. Outros fornecedores, como FileCatalyst e Dados Expedition também estão voltadas para este mercado. Em essência, esta categoria de tecnologia aproveita a rede e optimiza-lo com a finalidade de mover arquivos com latência reduzida.

Como este problema da latência na transferência de dados continua a evoluir, será a norma para armazenar sistemas de dados grandes na nuvem que pode interagir com um armazém de dados, que também é baseado em nuvem ou um armazém que fica no centro de dados.