Please enable JavaScript.

Coggle requires JavaScript to display documents.

BIG DATA (CONCEITO (VOLUME (grande quantidade de dados já armazenados,…

- - - - torna o agregado transparente e permite fazer consultas e recuperações parciais
      - cada documento tem um identificados único e dentro dele temos vários campos com valores, não precisam possuir estrutura em comum, bom p/ dados semiestruturados
      - não tem estrutura rígida, é possível atualizar os campos do documento sem problemas no banco de dados
      - CouchDB e MongoDB
    - - o agregado é dividido em colunas, as colunas são unidades de dados dentro do agregado linha
      - formato estruturado
      - BigTable (google), Cassandra (facebook), Hbase (Hadoop)
    - - contrário ao modelo agregado: registros pequenos com interconexões complexas
      - quando a interconectividade ou a topografia dos dados é mais importante que os dados em si
      - dividido em : nós, relacionamentos e propriedades
      - Neo4J, InfiniteGraph, HyperGraphDB, Sones
    - - trata o agregado como um todo opaco, só é possível realizar pesquisa no agregado como um todo
      - cada chave armazena diversos valores - tabela hash
      - Dynamo (amazon), GenieDB, Redis, Rial, OracleBerkeleyDB
  - - - CONSISTENCY
        uma leitura em qualquer dos nodos retorna a mesma informação
      - AVAILABILITY - disponibilidade
        as requisições de leitura e escrita sempre serão reconhecidas e respondidas
      - PARTITION
        capacidade do cluster de suportar falhas que o dividam em partições
      - é impossível ter as 3 propriedades em um banco de dados, um conjunto de duas deve ser escolhido
    - - utilizada pelos bancos de dados relacionais
        
        priorizam consistência e disponibilidade
    - - favorizam disponibilidade e tolerância a partições
        
        nem sempre a consistência será atendida
        
        maior escalabilidade
- - - - APACHE AMBARI
    - - APACHE MAHOUT
    - - MAPREDUCE
      - HIVE
      - PIG
      - SPARK
    - - YARN
      - APACHE ZOOKEEPER
    - - SQOOP
        
        NoSQL, banco de dados relacionais ou data warehouses corporativos
      - FLUME
        
        funciona bem com streaming
      - KAFKA
        
        fluxo de dados de baixa latência e alta taxa de transferência
      - STORM
        
        em tempo real, escalável e distribuída p/ streaming de dados
    - - HBASE
    - - HDFS - Hadoop Distributed File System
        
        escalável e tolerante a falhas
    - - APACHE OOZIE