Apache Hadoop

Tela Software:
Apache Hadoop
Detalhes de Software:
Versão: 2.7.2 Atualizado
Data de upload: 10 Feb 16
Licença: Livre
Popularidade: 562

Rating: nan/5 (Total Votes: 0)

Apache Hadoop foi inicialmente desenvolvido pela Yahoo eo projeto é uma combinação entre as Apache Hadoop núcleo e Apache Hadoop repos comuns anteriores.

O projeto Hadoop ganhou muita notoriedade graças aos seus excelentes resultados na implementação de um sistema de computação distribuída multi-servidor para lidar com enormes quantidades de dados.

O projeto em si é feita de quatro partes. Um deles é Hadoop Common, o chamado núcleo que permite que todos os outros módulos para trabalhar, o segundo é o seu próprio sistema de arquivos - HDFS (Hadoop Distributed File System), o terceiro é o quadro FIO programação Hadoop e, finalmente, há o sistema Hadoop MapReduce para apoiar a computação paralela.

Usando esses sistema inovador, o Apache conseguiu criar muitos outros projetos paralelos, como:

- Apache Ambari

- Apache Avro

- Apache Cassandra

- Apache HBase

- Apache Hive

- Apache Mahout

- Apache Pig

- Apache faísca

- Apache Tez

- Apache ZooKeeper

Todos estes dependem de mecanismo de processamento de dados poderoso do Hadoop ou de seus recursos de computação distribuídos, integrando um dos seus módulos de uma maneira de seu núcleo ou outro.

O que é novo nesta versão:

  • Suporte para arquivo de armazenamento
  • Os dados transparente a criptografia de repouso (beta)
  • Operação DataNode seguro sem a necessidade de acesso root
  • unidade de troca a quente: suporte adicionar / remover volumes nó de dados sem reiniciar nó de dados (beta)
  • Suporte para criptografia AES fio mais rápido
  • Suporte para serviços de longa execução em FIO
  • etiquetas nó de suporte durante a programação
  • Suporte para reservas de recursos baseados no tempo em Scheduler Capacidade (beta)
  • Global, cache compartilhado para artefatos de aplicativos (beta)
  • Suporte execução de aplicativos nativamente no Docker recipientes (alpha)

O que é novo na versão 2.7.1:

  • Suporte para arquivo de armazenamento
  • Os dados transparente a criptografia de repouso (beta)
  • Operação DataNode seguro sem a necessidade de acesso root
  • unidade de troca a quente: suporte adicionar / remover volumes nó de dados sem reiniciar nó de dados (beta)
  • Suporte para criptografia AES fio mais rápido
  • Suporte para serviços de longa execução em FIO
  • etiquetas nó de suporte durante a programação
  • Suporte para reservas de recursos baseados no tempo em Scheduler Capacidade (beta)
  • Global, cache compartilhado para artefatos de aplicativos (beta)
  • Suporte execução de aplicativos nativamente no Docker recipientes (alpha)

O que é novo na versão 2.7.0:

  • Suporte para arquivo de armazenamento
  • Os dados transparente a criptografia de repouso (beta)
  • Operação DataNode seguro sem a necessidade de acesso root
  • unidade de troca a quente: suporte adicionar / remover volumes nó de dados sem reiniciar nó de dados (beta)
  • Suporte para criptografia AES fio mais rápido
  • Suporte para serviços de longa execução em FIO
  • etiquetas nó de suporte durante a programação
  • Suporte para reservas de recursos baseados no tempo em Scheduler Capacidade (beta)
  • Global, cache compartilhado para artefatos de aplicativos (beta)
  • Suporte execução de aplicativos nativamente no Docker recipientes (alpha)

O que é novo na versão 2.6.0:

  • Suporte para arquivo de armazenamento
  • Os dados transparente a criptografia de repouso (beta)
  • Operação DataNode seguro sem a necessidade de acesso root
  • unidade de troca a quente: suporte adicionar / remover volumes nó de dados sem reiniciar nó de dados (beta)
  • Suporte para criptografia AES fio mais rápido
  • Suporte para serviços de longa execução em FIO
  • etiquetas nó de suporte durante a programação
  • Suporte para reservas de recursos baseados no tempo em Scheduler Capacidade (beta)
  • Global, cache compartilhado para artefatos de aplicativos (beta)
  • Suporte execução de aplicativos nativamente no Docker recipientes (alpha)

O que é novo na versão 2.5.0:.

  • melhorias de autenticação quando se usa um servidor proxy HTTP
  • Uma nova Hadoop Metrics pia que permite escrever directamente para Grafite.
  • Especificação para Hadoop esforço Filesystem compatível.
  • O suporte para POSIX-style do sistema de arquivos atributos estendidos.
  • OfflineImageViewer para procurar um fsimage por meio da API WebHDFS.
  • melhorias de suporte e correções de bugs para o gateway NFS.
  • web modernizado UIs (HTML5 e Javascript) para daemons HDFS.
  • suporte a REST APIs do FIO apresentação e matando aplicações.
  • Integração Kerberos para a loja linha do tempo do fio.

O que é novo na versão 2.4.0:

  • Suporte para Access Control Lists no HDFS
  • O suporte nativo para actualizações graduais em HDFS
  • O uso do protocolo buffers para HDFS FSImage para atualizações operacionais suaves
  • Suporte HTTPS completo em HDFS
  • O suporte para failover automático do fio ResourceManager
  • Suporte avançado para novas aplicações em fio com História Application Server e Aplicação Timeline Servidor
  • Suporte para fortes SLAs em CapacityScheduler FIO via preempção

O que é novo na versão 2.3.0:.

  • Suporte para hierarquia heterogênea de armazenamento no HDFS
  • Em cache de memória para dados HDFS com administração e gestão centralizada.
  • distribuição simplificada de binários MapReduce via HDFS em FIO de cache distribuído.

O que é novo na versão 2.2.0:

  • FIO

    - Um sistema de gestão de recursos de propósito geral para Hadoop para permitir MapReduce e outras outras estruturas e serviços de processamento de dados

  • alta disponibilidade para o HDFS
  • HDFS Federação
  • HDFS Snapshots
  • Acesso NFSv3 aos dados no HDFS

O que é novo na versão 2.1.0-beta:

  • HDFS Snapshots
  • Suporte para executar Hadoop no Microsoft Windows
  • estabilização FIO API

O que é novo na versão 2.0.3-alpha:

  • QJM para HDFS HA ​​para NameNode
  • programação Multi-recurso (CPU e memória) para o fio
  • FIO ResourceManager Restart
  • estabilidade significativa na escala de fios (mais de 30.000 nós e 14 milhões de pedidos até agora, no momento do lançamento)

O que é novo na versão 1.0.0:.

  • Melhor segurança
  • HBase (acrescentar / hsynch / hflush e segurança).
  • webhdfs (com suporte completo para segurança).
  • Desempenho melhorado o acesso a arquivos locais para HBase.
  • Outras melhorias de desempenho, correções de bugs e recursos.

O que é novo na versão 0.20.2:

  • tampão RPC servidor envie mantém o tamanho da maior resposta cada vez enviada.
  • C ++ bibliotecas não construir no Debian Lenny.
  • Alguns scripts c ++ não são chmodded antes da execução formiga.
  • Streaming:. Processos fornecida mensagens de status são substituídos a cada 10 seoncds
  • IllegalArgumentException quando CombineFileInputFormat é usado como InputFormat trabalho.
  • Vários erros w / arquivos Hadoop.
  • Permitir cache de instâncias do sistema de arquivos a ser desativado em uma base por instância.
  • Falta de sincronização para defaultResources em Configuration.addResource.
  • GzipCodec não deve representar BuiltInZlibInflater como decompressorType.
  • NameNode de httpserver não pode instanciar InetSocketAddress: IllegalArgumentException é lançada
  • .
  • httpserver dorme com valores negativos.
  • NameNode corre a falta de memória devido ao vazamento de memória no servidor ipc.
  • IPC bug cliente pode causar pendurar chamada RPC.
  • testes falhando impedir que o resto dos alvos de teste de execução.
  • testes Contrib estão falhando Clover'ed construir.
  • testes não são executados em 0.20 ramo.
  • TestStreamingStatus está falhando em 0.20 ramo.

Programas semelhantes

jquery.applink
jquery.applink

1 Mar 15

perfect-scrollbar
perfect-scrollbar

11 Mar 16

Markup.py
Markup.py

12 Apr 15

JSONFormatter.js
JSONFormatter.js

6 Jun 15

Outro software de desenvolvedor Apache Software Foundation

Comentário para Apache Hadoop

Comentários não encontrado
Adicionar comentário
Ligue imagens!
Busca por categoria