Apache Hadoop ble opprinnelig utviklet av Yahoo og prosjektet er en kombinasjon mellom de tidligere Apache Hadoop Kjerne og Apache Hadoop Vanlige repos.
Hadoop Prosjektet har fått mye notoritet takket være sine gode resultater i å implementere en multi-server distribuert databehandling system for håndtering av store mengder data.
Selve prosjektet er faktisk laget av fire deler. En er Hadoop Common, den såkalte kjerne som gjør at alle andre moduler til å arbeide, den andre er sin egen filsystem - HDFS (Hadoop Distributed File System), er den tredje Hadoop garn planlegging rammeverk, og til slutt er det Hadoop MapReduce system for å støtte parallell databehandling.
Ved hjelp av disse banebrytende system, har Apache klart å skape mange andre sideprosjekter, som:
- Apache Ambari
- Apache Avro
- Apache Cassandra
- Apache HBase
- Apache Hive
- Apache Mahout
- Apache Pig
- Apache Spark
- Apache Tez
- Apache Zookeeper
Alle disse er avhengige av Hadoop kraftige databehandlingsmotor eller dets distribuert databehandling funksjoner, integrere en av sine moduler i sin kjerne er den ene eller den andre veien.
Hva er nytt i denne versjonen:
- Støtte for Archival Storage
- Transparente data på resten kryptering (beta)
- Brukervalg sikker DataNode uten å kreve root-tilgang
- Hot swap-stasjon: support legge til / fjerne data node volumer uten å starte data node (beta)
- AES støtte for raskere ledning kryptering
- Støtte for lange løpe tjenester i garn
- Support node etikettene under planlegging
- Støtte for tidsbaserte ressurs reservasjoner i Capacity Scheduler (beta)
- Utland delt cache for applikasjons artefakter (beta)
- Support kjøring av applikasjoner direkte i Docker beholdere (alpha)
Hva er nytt i versjon 2.7.1:
- Støtte for Archival Storage
- Transparente data på resten kryptering (beta)
- Brukervalg sikker DataNode uten å kreve root-tilgang
- Hot swap-stasjon: support legge til / fjerne data node volumer uten å starte data node (beta)
- AES støtte for raskere ledning kryptering
- Støtte for lange løpe tjenester i garn
- Support node etikettene under planlegging
- Støtte for tidsbaserte ressurs reservasjoner i Capacity Scheduler (beta)
- Utland delt cache for applikasjons artefakter (beta)
- Support kjøring av applikasjoner direkte i Docker beholdere (alpha)
Hva er nytt i versjon 2.7.0:
- Støtte for Archival Storage
- Transparente data på resten kryptering (beta)
- Brukervalg sikker DataNode uten å kreve root-tilgang
- Hot swap-stasjon: support legge til / fjerne data node volumer uten å starte data node (beta)
- AES støtte for raskere ledning kryptering
- Støtte for lange løpe tjenester i garn
- Support node etikettene under planlegging
- Støtte for tidsbaserte ressurs reservasjoner i Capacity Scheduler (beta)
- Utland delt cache for applikasjons artefakter (beta)
- Support kjøring av applikasjoner direkte i Docker beholdere (alpha)
Hva er nytt i versjon 2.6.0:
- Støtte for Archival Storage
- Transparente data på resten kryptering (beta)
- Brukervalg sikker DataNode uten å kreve root-tilgang
- Hot swap-stasjon: support legge til / fjerne data node volumer uten å starte data node (beta)
- AES støtte for raskere ledning kryptering
- Støtte for lange løpe tjenester i garn
- Support node etikettene under planlegging
- Støtte for tidsbaserte ressurs reservasjoner i Capacity Scheduler (beta)
- Utland delt cache for applikasjons artefakter (beta)
- Support kjøring av applikasjoner direkte i Docker beholdere (alpha)
Hva er nytt i versjon 2.5.0.
- Autentiserings forbedringer når du bruker en HTTP-proxy-server
- En ny Hadoop Metrics vask som gjør at du skriver direkte til grafitt.
- Spesifikasjon for Hadoop støttet filsystem innsats.
- Støtte for POSIX-stil filsystem utvidede attributter.
- OfflineImageViewer å bla gjennom en fsimage via WebHDFS API.
- support forbedringer og feilrettinger til NFS gateway.
- Modernisert web UiS (HTML5 og Javascript) for HDFS daemons.
- Yarn REST API-støtte innsending og drepe applikasjoner.
- Kerberos integrasjon for garn tidslinje butikken.
Hva er nytt i versjon 2.4.0:
- Støtte for tilgangskontrollister i HDFS
- Native støtte for Rolling oppgraderinger i HDFS
- Bruk av protokoll-buffere for HDFS FSImage for glatte operative oppgraderinger
- Komplett HTTPS-støtte i HDFS
- Støtte for automatisk failover i garnet ResourceManager
- Forbedret støtte for nye applikasjoner på garn med Application Historie Server og Application Tidslinje Server
- Støtte for sterke SLA i garn CapacityScheduler via Preemption
Hva er nytt i versjon 2.3.0.
- Støtte for heterogene Storage hierarki i HDFS
- I-minne cache for HDFS data med sentralisert administrasjon og ledelse.
- Forenklet distribusjon av Mapreduce binærfiler via HDFS i garn Distributed Cache.
Hva er nytt i versjon 2.2.0:
- Garn - En generell ressursforvaltning system for Hadoop å tillate MapReduce og andre andre databehandlings rammer og tjenester
- Høy tilgjengelighet for HDFS
- HDFS Federation
- HDFS still
- NFSv3 tilgang til data i HDFS
Hva er nytt i versjon 2.1.0-beta:
- HDFS still
- Støtte for å kjøre Hadoop på Microsoft Windows
- garn API stabilisering
Hva er nytt i versjon 2.0.3-alpha:
- QJM for HDFS HA for NameNode
- Multiressursplanlegging (CPU og minne) for garn
- garn ResourceManager Restart
- Betydelig stabilitet i stor skala for garn (over 30.000 noder og 14 millioner applikasjoner så langt, på tidspunktet for utgivelsen)
Hva er nytt i versjon 1.0.0.
- Bedre sikkerhet
- HBase (legge til / hsynch / hflush og sikkerhet).
- webhdfs (med full støtte for sikkerhet).
- Ytelse forbedret tilgang til lokale filer for HBase.
- Andre ytelsesforbedringer, feilrettinger og funksjoner.
Hva er nytt i versjon 0.20.2:
- RPC server sende buffer beholder størrelsen største respons noen gang sendt.
- C ++ bibliotek bygger ikke på Debian Lenny.
- noen C ++ skript ikke oppgitt korrekte rettigheter før maur henrettelsen.
- Streaming:. Prosess gitt statusmeldinger blir overskrevet hver 10 seoncds
- IllegalArgumentException når CombineFileInputFormat som jobb InputFormat.
- Flere bugs m / Hadoop arkiver.
- Tillat bufring av filsystem tilfeller å være deaktivert på en per-forekomst basis.
- Manglende synkronisering for defaultResources i Configuration.addResource.
- GzipCodec bør ikke representere BuiltInZlibInflater som decompressorType.
- NameNode er Httpserver kan ikke instantiate InetSocketAddress: IllegalArgumentException er kastet .
- Httpserver sover med negative verdier.
- Namenode går av for lite minne på grunn av minnelekkasje i IPC Server.
- IPC klient feil kan føre til RPC-kall henge.
- Sviktende tester hindre resten av test mål fra henrettelsen.
- contrib tester svikter Clover'ed bygge.
- Tester ikke kjøre på 0,20 gren.
- TestStreamingStatus er sviktende på 0,20 gren.
Kommentarer ikke funnet