Apache Flume

Apache Flume ble utviklet som et mellomledd system som samler logger fra ett program og leverer den til en annen.
Det skal fungere med de fleste Java-programmer og utviklere bør være trygg, Flume beskyttet mot tap av data og service fiasko.
Loggdata er streamet i sanntid via feiltolerant systemer med støtte for mange failover og mekanismer for gjenoppretting.
Fordi Flume går fra ett sentralt sted, kan utviklere enkelt administrere det, og også trykke inn sine ressurser for statistikk og analyseformål.
En skjult funksjon i Flume er den faktiske "data-agnostiker" system. Dette betyr at du enkelt kan bytte en datastrøm kilde fra en logg utgang til noe annet og bruke Flume trygt samlet informasjon fra ulike typer tjenester.
Disse kan være e-postmeldinger, sosiale mediestrømmer, nettverkstrafikk, og så videre

Hva er nytt i denne utgaven.

• Fjerne SSLv2Hello fører Java 6 kunder å bryte
• Aktiver SSLv2Hello for Avro Source og NettyAvroRpcClient
• Aktiver SSLv2Hello for HttpSource
• Lagt dev-støtte til src tarball
• Unit test TestHTTPSource.java mislyktes med IBM JDK 1.7
• HTTP Source bør være i stand til å blokkere et prefiks sett av protokoller.
• HTTPS tester mislykkes på Java 6
• Tillat konfigurering av aktiverte protokoller i Avro kilde og RPC klient

Hva er nytt i versjon 1.5.2:

• Fjerne SSLv2Hello fører Java 6 kunder å bryte
• Aktiver SSLv2Hello for Avro Source og NettyAvroRpcClient
• Aktiver SSLv2Hello for HttpSource
• Lagt dev-støtte til src tarball
• Unit test TestHTTPSource.java mislyktes med IBM JDK 1.7
• HTTP Source bør være i stand til å blokkere et prefiks sett av protokoller.
• HTTPS tester mislykkes på Java 6
• Tillat konfigurering av aktiverte protokoller i Avro kilde og RPC klient

Hva er nytt i versjon 1.5.0:

• Ny funksjon:
• Innføre en slags SpillableChannel
• Tillat SpoolDir å passere bare filnavnet som er kilden til en hendelse
• Flume Context tillater ikke flyte eller dobbelt konfigurasjonsverdier.
• Oppgrader morphlines til 0.7.0
• Flume-ng-log4jappender Support bruker levert overskrifter
• Elasticsearch Sink for ES HTTP API
• Lagt til en vask for Kite datasett
• Ruller katalogen bør ikke alltid forbruke den eldste filen først.
• Forbedring:
• Flume Brukerveiledning eksempler på konfigurasjoner du trenger oppussing
• Gjør SpoolDir jobbe med underkataloger
• Vikling katalogen kilde skal kunne erstatte eller ignorere misdannede tegn
• Håndter større nyttelast via SyslogUDPSource
• Oppgrader morphline bibliotek avhengighet til en 0.5.0 utgivelse
• Redusere dupliserte hendelser forårsaket av reset-tilkobling-intervall

Hva er nytt i versjon 1.3.0:

• Lagt HTTP Post Kilde
• ElasticSearch Sink
• Flume adoptere melding fra eksisterende lokale Scribe
• Lagt til en multi syslog kilde
• File Channel bør støtte kryptering
• Lag en SpoolDirectory Source og Client
• Load Balancing RPC klient bør støtte eksponentiell treknings mislykkede noder
• Dump RollingFileSink telleren status når agenten stopper
• Regex Extractor Interceptor

Hva er nytt i versjon 1.2.0:

• Gjennomført en holdbar Memory Channel
• Laget utvikler guide for Flume NG
• Client SDK
• Gjennomført en holdbar FileChannel
• Gjennomførte Interceptorer (tidligere kjent som dekoratører) for Flume 1.x
• Gjennomført en HBase Sink som støtter tabellnivå tilgang
• Gjennomført Stempel Interceptor
• Asynchronous HBase Sink

Krav

• Java 1.6 eller nyere