Apache Flume

Apache Flume a fost dezvoltat ca un sistem intermediar care colectează busteni de la o aplicație și oferă-l la un alt.
Acesta ar trebui să lucreze cu cele mai multe aplicații Java și dezvoltatorii ar trebui să fiți siguri, Flume protejată împotriva pierderilor de date și eșec servicii.
Date jurnal este transmisă în timp real, prin intermediul sistemelor de tolerante vina cu suport pentru mai multe mecanisme de failover și de recuperare.
Deoarece Flume conduce la o locație centrală, dezvoltatorii se poate administra cu ușurință și, de asemenea, robinet în resursele sale pentru statisticile și în scopuri analitice.
O caracteristică ascunsă de Flume este real sistem de "date-agnostic". Acest lucru înseamnă că puteți schimba cu ușurință sursa de un flux de date de la o ieșire jurnal de altceva și să utilizeze Flume pentru informații în condiții de siguranță agregate din diverse tipuri de servicii.
Acestea pot fi mesaje de e-mail, fluxuri de social media, traficului de rețea, și așa mai departe

Ce este nou în această versiune:.

• Eliminarea SSLv2Hello provoacă Java 6 clienți să rupă
• Activare SSLv2Hello pentru Avro Source și NettyAvroRpcClient
• Activare SSLv2Hello pentru HttpSource
• Adaugata dev-suport pentru src tar
• de testare Unitate TestHTTPSource.java eșuat cu IBM JDK 1.7
• HTTP Sursa ar trebui să poată bloca un set prefixul de protocoale.
• HTTPS teste nu pe Java 6
• Permiteți configurarea protocoalelor activate în sursă Avro și client RPC

Ce este nou în versiunea 1.5.2:

• Eliminarea SSLv2Hello provoacă Java 6 clienți pentru a rupe
• Activare SSLv2Hello pentru Avro Source și NettyAvroRpcClient
• Activare SSLv2Hello pentru HttpSource
• Adaugata dev-suport pentru src tar
• de testare Unitate TestHTTPSource.java eșuat cu IBM JDK 1.7
• HTTP Sursa ar trebui să poată bloca un set prefixul de protocoale.
• HTTPS teste nu pe Java 6
• Permiteți configurarea protocoalelor activate în sursă Avro și client RPC

Ce este nou în versiunea 1.5.0:

• Element nou:
• Introducerea un fel de SpillableChannel
• Permiteți SpoolDir să treacă doar numele fișierului care este sursa unui eveniment
• Flume Context nu suporta float sau valorile de configurare duble.
• Upgrade morphlines la 0.7.0
• antete furnizate canal-ng-log4jappender utilizator Suport
• Elasticsearch Chiuveta pentru ES HTTP API
• Adăugat o chiuveta pentru Kite Seturi de date
• Director formand ghem nu ar trebui să consume întotdeauna cel mai vechi fișier primul.
• Îmbunătățirea:
• configurații de probă Flume Ghid de utilizare trebuie să fixare
• Asigurați-SpoolDir lucra cu Sub-Directoare
• formand ghem sursă director ar trebui să poată să înlocuiască sau să ignore caractere incorect
• Mâner sarcini utile mai mari prin SyslogUDPSource
• Upgrade dependență bibliotecă morphline unui comunicat 0.5.0
• Reducerea evenimente duplicat cauzate de resetare conexiune interval

Ce este nou în versiunea 1.3.0:

• Adaugat HTTP post Sursa
• ElasticSearch Chiuveta
• Flume adopta mesaj de existenta Scribe locală
• Adaugata o sursă multiport syslog
• Fișier canal ar trebui să sprijine criptare
• Creați o sursă de SpoolDirectory și Client
• Load Balancing client RPC ar trebui să sprijine revenire exponențială a nodurilor eșuate
• Dump statutul contra RollingFileSink când agentul se oprește
• Regex Extractor Interceptor

Ce este nou în versiunea 1.2.0:

• Implementarea unui Memory durabil canal
• Ghid de dezvoltator Creat pentru Flume GN
• SDK Client
• Implementarea unei durabil FileChannel
• interceptare Implementarea (cunoscut anterior ca decoratori) pentru Flume 1.x
• Implementarea unei HBase Sink care sprijină accesul la nivel de masă
• Implementarea Timestamp Interceptor
• Asynchronous HBase Chiuveta

Cerințe :

• Java 1.6 sau mai mare