Logstash
Logstash je softvér, ktorý pomáha filtrovať a ukladanie dát. Ide o výrobok z elastického, spoločnosť bola založená v roku 2012 v Amsterdame. Elastic bol vytvorený programátorov, ktorí robili Apache Lucene a ElasticSearch: Shay Banon, Steven Schuurman, Simon Willnaur a Uri Boness. V súčasnej dobe firma zamestnáva ľudí v 32 krajinách. Centrála Spojené štáty americké spoločnosti v Mountain View v Kalifornii. Existujú aj ďalšie americkí kancelárie vo Phoenixe, New Yorku a San Franciscu. ďalšie kancelárie Elastic sú v Amsterdame, Hong Kong, Švajčiarsku, Veľkej Británii, Berlín, Mníchov, Nórska, Japonska, Kórey, Singapuru, Francúzska a Austrálie. Ostatné produkty ponúkané Elastic patria Kibana, Beats, X-Pack, Elastic Cloud ES-Hadoop a niektoré ďalšie menšie ponuky. Pozoruhodné zákazníkov patria Sprint, Indiana University, Travelport, uchopiť, Stormfish SAP Concur, CBC, objaviť, Fermilab, eBay, Lyft, IEEE, Blizzard Entertainment, Citibank, Otto Motors, Cox Communications a Credit Suisse.
- Prijíma dáta z prakticky akýkoľvek zdroj alebo udalosti a spracováva je pre výstup na "ukrývať" (alebo veľa úložných miest, v závislosti na filtroch)
- Dáta môžu byť analyzované pomocou programovania a transformovala počas prepravy.
- Napríklad Logstash možno dešifrovať zemepisných súradníc od vstupu IP adries
- Kompatibilný s Elastic Stack dátové analytikmi pre rýchle nahliadnutie
- Multiple viditeľnosť (Elastic X-Pack) nástroje na sledovanie serverov a programu predstavenie
- Open source a úplne zadarmo k stiahnutiu a používaniu
- Aktívne rozvíjať. Najnovšie aktualizácie (verzia 6.2.3) bola vydaná 20. marca 2018
- Inštalácia je len štyri jednoduché kroky a príkazového riadka: bin / logstash -f logstash.conf
- Komplexný sprievodca je k dispozícii on-line na pomoc noví správcovi získať začal (tam je tiež užitočná videá k dispozícii tu)
- Závislá na technológii Java, ktorá má svoje vlastné problémy s chybami zabezpečenia (najnovšie verzie Logstash vyžadujú Java verzia 8 alebo vyšší pre inštaláciu)
Správa dát je základnou súčasťou tech orientované podniky, a dnes, môžu údaje pochádzajú z mnohých zdrojov naraz. Ale ako sa spoločnosť organizuje obrovský tok dát zo všetkých strán? To je miesto, kde Logstash príde vhod. Tento server side program je špeciálne navrhnutý tak, aby prijímať dáta zo všetkých "veľkostí, tvarov a zdrojov." Počas spracovania dát môže byť poslaný cez filtre pre určenie jeho konečného cieľa, ktorým môže byť jeden alebo rôzne "stashes," ako sú servery, mraky alebo iných skladovacích priestorov. Dáta je možné zadať z elastického Beats, Amazon Web Services CloudWatch API, gauč DB, ElasticSearch klastrov, shell výstupu príkazu, udalosti zo súborov, gangliá pakety cez UDP, GELF formátu správ (napr udalostí) prostredníctvom Graylog2, Google Cloud PubSub, grafit, HTTP alebo HTTPS akcie, akcie z IRC servera, JMS Broker udalosti, Java aplikácií metriky cez JMX, prenosom AWS Kinesis, drevorubač, serverové udalosti bábka, výmenné RabbitMQ akcie, RELP akcie cez TCP socket, Salesforce SOQL otázky, SNMP trap akcie , AWS Simple Queue služba, Twitter streaming API, zásuvka udalosti UNIX, XMPP / Jabber protokol udalostí a ďalšie. K dispozícii je aj modul pre generovanie náhodných udalostí na testovacie účely. Logstash je ideálna pre automatické zber dát a ich spracovanie, ukladanie veľa času produktivity pre iné úlohy. Softvér je vysoko konfigurovateľný, a cez 200 pluginy existujú uistiť, že Logstash zvládne bez ohľadu na údaje, ktoré sú uvedené.