Groß angelegte Protokollanalyse mit Solr
Während der Countdown für die jährliche Lucene/Solr Revolution Konferenz in Boston im Oktober läuft, heben wir die Vorträge und Sitzungen der vergangenen Konferenzen hervor. Heute stellen wir Ihnen den Vortrag „Large Scale Log Analytics with Solr“ von Radu Gheorghe und Rafał Kuć von Sematext vor. Radu und Rafał werden auch auf der Lucene/Solr Revolution 2016 sprechen. .
In diesem Vortrag geht es um das Durchsuchen und Analysieren von zeitbasierten Daten im großen Maßstab. Dokumente von Blogbeiträgen und sozialen Medien bis hin zu Anwendungsprotokollen und Metriken, die von Smartwatches und anderen intelligenten Dingen generiert werden, weisen ein ähnliches Muster auf: Zeitstempel unter den Feldern, selten änderbar, Löschung, wenn sie veraltet sind.
Diese Art von Daten ist so groß, dass sie oft Skalierungs- und Leistungsprobleme verursacht. Dieser Vortrag befasst sich mit diesen Herausforderungen, wie z.B. der richtigen Gestaltung der Architektur von Sammlungen, der schnellen Indizierung von Daten, ohne dass Dokumente in Warteschlangen auf die Verarbeitung warten müssen, der Möglichkeit, Abfragen mit zeitbasierter Sortierung und Facettierung auf enormen Mengen indizierter Daten auszuführen, ohne Solr mit Out-of-Memory-Problemen zu erschlagen, und vielem mehr.
Radu ist ein Such- und Protokollierungsexperte bei Sematext, der täglich mit Elasticsearch, Logstash und rsyslog arbeitet. Co-Autor von Elasticsearch in Aktion
Rafał ist Vater, Ehemann, Sematext-Softwareentwickler und Berater, Autor von Solr Cookbook und Elasticsearch Server-Büchern und Mitbegründer von http://solr.pl.
http://www.slideshare.net/lucidworks/large-scale-log-analytics-with-solr-presented-by-rafa-ku-radu-gheorghe-sematext-group-inc
Mitmachen auf der Lucene/Solr Revolution 2016, der größten Open-Source-Konferenz zum Thema Apache Lucene/Solr vom 11. bis 14. Oktober 2016 in Boston, Massachusetts. Treffen Sie sich mit den Vordenkern, die die Open-Source-Suchtechnologie Lucene/Solr entwickeln und einsetzen, und vernetzen Sie sich mit ihnen. Vollständige Details und Anmeldung…