Verwendung von Thoth als Echtzeit-Solr-Monitor und Suchanalysemaschine

Während wir den Countdown für die jährliche Lucene/Solr Revolution Konferenz in Austin im Oktober dieses Jahres herunterzählen, heben wir Vorträge und Sitzungen von vergangenen Konferenzen hervor. Heute stellen wir Ihnen die Sitzung von Damiano Braga und Praneet Mhatre vor, in der es darum geht, wie Trulia Thoth und Solr für die Überwachung und Analyse in Echtzeit einsetzt.

Die Verwaltung einer großen und breit gefächerten Solr-Suchinfrastruktur kann eine Herausforderung sein und es mangelt immer noch an guten Tools, die bei der Überwachung des gesamten Systems und bei der Skalierung helfen können. In dieser Sitzung werden wir Thoth vorstellen: eine Open-Source-Echtzeit-Solr-Monitoring- und Suchanalysemaschine, die wir geschrieben haben und derzeit bei Trulia einsetzen. Wir werden darüber sprechen, wie Thoth entwickelt wurde, warum wir uns für Solr entschieden haben, um Solr zu analysieren und auf welche Herausforderungen wir bei der Entwicklung und Skalierung des Systems gestoßen sind. Dann werden wir über einige nützliche Funktionen von Thoth sprechen, wie die Integration mit Apache ActiveMQ und Nagios für das Paging in Echtzeit, die Erstellung von Berichten über Abfragevolumen, Latenz, Zeitvergleiche und das Thoth Dashboard. Anschließend werden wir unsere Anwendung von Algorithmen des maschinellen Lernens und deren Ergebnisse für den Prozess der Abfrageanalyse und Mustererkennung zusammenfassen. Dann werden wir über die zukünftige Ausrichtung von Thoth sprechen, über Möglichkeiten, das Projekt mit neuen Plug-ins und der Integration mit Solr Cloud zu erweitern.

Damiano ist Teil des Suchteams bei Trulia, wo er auch bei der Verwaltung der Suchinfrastruktur und der Entwicklung interner Tools zur Unterstützung des Skalierungsprozesses hilft. Bevor er zu Trulia kam, studierte und arbeitete er an der Universität von Ferrara (Italien), wo er seinen Master-Abschluss in Informatik-Ingenieurwesen machte.
Praneet arbeitet als Data-Mining-Ingenieur im Algorithmus-Team von Trulia. Er arbeitet an Algorithmen zur Verarbeitung von Immobiliendaten, an der Erstellung von Statistiken und Trends, an vergleichbaren Häusern und anderen datengetriebenen Projekten bei Trulia. Bevor er zu Trulia kam, machte er seinen Bachelor-Abschluss in Computertechnik am VJTI in Indien und seinen Master in Informatik an der University of California, Irvine.

http://www.slideshare.net/lucidworks/thoth-realtime-solr-monitor-and-search-analysis-engine-41966720

Mitmachen auf der Lucene/Solr Revolution 2015, der größten Open-Source-Konferenz zum Thema Apache Lucene/Solr vom 13. bis 16. Oktober 2015 in Austin, Texas. Treffen Sie sich mit den Vordenkern, die die Open-Source-Suchtechnologie Lucene/Solr entwickeln und einsetzen, und tauschen Sie sich mit ihnen aus. Alle Details und Anmeldung…