Evaluation des „Apache Spark“-Frameworks für den Anwendungsfall Social Media Monitoring

Abstract

Diese Arbeit befasst sich mit dem Framework zur Clusterberechnung „Apache Spark“. Speziell wird untersucht, ob sich das Framework für das Social Media Monitoring eignet. Um eine Evaluation vornehmen zu können, wird aufbauend auf dem Framework ein exemplarisches System entworfen und entwickelt. Dieses System wird Twitter und IMDb beobachten und anhand der dort gesammelten Daten Vorhersagen zum Erfolg von Filmen treffen. Anhand der während der Entwicklung gewonnenen Erfahrungen wird das Framework zum Abschluss evaluiert.

This thesis is about the cluster-computing framework "Apache Spark". It will be examined, whether the framework is capable of creating a powerful social media monitoring application. In order to properly evaluate the framework, a exemplary software-system will be designed and developed. This system will monitor Twitter and IMDb and will be able to predict the opening-weekend success of a movie based on the data collected from those sources. At the end, the framework will be evaluated based on the experience gained during the development process.