Wenn Sie am Rechner arbeiten, auf dem Tablet surfen oder eine Website auf einem Server betreiben, finden zahlreiche Prozesse unbemerkt im Hintergrund statt. Kommt es zu Problemen, treten Fehler auf oder wollen Sie nachvollziehen, welche Aktionen das Betriebssystem oder die verschiedenen Programmen und Dienste ausführen, können Ihnen die sogenannten Log-Dateien Auskunft geben. Sie werden von nahezu allen Anwendungen, Servern, Datenbanken und Systemen automatisch geführt und protokollieren alle relevanten Prozesse.
Generell werden Logfiles nur sehr selten ausgewertet – sie erfüllen eine ähnliche Funktion wie ein Flugschreiber, der nur in dringlichen Fällen inspiziert wird. Aufgrund der detaillierten Datenerfassung sind Log-Dateien allerdings auch eine erstklassige Quelle für umfassende Untersuchungen von Programm- und Systemfehlern sowie zur Erfassung des Nutzerverhaltens. Das macht sie nicht nur für Software-Hersteller, sondern auch für Website-Betreiber interessant, die aus der Log-Datei ihres Webservers interessante Informationen beziehen können.
Bei Logfiles, die man auch als Ereignisprotokolldateien bezeichnet, handelt es sich um gewöhnliche Textdateien. In ihnen sind alle Prozesse festgehalten, die vom Programmierer der jeweiligen Anwendung als relevant definiert worden sind. Im Falle der Log-Datei einer Datenbank sind das beispielsweise alle Änderungen von korrekt abgeschlossenen Transaktionen. Werden Teile der Datenbank gelöscht, z. B. im Falle eines Systemabsturzes, dient das Logfile als Basis für die Wiederherstellung des korrekten Datenbestands.
Log-Dateien werden gemäß der jeweiligen Programmierung automatisch erzeugt; es ist aber auch möglich, eigene Protokolldateien zu erstellen – sofern das notwendige Know-how vorhanden ist. Generell enthält eine Zeile eines Logfiles die beiden folgenden Angaben:
Typischerweise wird die Zeitangabe vorangestellt, um die chronologische Abfolge der Ereignisse wiederzugeben.
Betriebssysteme erstellen standardmäßig mehrere Protokolldateien, in denen die verschiedenen Prozesstypen kategorisiert festgehalten werden. Windows-Systeme führen beispielsweise Protokolle über Anwendungsereignisse, Systemereignisse, sicherheitsbezogene Ereignisse, Set-up-Ereignisse und weitergeleitete Ereignisse. Administratoren erhalten durch einen Blick in die entsprechende Log-Datei Informationen, die ihnen bei der Fehlerbehebung weiterhelfen können. Außerdem zeigen die Windows-Logfiles, welcher Nutzer sich wann auf dem System an- bzw. abgemeldet hat. Neben dem Betriebssystem sind es die folgenden Programme und Systeme, die ihrerseits ganz unterschiedliche Daten sammeln:
Ursprünglich diente die Protokolldatei von Webservern wie Apache oder Microsoft IIS der standardmäßigen Aufzeichnung und Behebung von Fehlern im Prozessablauf. Schnell entdeckte man allerdings, dass das Webserver-Logfile noch viel wertvollere Daten liefern kann – etwa Informationen über die Beliebtheit und Usability der auf dem Server gehosteten Website inklusive nützlicher Angaben über die Besucher wie zum Beispiel:
Ein typischer Eintrag einer Webserver-Log-Datei sieht so aus:
183.121.143.32 - - [18/Mar/2003:08:04:22 +0200] "GET /images/logo.jpg HTTP/1.1" 200 512 "http://www.wikipedia.org/" "Mozilla/5.0 (X11; U; Linux i686; de-DE;rv:1.7.5)"
| Bedeutung | Beispielwert | Erläuterung |
|---|---|---|
| IP-Adresse | 183.121.143.32 | Die IP-Adresse des anfordernden Hosts |
| Unbelegt | - | Standardmäßig nicht ermittelte RFC-1413-Identität |
| Wer? | - | Verrät den Nutzernamen, sofern eine HTTP-Authentifizierung stattgefunden hat; bleibt ansonsten wie in diesem Fall frei |
| Wann? | [18/Mar/2003:08:04:22 +0200] | Zeitstempel, bestehend aus Datum, Uhrzeit und Zeitverschiebungsangabe |
| Was? | "GET /images/logo.jpg HTTP/1.1" | Das stattgefundene Ereignis, in diesem Fall die Anforderung eines Bildes via HTTP |
| Ok | 200 | Bestätigung der erfolgreichen Anfrage (HTTP-Statuscode 200) |
| Wie viel? | 512 | Falls gegeben: Menge der übertragenen Daten in Byte |
| Woher? | "http://www.wikipedia.org/" | Webadresse, von der die Daten angefordert werden |
| Womit? | "Mozilla/5.0 (X11; U; Linux i686; de-DE;rv:1.7.5)" | Technische Angaben zum Client: Browser, Betriebssystem, Kernel, User-Interface, Sprachausgabe, Version |
Um die Flut an Informationen auszuwerten, wurden Tools wie Webalizer oder W3 Statistics entwickelt, die die erhobenen Daten in aussagekräftige Statistiken, Tabellen und Grafiken umwandeln. Aus diesen lassen sich beispielsweise Tendenzen über das Wachstum der Website, die Benutzerfreundlichkeit der einzelnen Seiten oder relevante Keywords und Themen ableiten.
Auch wenn die Webserver-Logfile-Analyse weiterhin praktiziert wird, wurde sie doch zum Großteil von neueren Methoden der Webanalyse wie Cookies oder Page-Tagging abgelöst. Die Ursachen dafür liegen zum einen in der hohen Fehleranfälligkeit der Protokolldatei-Analyse bei der Zuordnung von Sitzungen, zum anderen in der Tatsache, dass Betreiber einer Website oftmals gar nicht auf die Log-Datei des Webservers zugreifen können. Dafür werden alle Fehlermeldungen unmittelbar registriert. Außerdem bleiben die Daten, die aus einer Logfile-Analyse gewonnen werden, direkt beim Unternehmen.
Online kaufen wir ein, buchen unsere Urlaubsreise und suchen nach Geschenkideen, ohne darüber nachzudenken, dass wir mit jeder Suchanfrage und jeder Eingabe unserer Mailadresse eine Spur hinterlassen. Fleißige Datenkraken sammeln diese Informationen – was entsteht, ist Big Data: Massendaten, die zu unzähligen Zwecken analysiert und verwendet werden. Doch muss man wirklich Angst um seine Daten...
Die weltweite Datenmenge steigt jährlich um rund 40 Prozent. Unternehmen wollen sich das konstante Wachstum des digitalen Datenbergs zunutze machen, um ihr Onlinegeschäft auszuweiten. Doch Big Data allein bringt keinen Erkenntnisgewinn. Unter dem Stichwirt „Data-Mining“ werden daher Analyseverfahren diskutiert, die es ermöglichen, relevante Informationen aus Datenbeständen zu ziehen – und zwar...
