Big Data Analysis

Der Begriff Big Data Analysis bezeichnet allgemein den Prozess, grosse Datenmengen zu analysieren:

• Durchschnittstemperatur pro Land im Januar über die letzten 20 Jahre
• Anzahl der von Männern im Alter von 20 - 30 Jahren gekauften Artikel über Fr. 100.-

Data Mining

Der Begriff Data Mining bezeichnet das Erschliessen von neuem Wissen aus grossen Datenmengen.

• Artikel A, B, C werden häufig zusammen gekauft
• Leute, die den Film F mögen, mögen auch Film G
• Patienten, die gut auf Medikament X und Y ansprechen, werden auch auf Medikament Z gut ansprechen

Machine Learning

Machine Learning ist eine Anwendung aus dem Bereich der künstlichen Intelligenz. Machine Learning ermöglicht Systemen, dass sie selbständig (durch Verarbeitung grosser Datenmengen) lernen und sich ständig verbessern. So können sie beispielsweise auf unbekannte Eingaben sinnvolle Ausgaben erzeugen.

• Objekterkennung auf Bildern:
  • Tier, Mensch, Haus, Baum, …
  • Katze, Hund, Papagei, …
• Spracherkennung (z.B. erkennen, dass gesprochen wird)

Datenvisualisierung

Grosse Datenmengen können kaum sinnvoll angezeigt werden. Folglich ist eine geeignete Visualisierung wichtig, die Zusammenhänge und Muster innerhalb der Datenmenge sichtbar macht.

Datenaufbereitung

Datenmengen können nicht einfach blind verwendet werden, sie müssen geprüft und aufbereitet werden. Fragen, die sich stellen:

• Wie wird mit Lücken in Daten (also unvollständigen Datensätzen) umgegangen?
• Wie können verdächtige Daten oder Duplikate entfernt werden?