Die 5 Begriffe mit «V»
Die 5 Vs von Big Data beschreiben die wesentlichen Merkmale, die Big Data ausmachen und die Herausforderungen bei der Verarbeitung und Analyse grosser Datenmengen erklären. Hier sind die 5 Vs mit kurzer Erklärung:
- Volume (Datenmenge): Bezieht sich auf die riesige Menge an Daten, die täglich erzeugt wird – oft in Terabytes oder sogar Petabytes. Die schiere Datenmenge stellt hohe Anforderungen an Speicher und Verarbeitung.
- Velocity (Geschwindigkeit): Beschreibt, wie schnell die Daten generiert, gesammelt und verarbeitet werden müssen. Manche Daten (z.B. von Sensoren oder sozialen Medien) werden in Echtzeit oder nahezu in Echtzeit erzeugt und müssen schnell analysiert werden.
- Variety (Vielfalt): Bezieht sich auf die verschiedenen Arten und Formate von Daten, z.B. strukturierte Daten (Tabellen), unstrukturierte Daten (Text, Bilder, Videos).
- Veracity (Wahrhaftigkeit/Genauigkeit): Bezieht sich auf die Zuverlässigkeit, Qualität und Vertrauenswürdigkeit der Daten. Daten können ungenau, inkonsistent oder unvollständig sein, was die Analyse erschwert.
- Value (Wert): Der wichtigste Aspekt aus Unternehmenssicht: Es geht darum, wie viel Nutzen aus den Daten gewonnen werden kann, also wie wertvoll die Erkenntnisse und Informationen sind, die aus den Daten extrahiert werden.
Aufgabe: 5 Vs auf den Spamfilter bezogen
Ist unser Spamfilter eine Big Data-Anwendung? Begründe mit allen 5 Vs.
Lösung (nicht angemeldet)
Diese Lösung ist nur für angemeldete Benutzer zugänglich – wenn die LK die Lösung freigegeben hat. Bitte melde dich an, um die Lösung einsehen zu können.Datenarten und -grössen
Wir werden in der nächsten Aufgabe abschätzen, wie viele Daten du täglich generierst. Dazu ein paar Inputs:
Wie gross ist eine Seite Text? Was beeinflusst die Grösse einer Textdatei?
Unter der Annahme, dass eine Seite Text 46 Zeilen à 100 Zeichen (inkl. Leerzeichen) hat, besteht eine Seite Text aus 4600 Zeichen. Eine Seite ASCII-Text (1 Byte pro Zeichen) braucht somit ungefähr 5 kB.
Da Texte meist mit Unicode codiert sind (1 bis 4 Bytes pro Zeichen), um alle möglichen Zeichen darzustellen, benötigt eine Seite Unicode-Text somit bis zu viermal so viel Speicherplatz (also bis zu 20 kB). Bei Worddateien kann der Text zusätzlich formatiert werden (z.B. fette, kursive, farbige Zeichen), so dass der Speicherbedarf noch grösser wird.
Zusammenfassend beeinflussen die Anzahl Zeichen, die Textcodierung und die Formatierung des Textes die Grösse einer Textdatei.
Wie gross ist eine Minute Audio? Was beeinflusst die Grösse einer Audiodatei?
Die Grösse wird durch die Dauer und Qualität (Bitrate, Anzahl Kanäle [z.B. Stereo], Komprimierung) der Audiodatei beeinflusst. MP3 ist ein gängiges Audioformat, bei der eine Minute etwa 1 MB gross ist.
Wie gross ist ein Bild? Was beeinflusst die Grösse einer Bilddatei?
Die Speichergrösse wird durch die Bildgrösse (Auflösung resp. Anzahl Pixel), Qualität (Farbtiefe, Komprimierung, Dateiformat) und sogar vom Inhalt der Bilddatei beeinflusst. Ein Foto eines gängigen Smartphone braucht ungefährt 5 MB Speicherplatz.
Wie gross ist eine Minute Video? Was beeinflusst die Grösse einer Videodatei?
Die Grösse wird durch die Dauer und Qualität (Bildrate, Bildqualität, Audioqualität, Komprimierung) der Videodatei beeinflusst. Je nach Qualität kann eine Minute Video ungefähr 100 MB gross sein.
Aufgabe: Schätzaufgabe zu Big Data
- Mit welchen Geräten generierst du Daten?
- Welche Arten von Daten generierst du damit täglich im Durchschnitt?
- Schätze mit den Angaben von oben, wie gross die Datenmenge ist, die du täglich generierst.
- Unter der Annahme, dass alle Menschen auf der Erde (ungefähr 8 Milliarden) gleich viele Daten generieren, wie gross ist der geschätzte tägliche, globale Datenzuwachs?