Big Data bezieht sich auf eine Sammlung von Daten, die mit herkömmlichen Softwaretools nicht innerhalb eines bestimmten Zeitraums erfasst, verwaltet und verarbeitet werden können. Es handelt sich um massive und schnell wachsende Daten, die neue Verarbeitungsmodelle erfordern, um eine stärkere Entscheidungsbefugnis zu haben. Möglichkeiten zur Erkenntnisgewinnung und Prozessoptimierung, Effizienz und Diversifizierung der Informationsbestände. Merkmale von Big Data: 1. Riesige Datenmengen und eine große Auswahl an Datenquellen bestimmen die Vielfalt von Big Data. 3. Hohe Geschwindigkeit, dh schnelles Datenwachstum und schnelle Verarbeitung Dichte; 5. Hoher kommerzieller Wert.
Die Betriebsumgebung dieses Tutorials: Windows 7-System, Dell G3-Computer.
Was ist Big Data?
Big Data (Big Data), ein Begriff aus der IT-Branche, bezieht sich auf eine Sammlung von Daten, die mit herkömmlichen Softwaretools nicht innerhalb eines bestimmten Zeitraums erfasst, verwaltet und verarbeitet werden können und erfordert ein neues Verarbeitungsmodell. Nur so können wir über riesige, wachstumsstarke und diversifizierte Informationsbestände mit stärkerer Entscheidungskraft, Erkenntnissen und Möglichkeiten zur Prozessoptimierung verfügen.
In „The Age of Big Data“ von Victor Meier-Schoenberg und Kenneth Cukier bedeutet Big Data, nicht Abkürzungen wie Zufallsanalysen (Stichprobenumfrage) zu verwenden, sondern alle Daten zur Analyse und Verarbeitung zu nutzen. Die 5V-Merkmale von Big Data (vorgeschlagen von IBM): Volume (Kapazität), Velocity (hohe Geschwindigkeit), Variety (Vielfalt), Value (geringe Wertedichte) und Veracity (Authentizität).
Merkmale
Volumen: Die Größe der Daten bestimmt den Wert und die potenziellen Informationen der betrachteten Daten;
Vielfalt: die Vielfalt der Datentypen;
Geschwindigkeit: bezieht sich auf die Geschwindigkeit, mit der Daten erfasst werden;
Variabilität (Variabilität): behindert den Prozess der Verarbeitung und effektiven Verwaltung von Daten.
Wahrhaftigkeit: die Qualität der Daten.
Komplexität: Die Datenmenge ist riesig und kommt aus mehreren Kanälen.
Wert: Rationale Nutzung von Big Data, um hohen Wert zu geringen Kosten zu schaffen.
Was sind die Merkmale von Big Data? 1. Das Datenvolumen ist riesig. Mit der Entwicklung der Internetbranche werden im täglichen Betrieb viele Daten über das Netzwerkverhalten von Benutzern generiert und gesammelt . Beispielsweise generieren soziale E-Commerce-Plattformen täglich Bestellungen, Beiträge, Kommentare und kurze Videos, die von verschiedenen Kurzvideos, Foren und Communities veröffentlicht werden, täglich versendete E-Mails sowie hochgeladene Bilder, Videos und Musik usw., der Umfang der generierten Daten von unzähligen Einzelpersonen Es ist sehr groß und das Datenvolumen hat bereits das PB-Niveau erreicht. Wenn solch große Datenmengen verarbeitet, analysiert und gezählt werden sollen, müssen sie über eine ausreichend große Kapazität verfügen. Daher ist eine der Eigenschaften von Big Data ihr riesiges Volumen. 2. Vielfältige Datenformen
Eine Vielzahl von Datenquellen bestimmt die Vielfalt von Big-Data-Formen. Jede Form von Daten kann nützlich sein. Derzeit wird am häufigsten das Empfehlungssystem verwendet, z. B. Taobao, NetEase Cloud Music, Toutiao usw. Diese Plattformen analysieren die Protokolldaten der Benutzer, um den Benutzern weitere Empfehlungen zu geben. Bei Protokolldaten handelt es sich um klar strukturierte Daten, und es gibt auch einige Daten, die nicht klar strukturiert sind, z. B. Bilder, Audios, Videos usw. Diese Daten weisen schwache kausale Zusammenhänge auf und erfordern manuelle Anmerkungen.
3. Hohe Geschwindigkeit
Die hohe Geschwindigkeit von Big Data bezieht sich auf das schnelle Wachstum von Daten und die schnelle Verarbeitung. Jeden Tag nehmen die Daten aus allen Lebensbereichen exponentiell zu. In vielen Szenarien sind Daten zeitkritisch. Beispielsweise müssen Suchmaschinen die von Benutzern benötigten Daten innerhalb weniger Sekunden bereitstellen. Wenn Unternehmen oder Systeme mit schnell wachsenden Datenmengen konfrontiert werden, müssen sie diese mit hoher Geschwindigkeit verarbeiten und schnell reagieren.
4. Geringe Wertedichte
Die geringe Wertedichte von Big Data bedeutet, dass es unter den riesigen Datenquellen nur sehr wenige wirklich wertvolle Daten gibt, die möglicherweise falsch sind und nicht verwendet werden können. Im Allgemeinen ist die Dichte der wertvollen Daten in den Gesamtdaten sehr gering und die Datenverfeinerung gleicht dem Surfen im Sand.
5. Hoher kommerzieller Wert
Der größte Wert von Big Data besteht darin, aus einer großen Menge irrelevanter Daten verschiedener Art wertvolle Daten für zukünftige Trend- und Mustervorhersageanalysen zu gewinnen Methoden des maschinellen Lernens, Methoden der künstlichen Intelligenz oder Data-Mining-Methoden können wir neue Regeln und neues Wissen entdecken und sie auf verschiedene Bereiche wie Landwirtschaft, Finanzen und medizinische Versorgung anwenden, um letztendlich die Ziele der Verbesserung der sozialen Governance und der Steigerung zu erreichen Produktionseffizienz und Förderung der wissenschaftlichen Forschung und Realisierung ihres kommerziellen Werts.
Empfohlen: „
Programmiervideo
“
Das obige ist der detaillierte Inhalt vonWas ist Big Data? Was sind die Merkmale von Big Data?. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!
