Big Data

Question 1

Was macht Big Data aus?

Answer 1

Volume, Variety, Velocity, Veracity

Question 2

Was ist der Software Stack für Big Data Management?

Answer 2

Data Analysis
NoSQL, Search, Streaming oder SQL, Scripting
Data Processing Framework
Data Storage

parallel: Resource Management

Question 3

Was unterscheidet Spark von MapReduce?

Answer 3

Iteratives Vorgehen erleichtert
Invariante Daten (Resilient Distributed Dataset, RDD)
lazy => Optimierungen (Pipelining)
Lineage Graph

Question 4

Was sind die Vorteile von MapReduce gegenüber SQL?

Answer 4

Flexibilität
Skalierbarkeit
Effizienz
Fehlertoleranz

Question 5

Welche MapReduce Joins wurden vorgestellt?

Answer 5

Natural Join / Equi-Join
- Repartition Join
- Semi-Join
Theta-Join