Moderne, komplexe, sensorgestützte Systeme erzeugen enorme Datenmengen: Schon jetzt generieren teilautonom fahrende Autos über 25 Gigabyte pro Fahrzeug und Stunde. Solche Datenmengen lassen sich mit einer klassischen IT-Landschaft nicht mehr bewältigen – von einer Echtzeitauswertung ganz zu schweigen. Nur mit einer entsprechenden Big-Data-Strategie lässt sich diese exponentiell anwachsende Datenmenge nutzbar machen. Während aber der Einsatz bei hochspezialisierten Datenanalysen seit Jahren tägliche Praxis vieler Unternehmen ist, steht eine Integration in die restliche IT-Landschaft oft noch aus. Als Kern der Big-Data-Welt steht dabei das Open-Source-Framework Hadoop zur Verfügung. Dieses wächst sowohl stetig in seiner Mächtigkeit als auch in seiner Komplexität aufgrund der vielen verfügbaren Erweiterungen, wie z. B. Apache Kafka und NiFi. Diese Erweiterungen kommen oft direkt von den großen Unternehmen des […]