Apache Flink - Piattaforma Big Data

Il progresso dei dati negli ultimi 10 anni è stato enorme; questo ha dato origine al termine "Big Data". Non esiste una dimensione fissa dei dati, che puoi chiamare big data; tutti i dati che il tuo sistema tradizionale (RDBMS) non è in grado di gestire sono Big Data. Questi Big Data possono essere in formato strutturato, semi-strutturato o non strutturato. Inizialmente, c'erano tre dimensioni per i dati: volume, velocità, varietà. Le dimensioni ora sono andate oltre solo le tre vs. Ora abbiamo aggiunto altri V: Veridicità, Validità, Vulnerabilità, Valore, Variabilità, ecc.

I Big Data hanno portato all'emergere di molteplici strumenti e framework che aiutano nell'archiviazione e nell'elaborazione dei dati. Esistono alcuni framework di big data popolari come Hadoop, Spark, Hive, Pig, Storm e Zookeeper. Ha anche dato l'opportunità di creare prodotti Next Gen in più domini come sanità, finanza, vendita al dettaglio, e-commerce e altro ancora.

Che si tratti di una multinazionale o di una start-up, tutti stanno sfruttando i Big Data per archiviarli ed elaborarli e prendere decisioni più intelligenti.