Apache Flink - Plataforma de Big Data
O avanço dos dados nos últimos 10 anos foi enorme; isso deu origem ao termo 'Big Data'. Não há tamanho fixo de dados, que você pode chamar de big data; qualquer dado que seu sistema tradicional (RDBMS) não é capaz de manipular é Big Data. Este Big Data pode ser em formato estruturado, semiestruturado ou não estruturado. Inicialmente, havia três dimensões para os dados - Volume, Velocidade, Variedade. As dimensões agora vão além dos três vs. Agora adicionamos outros Vs - Veracidade, Validade, Vulnerabilidade, Valor, Variabilidade, etc.
Big Data levou ao surgimento de múltiplas ferramentas e frameworks que auxiliam no armazenamento e processamento de dados. Existem algumas estruturas de big data populares, como Hadoop, Spark, Hive, Pig, Storm e Zookeeper. Também deu a oportunidade de criar produtos da próxima geração em vários domínios, como saúde, finanças, varejo, comércio eletrônico e muito mais.
Seja uma multinacional ou uma start-up, todos estão aproveitando o Big Data para armazená-lo e processá-lo e tomar decisões mais inteligentes.