Conectando dados e tecnologia com negócios

Dados e as tecnologias para extraí-los, processá-los, analisá-los e consumi-los têm sido meu foco e paixão nas últimas duas décadas , em funções tão diversas quanto arquiteto de dados, inovação de negócios de dados, gerente de produto de dados e pesquisador com algumas patentes em dados e tecnologias de aprendizado de máquina.

E mesmo antes disso, em meus primeiros anos como desenvolvedor e arquiteto de sistemas de TI mais tarde, nunca estive muito longe dos dados e bancos de dados, sendo capaz de entender em primeira mão como os dados são fundamentais para o software que criamos.

Mas, ao mesmo tempo, como desenvolvedor, também experimentei como os dados se perdem na longa lista de recursos, roteiros, tecnologias, prioridades de projetos e tarefas de desenvolvimento e acabam sendo tratados como uma mercadoria armazenada em um banco de dados, basicamente para persistir os dados necessários para a lógica do aplicativo.

Assim, nos diagramas de arquitetura de TI, os dados e bancos de dados são representados bem na parte inferior, o que expõe a falha em entender que:

• Os dados captam a essência, a alma da aplicação, os dados são como a projeção em duas dimensões de um objeto tridimensional.
• Há mais dados em todos os lugares de um aplicativo, negligenciados, mas parte de um quadro maior: dados em todos os componentes, dados em todas as interações .
• Os dados sempre sobreviverão à tecnologia, que fica obsoleta muito rápido, enquanto em paralelo os dados são melhor compreendidos, extraindo mais valor.

Foi (e ainda é!) um passeio divertido, em grande parte porque tive a sorte de trabalhar e liderar equipes de arquitetos, engenheiros e cientistas de dados brilhantes. Juntos, tivemos muitas ideias e colocamos algumas delas em prática para tornar os dados valiosos: tornando as equipes ao nosso redor mais eficientes, expandindo os negócios de nossa empresa ou até mesmo monetizando insights de dados agregados externamente, para outras empresas fazer melhor seus negócios.

Claro, também fiz grandes amigos nas áreas jurídica, financeira, comercial, compliance, operações e muitas outras áreas, porque partimos das possibilidades dos dados, mas nada realmente acontece sem a conformidade com os regulamentos de dados ou limites legais, se houver são problemas técnicos ou operacionais, ou se não é digno de negócios.

Como eu disse, esse tem sido meu foco e paixão há algum tempo, e agora sinto vontade de refletir sobre isso e compartilhar algumas dessas reflexões, porque acho que esse é um problema generalizado, não apenas minhas divagações. Eu experimentei isso em enormes corporações da Fortune 10, bem como em pequenas empresas iniciantes, em ambas as extremidades do mesmo espectro… e cara, isso lhe dá alguma perspectiva!

Então, vou tentar escrever um pouco mais sobre isso, juntar meus pensamentos, verificar a realidade com outros profissionais para tornar isso o mais útil possível e, idealmente, ajudar a extrair mais valor dos dados, conectando-os melhor aos negócios (e do cliente) precisa...

Preparar?