Mais de 80% dos dados de uma empresa não são estruturados. Isso engloba conversas telefônicas, mensagens de voz, e-mails, documentos eletrônicos, documentos em papel, imagens, páginas web, vídeo e centenas de outros formatos. Investem-se milhões de reais em sistemas para estruturar 20% dos dados e, muitas vezes, as decisões empresariais são tomadas apenas analisando os dados estruturados.
Felizmente, as coisas estão mudando. As novas tecnologias de big data estão conseguindo capturar e converter os dados estruturados e não estruturados em informações úteis para as empresas. Baseado na análise de pentabytes de dados é possível identificar padrões e melhorar as tomadas de decisão.
Dentro deste contexto, qual o perfil dos novos profissionais das empresas, incluindo os profissionais de TI. No modelo tradicional, os analistas de sistemas transformavam o mundo real em dados estruturados. No novo modelo, os analistas devem interpretar e buscar o significado dos dados para produzir informação útil para as empresas. O novo perfil de profissional deve ser criativo e flexível para perceber e entender o significado dos dados.
A tecnologia de Big Data trará uma grande vantagem competitiva para as empresas que conseguirem dispor de grandes quantidades de dados para analisar, tecnologia e pessoal capacitado para entender o significado e padrões de dados. Essa tecnologia permite que os executivos vejam os fatos no para-brisa do carro e não mais pelo retrovisor.
Big data é uma tecnologia revolucionária. Permitirá que as empresas criem novos produtos e aperfeiçoem os produtos atuais nos mercados que atuam. Por ser uma tecnologia nova e requerer grande poder computacional, gigantescos sistemas de armazenamento de dados e complexidade de uso, ela só está disponível para grandes empresas.
As empresas que dominarem mais rapidamente essa tecnologia e enxergando a Internet como um grande repositório de dados, incluindo blogs e redes sociais, terá a oportunidade de descobrir padrões de comportamento em mercados onde não atuam. Com isso poderão desenvolver produtos e serviços para outros mercados desbancando as empresas já estabelecidas.
Acredito que com o tempo essa tecnologia esteja acessível para outras empresas de menor porte com custos mais vantajosos. Entretanto, o grande desafio será preparar as pessoas para entender o significado dos dados, fazer as perguntas certas e tomar as decisões adequadas.
Veja a entrevista com o Dr. Mike Lynch da Autonomy, empresa adquirida pela HP, que tem uma poderosa ferramenta de análise de dados estruturados e não estruturados.