Insights do big data: um estudo de caso de uma grande empresa do setor financeiro para a obtenção de melhores decisões

Abstract

O conceito de Big Data surgiu na década de 1990, mas só ganhou popularidade e reconhecimento generalizado a partir dos anos 2000 que foi quando ele começou a ser adotados pelas empresas devido ao avanço nas tecnologias de armazenamento, processamento e análise de dados. Com o intuito de entender como as empresas, principalmente as incumbentes, tem lidado com esse assunto, esse estudo tem o objetivo de estudar o processo de uso dos dados por companhias que buscam habilitar a sua tomada de decisão baseada em dados e/ou criarem novas receitas a partir da criação de modelos baseados nos dados. Esse estudo foi baseado em um caso real de uma empresa nacional do ramo financeiro com mais de 40 anos de história, que foi investigada com o intuito de responder a seguinte pergunta de pesquisa: "Como a maior disponibilização de dados contribui para a geração de um maior número de insights provenientes de Big Data?". Para tal, foi utilizada uma metodologia de pesquisa semiestruturada que teve o objetivo de capturar a percepção de 8 entrevistados sobre o processo de restruturação de uma área de dados e como esse processo impacta na geração de insights. Todos os 8 estavam ocupando o cargo de cientistas de dados lotados nos departamentos: comercial, marketing e TI. As entrevistas foram realizadas de forma remota durante o período de novembro de 2022 a fevereiro de 2023. O estudo identificou que o uso dos dados e a obtenção de bons insights vai além da disponibilização dos dados para os cientistas de dados, exigindo um processo elaborado para garantir que os dados sejam disponibilizados de forma íntegra, documentados e padronizados para facilitar sua compreensão. Além disso, a democratização e aproveitamento dos dados devem ser considerados para que não sejam obtidos insights incorretos. O estudo permite, como implicação gerencial, trazer clareza e conhecimento para lideranças que planejam reestruturar as áreas de dados de suas respectivas companhias.

The concept of Big Data emerged in the 1990s, but it only gained popularity and widespread recognition starting in the 2000s, when it began to be adopted by companies due to advancements in data storage, processing, and analysis technologies. With the aim of understanding how companies, especially established ones, have dealt with this matter, this study aims to investigate the data utilization process by companies seeking to enable data-driven decision-making and/or create new revenue streams through the development of data-based models. This study was based on a real case of a domestic company in the financial sector with over 40 years of history. It was investigated to address the following research question: "How does increased data availability contribute to generating a greater number of insights from Big Data?" To achieve this, a semi-structured research methodology was employed to capture the perspectives of 8 interviewees on the process of restructuring a data department and how this process impacts insight generation. All 8 individuals held the role of data scientists within the commercial, marketing, and IT departments. The interviews were conducted remotely from November 2022 to February 2023. The study identified that effective data usage and the acquisition of valuable insights go beyond simply providing data to data scientists. It requires a well-designed process to ensure data integrity, documentation, and standardization for ease of understanding. Furthermore, democratization and utilization of data must be carefully considered to avoid deriving incorrect insights. The study's managerial implication is to offer clarity and knowledge to leaders who plan to restructure the data departments within their respective companies.