Criação de Data Lake com Apache Nifi

O projeto de criação do Data Lake da General Shopping utilizando Apache Nifi que unificou bases de dados de origens distintas, além de dados do Google Analytics, Google Ads, Facebook e Instagram através de conexões diretas, API's e troca de arquivos por meio do SFTP. Essas integrações permitirão que analises sejam feitas utilizando o Oracle Analytics e campanhas de marketing sejam criadas utilizando o Oracle Responsys. O escopo do projeto tinha como requisito a auditoria dos dados após as integrações para garantir que os dados estivessem sendo importados corretamente todos os dias. Todo o projeto foi documentado, incluindo as integrações do Apache Nifi, estruturas de dados, API's, processos, etc;

A tarja vermelho no documento acima tem como objetivo ocultar informações de cunho pessoal como assinaturas e cpf. O documento foi assinado eletronicamente por mim e o representando legal da empresa atravez da plataforma DocuSign.