1. Introdução 1.1 Objetivos Este manual corporativo estabelece as diretrizes estratégicas, metodológicas e operacionais para a implementação e consolidação do Portal de Fonte Única da Verdade no âmbito das empresas controladas, sob a governança técnica e arquitetura de dados providas pelo Núcleo de Valor e Automação (NVA) da AN Consultoria. O Portal NVA é concebido como repositório oficial de metadados, linhagem e relações de dados do grupo. O objetivo em atuar como o impulsionador tático e operacional de inovação digital do Grupo, garantindo a governança centralizada dos dados fidedignos e transformando diretrizes estratégicas em automações e sistemas que gerem valor real, mensurável e contínuo para os processos internos e para a experiência do cliente. Para alcançar esse estado de excelência operacional, o Portal NVA rege-se pelos seguintes princípios fundamentais: Responsabilidade Definida: Todo dado integrado ao ambiente corporativo deve, obrigatoriamente, possuir um Dono de Processo de Negócio responsável pela sua fidedignidade e um Guardião Técnico responsável pelo seu suporte infraestrutural. Rastreabilidade de Ponta a Ponta: Deve ser possível mapear a trajetória de qualquer informação desde o sistema operacional de origem, passando pelos processos de extração, transformação e carga (ETL/CDC), até à sua disponibilização em painéis analíticos ou consumo por sistemas de inteligência artificial. Garantia de Qualidade: Os dados consumidos devem cumprir limites rigorosos de consistência, integridade, unicidade e tempestividade, medidos de forma contínua através de verificações automatizadas de integridade referencial e volumetria. Segurança e Isolamento Lógico (Chinese Walls): Devido à pluralidade de setores de atuação do grupo corporativo e à autonomia jurídica das entidades, a arquitetura deve impor segregação lógica de dados entre as empresas do ecossistema, prevenindo acessos cruzados não autorizados. 1.2 Escopo A primeira fase do projeto de implantação do Portal NVA contempla quatro empresas nucleares do ecossistema de transporte e logística da Família Gurgacz: Rodoviário: Operações de transporte rodoviário de passageiros de longa distância. Eucatur Cargas: Gestão logística, expedição, distribuição e rastreamento de mercadorias. Urbano: Serviços de transporte coletivo urbano e metropolitano. Gimave: Gestão de frotas, concessionárias de veículos pesados, manutenção e distribuição de ativos correlatos. O Portal NVA abrange a catalogação, linhagem, validação e governança de todas as bases de dados dessas companhias, independentemente da sua tecnologia de origem (sistemas legados de ERP como o totvs, planilhas estruturadas, APIs públicas ou privadas de parceiros logísticos, e bases transacionais SQL Server ou Oracle)3. Fica expressamente estabelecido que o Portal NVA não atua como base de dados operacional de leitura e escrita direta em tempo real para sistemas de transação (OLTP), mas sim como o nó central de metadados, governança e provimento de bases unificadas limpas, estruturadas no repositório de dados corporativo (Data Lakehouse / Data Warehouse Moderno). 1.3 Visão Geral A implementação do Portal NVA é liderada pelo Núcleo de Valor e Automação (NVA) da AN Consultoria, atuando como o impulsionador tático e operacional de inovação digital do grupo corporativo. A equipe multidisciplinar do NVA operacionaliza a governança através de uma governança ágil e metodologias modernas de arquitetura. Membro Responsabilidade Principal no Projeto NVA Diego Ferro Liderança estratégica e institucional do Núcleo; ponte entre o Comitê de Inovação/Valor e Automação, e a operação; remoção de impedimentos; garantia do alinhamento da equipe com os objetivos de negócios do Grupo. Jesiel Carolino Governança técnica; parecerista técnico/negocial com foco na entrega de valor; orientação sobre ferramentas, arquiteturas e técnicas a serem aplicadas; aprovação das entregas sob a ótica da operação e do cliente. Denilson Freitas Gestão ágil do projeto; priorização do backlog de integrações do NVA; medição de retorno sobre investimento (ROI) e horas poupadas (FTE)2. Sergio Fiordelis Líder de SSoT, Arquitetura e Governança de Dados. Estruturação, implantação e evolução da Camada Gold (NVA_unificado), assegurando que os dados corporativos sejam organizados, padronizados, íntegros e confiáveis. Define modelos dimensionais (Star Schema), padrões DAMA-DMBOK, dicionários de metadados, regras de ouro e critérios de qualidade da informação. Carlos Piergentile Desenvolvimento de scripts, APIs, integrações e sistemas; codificação das automações de processos (RPA, Python, etc.); garantia da segurança e escalabilidade das soluções criadas. Do ponto de vista operacional, o Portal NVA serve como a autoridade de homologação final para qualquer ativo analítico do grupo corporativo. Nenhum indicador, painel de controle (dashboard) ou aplicação de IA baseada em grandes modelos de linguagem (LLM) poderá ser classificado como "Oficial" ou "Homologado para Produção" sem que a sua linhagem técnica e as chaves de relacionamento com as Entidades Mestres estejam plenamente mapeadas e com status ativo no Portal NVA. 1.4 Glossário Para efeitos desta documentação corporativa e para garantir uma terminologia uniforme entre as equipes jurídica, técnica, de auditoria e de negócios, adotam-se as seguintes definições conceituais: Single Source of Truth (NVA - Fonte Única da Verdade): Estrutura lógica de governança que centraliza, valida e distribui informações corporativas oficiais, eliminando discrepâncias interpretativas ou duplicidades de dados. Data Steward (Custodiante de Dados): Perfil responsável por gerir a qualidade, a linhagem técnica, a classificação de segurança e o mapeamento de metadados no Portal NVA. Data Owner (Proprietário dos Dados): Gestor da unidade de negócios que detém o controle decisório sobre as regras de tratamento, integridade e autorização de acesso aos dados do seu domínio. Data Custodian (Guardião Técnico): Especialista técnico de TI ou engenharia de dados responsável pela operação física, manutenção, segurança cibernética e integridade estrutural das bases de dados. Change Data Capture (CDC): Mecanismo de integração técnica que monitora e captura alterações incrementais (inserções, atualizações e exclusões) diretamente nos logs das bases transacionais de origem, minimizando a sobrecarga computacional. Dynamic Data Masking (DDM - Mascaramento Dinâmico de Dados): Processo de ofuscação de informações sensíveis (ex: CPF, dados de saúde, salários) em tempo de execução para utilizadores sem permissão explícita, mantendo a integridade estrutural dos campos. Linhagem de Dados (Data Lineage): Representação visual e rastreável do ciclo de vida do dado, detalhando os sistemas operacionais de origem, transformações aplicadas pelos scripts de carga e destinos finais de consumo. Entidade Mestre (Master Data): Dados estruturais e compartilhados fundamentais que identificam os principais ativos de negócio do grupo (ex: Clientes, Veículos, Fornecedores, Colaboradores). Chinese Walls (Segregação Intercompany): Barreiras de isolamento lógico aplicadas ao nível do banco de dados e da rede para impedir que informações restritas ou concorrenciais sejam partilhadas entre empresas jurídicas distintas sem aprovação expressa do Encarregado de Proteção de Dados (DPO). 1.5 Conceitos A governança corporativa de dados no ecossistema baseia-se nos principais frameworks de mercado, adaptados à realidade multissetorial das empresas do grupo. As referências técnicas utilizadas incluem: DAMA-DMBOK: Orientador principal das 11 áreas de conhecimento da gestão de dados, com enfoque na Governança de Dados, Qualidade de Dados, Gestão de Metadados, Dados Mestres e de Referência. TOGAF 10: Framework estrutural para a Arquitetura Corporativa de Dados, servindo como modelo para o mapeamento dos fluxos de negócios às entidades computacionais. COBIT 2019: Modelo de governança corporativa de TI para alinhamento estratégico de valor, assegurando a transparência dos papéis decisórios. ITIL v4: Estruturação dos processos operacionais de gestão de serviços de dados, monitoramento de SLA e mitigação de falhas de pipelines. ISO/IEC 27001 & ISO/IEC 27701: Diretrizes mandatórias para a implementação do Sistema de Gestão de Segurança da Informação (SGSI) e Sistema de Gestão de Privacidade da Informação (SGPI) no Portal NVA. Lei Geral de Proteção de Dados (LGPD - Lei nº 13.709/2018): Marco regulatório nacional que orienta os processos de catalogação, gestão de consentimento, bases legais de tratamento de dados pessoais e tratamento de dados sensíveis. OWASP & CIS Controls: Referências de cibersegurança utilizadas na arquitetura de software para proteção contra vulnerabilidades de injeção, falhas de autenticação e configuração de perímetros seguros de rede. Para o entendimento operacional da arquitetura Data Lakehouse e do pipeline de dados do NVA, adotam-se as seguintes definições conceituais: TAXONOMIA: Prática de classificar, organizar e padronizar as informações de uma empresa em categorias e subcategorias lógicas e hierárquicas CAMADA BRONZE: Camada de aterragem e estoque onde residem as cópias brutas exatas das fontes originais. Subdivide-se em RAW (réplica idêntica sem alteração) e TAXONOMIA (padronização de tipos de dados, conversão para formatos colunares otimizados como Parquet/Delta e inclusão de metadados técnicos, sem aplicação de regras de negócio). CAMADA SILVER: Camada intermediária onde os dados passam por limpeza, deduplicação, padronização de datas/textos e aplicação rigorosa das regras de negócio de cada domínio funcional (ex: CRM, Operação, Vendas, Financeiro). CAMADA GOLD (Refined / NVA_Unificado): Camada final de refino analítico, composta por tabelas consolidadas e modeladas em esquemas dimensionais (Fatos e Dimensões). Representa a Fonte Única da Verdade, pronta para consumo por painéis de BI, barramentos de APIs, modelos de IA e automações. DEAD LETTER QUEUE (DLQ / Fila de Erros): Repositório de contenção para onde são desviados registros brutos corrompidos, com erros de sintaxe ou fora do padrão de taxonomia durante a ingestão, evitando o travamento da esteira principal. ORQUESTRADOR DE PIPELINE: Plataforma responsável pelo agendamento, gerenciamento de dependências, execução sequencial e monitoramento de alertas de todos os scripts de carga e transformação do ecossistema. MODEL CONTEXT PROTOCOL (MCP): Padrão de integração seguro que habilita agentes de Inteligência Artificial a consultarem contextos, regras de negócio e metadados homologados do Portal NVA com controle de segurança. LINHAGEM DE DADOS (DATA LINEAGE): Mapeamento gráfico e auditável do caminho percorrido pelo dado, desde a sua criação no sistema transacional de origem até a sua exibição no relatório analítico final. 2. Arquitetura Corporativa 2.1 Arquitetura Lógica A arquitetura lógica do Portal NVA, estruturada sob a perspetiva conceitual do livro Decifrando Arquiteturas de Dados de James Serra, harmoniza as abordagens centralizadas e descentralizadas para garantir eficiência e governança. O Portal atua como o motor lógico de controle de relacionamentos e orquestração de metadados, enquanto o repositório físico realiza o armazenamento escalável de dados brutos e curados. Os sistemas transacionais originais não sofrem acessos ou consultas diretas oriundas de ferramentas de visualização ou analíticas. Em vez disso, scripts especializados efetuam cópias e extrações assíncronas para o repositório corporativo. A arquitetura lógica divide-se nas seguintes fases: Ingestão: Scripts Python parametrizados extraem dados estruturados e semiestruturados e depositam-nos na camada inicial de réplica, respeitando o isolamento operacional dos sistemas transacionais. Staging Area (repo*): Repositório que abriga cópias fiéis das tabelas de origem, organizadas por domínio de negócio de cada uma das empresas controladas (ex: repo_totvs, repo_comercial, repo_manutencao). Nesta camada, o dado reside em formato bruto para fins de histórico e auditoria de origem. Camada de Confiança (Trusted / Silver): Área em que os dados replicados das tabelas de staging passam por processos de limpeza de caracteres especiais, padronização de tipagens (ex: conversão de strings de datas em formatos ISO 8601), resolução de nulos e aplicação de regras primárias de deduplicação. Camada de Refino (Refined / Gold / NVA_unificado): Contém as bases unificadas finais estruturadas em modelos relacionais normalizados ou esquemas estrela (Star Schema / Snowflake), prontas para serem expostas para consumo estratégico por painéis analíticos, barramentos de APIs e serviços de Machine Learning. 2.2 Arquitetura Física A topologia computacional que viabiliza o ecossistema NVA foi projetada para garantir robustez, isolamento geográfico e alto desempenho de processamento paralelo, utilizando servidores de banco de dados e instâncias de execução distribuídas. A infraestrutura física é sustentada pelos seguintes pilares de hardware e conectividade: Camada de Processamento de Ingestão: Servidores dedicados para execução de rotinas automatizadas em Python e orquestradores de fluxos de dados, localizados em redes privadas internas (sub-redes isoladas de tráfego de internet pública). Conectividade Segura: Toda comunicação física estabelecida entre as bases de dados transacionais on-premise das empresas (Eucatur, Gimave, Urbano, Rodoviário) e a instância de banco de dados repositório é estabelecida através de túneis criptografados de VPN IPsec dedicados ou conexões de rede interna com suporte a TLS 1.3 ou superior. Camada de Armazenamento do Repositório: Implementada em servidores de banco de dados com alto poder de concorrência e leitura massivamente paralela. O armazenamento físico é distribuído em matrizes de discos de estado sólido (SSD NVMe) sob configurações de alta resiliência a falhas (RAID 10) e segmentação lógica rigorosa ao nível de esquemas e bases de dados do banco corporativo. Hospedagem do Portal NVA: O Portal NVA (interface administrativa, catálogo de metadados, barramento de controle de regras de governança e monitoramento de linhagem) é executado em containers Docker orquestrados, operando com uma base de dados interna exclusiva denominada NVA. A base interna armazena somente os metadados de governança (estruturas de tabelas cadastradas, históricos de cargas, regras de validação, mapeamentos de chaves corporativas e acessos de utilizadores), nunca armazenando os dados operacionais ou de consumo final. 2.3 Arquitetura Funcional Funcionalmente, o ecossistema orquestrado pela AN Consultoria assegura que os dados de transição operacional fluam de forma ordenada. A arquitetura funcional estabelece a correlação entre as operações físicas nas tabelas e as interações realizadas pelos utilizadores no Portal NVA. O fluxo funcional compreende os seguintes processos principais: Módulo de Mapeamento: O editor de governança utiliza as interfaces do portal para registrar tabelas de origem, definir tipos de campos, assinalar chaves de relacionamento operacionais e mapear a privacidade. Módulo de Automação de Carga: O portal monitora e orquestra a execução dos scripts de ingestão que atualizam as tabelas repo_*. Os scripts registram automaticamente os seus resultados computacionais (linhas lidas, linhas gravadas, tempo de execução e mensagens de erro) na base interna NVA_controle_cargas. Módulo de Unificação de Cadastros: Permite à equipe de governança associar campos transacionais isolados (ex: CPF do passageiro cadastrado no ERP totvs pela Eucatur Rodoviário) a registros centralizados pertencentes à Entidade Mestre "Cliente" no ecossistema NVA. Módulo de Auditoria e Validação: Gera relatórios em tempo real sobre a saúde do ambiente de dados corporativo, listando falhas em scripts Python, tabelas sem responsável associado, relacionamentos pendentes de homologação e violações de regras de privacidade da LGPD. 2.4 Arquitetura de Dados A estruturação e modelagem das bases de dados no repositório utilizam abordagens híbridas fundamentadas nas melhores práticas de James Serra, dividindo a organização informacional em três categorias operacionais de dados: https://app.diagrams.net/#G1Mb4siXjoAH5pac7eEWArqoKRr_ZM9Tgo#%7B%22pageId%22%3A%22Xv140Kf0g4ro2n5BsyA4%22%7D Dados de Referência e Dados Mestres (Master Data Management - MDM): Representam as entidades fundamentais do ecossistema das empresas da AN Consultoria. Registram entidades nucleares como Veículos, Clientes, Fornecedores e Colaboradores, garantindo que o mesmo ativo físico (ex: um autocarro com prefixo e placa cadastrado no sistema totvs de frota de passageiros) possua uma chave idêntica e relacionada no sistema de manutenção operado pela Gimave ou no sistema de despacho de cargas da Eucatur. A modelagem de dados mestres adota tabelas de relacionamento cruzado (cross-reference tables) que preservam os identificadores nativos de cada sistema legado, conectando-os a uma chave única corporativa. Dados Transacionais: Correspondem ao registro de transações operacionais de alta frequência geradas nos sistemas originais (ex: venda de uma passagem rodoviária, expedição de uma guia de transporte de carga, ordens de serviço de manutenção ou registros de faturamento diário)4. São estruturados em tabelas com forte normalização nas camadas de staging para evitar redundâncias, e desnormalizados nas camadas Trusted/Silver para facilitar a junção estrutural com dados mestres por meio de chaves estrangeiras. Dados Analíticos: Projetados especificamente para leitura massiva e aceleração de consultas gerenciais. Esta camada adota esquemas em estrela (Fatos e Dimensões) estruturados e otimizados para consumo analítico. As tabelas de fato centralizam as métricas quantitativas de negócio (ex: valores de receita, distâncias percorridas, consumo de combustível, pesos de cargas), enquanto as dimensões oferecem os atributos descritivos limpos para filtros rápidos de análise. 2.5 Arquitetura de Integração A integração de sistemas de diferentes origens e com restrições técnicas variáveis exige a coexistência de múltiplos padrões e tecnologias de transferência de informação, classificados por latência e volume computacional. Método de Integração Latência Operacional Tecnologia Adotada Caso de Uso Principal no Ecossistema Gurgacz Change Data Capture (CDC) Quase tempo real Triggers de banco / Logs SQL Sincronização de dados críticos de frota e status operacional de veículos em trânsito. Integração por APIs RESTful Sob demanda Protocolo HTTPS, OAuth2 Comunicação com sistemas sem acesso ao banco de dados, como ERPs web, parceiros de cargas e portais de monitoramento. Webhooks baseados em Eventos Em tempo real Chamadas HTTP POST cripto Notificações rápidas de alterações de status de faturamento ou geração de ordens de serviço críticas na manutenção. Mensageria com Filas / Tópicos Tempo real / Assíncrona Apache Kafka / RabbitMQ Orquestração de barramentos de mensageria para automação de fluxos de processos que envolvem múltiplos microsserviços. Transferência de Arquivos Agendada (D-1 / Horária) SFTP Seguro com SSH Importação automatizada de arquivos estruturados, remessas financeiras, tabelas de terceiros e relatórios operacionais consolidados. A integração de sistemas complexos (ex: o sistema de logística SSW, que de forma nativa não concede acesso direto às suas bases de dados relacionais corporativas) baseia-se na implementação de barramentos de integração que extraem de forma periódica arquivos estruturados ou utilizam APIs específicas para alimentar a Staging Area do repositório. 2.6 Arquitetura de Segurança A proteção do ecossistema centralizado baseia-se no princípio de Zero Trust (Confiança Zero), assumindo como premissa de segurança que nenhuma chamada de dados, requisição de rede ou identidade de utilizador deve ser considerada confiável sem a devida autenticação, validação de perímetro e verificação contínua de privilégios. A segurança da infraestrutura de dados abrange as seguintes camadas operacionais: Criptografia de Dados: Toda comunicação estabelecida em trânsito utiliza protocolos criptográficos avançados (TLS 1.3 ou VPN segura via IPSec). Para os dados armazenados em repouso nas instâncias físicas do repositório, aplica-se criptografia no nível de arquivo de dados (TDE - Transparent Data Encryption) por meio de chaves corporativas utilizando algoritmos padrão de mercado, como AES-256. Segregação Lógica e Física: Para assegurar a credibilidade jurídica de que as bases de dados de empresas de transporte de passageiros (como a Eucatur e Urbano) não realizarão cruzamentos inadequados com operações financeiras ou concorrenciais restritas de outras entidades do grupo, implementam-se Chinese Walls lógicas. Isto significa que as credenciais computacionais de leitura de cada domínio de negócio são segregadas de forma nativa ao nível de base de dados e esquemas físicos do servidor. Mascaramento Dinâmico de Dados (DDM): Dados de identificação pessoal de passageiros, clientes ou colaboradores do grupo (como nomes completos, números de identidade ou CPFs) que residem nas bases unificadas de consumo analítico são dinamicamente ofuscados em tempo de execução para utilizadores sem permissão analítica avançada. Os ambientes computacionais de homologação e desenvolvimento (Sandbox) utilizam bases de dados integralmente anonimizadas, onde processos automáticos de extração substituem dados reais por valores sintéticos irreversíveis, impedindo que programadores e analistas manipulem informações sensíveis reais de produção. 2.7 Arquitetura em Camadas A jornada de transformação do dado até à sua maturidade analítica e operacional é organizada em um fluxo linear de cinco camadas computacionais discretas. 1. Camada de Origem: Sistemas externos e legados operados diretamente pelas empresas do grupo, como o totvs, sistemas de passagens, planilhas gerenciais de frotas e APIs externas. 2. Camada Raw / Bronze (repo_*): Repositório de aterragem de dados onde residem as cópias brutas exatas obtidas das fontes transacionais originais. Não se aplicam transformações de estrutura ou tipagem nesta fase; as tabelas mantêm as nomenclaturas originais dos bancos transacionais. É mantido um histórico imutável das transações para permitir auditorias de integridade. 3. Camada Trusted / Silver (trusted_*): Camada intermediária onde os dados das tabelas de staging passam por processos automáticos de limpeza estrutural. São removidos espaços em branco inválidos, padronizam-se formatos numéricos e geográficos e aplicam-se chaves substitutas (surrogate keys) de integridade referencial. 4. Camada Refined / Gold (NVA_unificado): Contém as tabelas consolidadas estruturadas especificamente para tomada de decisão gerencial. As bases unificadas desta camada são imutáveis após gravação, sendo atualizadas de forma incremental via scripts Python ou cargas CDC controladas. 5. Camada de Consumo: Representa a interface final de entrega de valor para a organização, composta pelas ferramentas de BI (Power BI), integrações em barramentos de microsserviços, agentes inteligentes e robôs de automação de processos (RPA) operados pelo Núcleo de Valor e Automação (NVA)2. 3. Governança de Dados 3.1 Papéis A sustentação e o sucesso do Portal NVA como a única fonte oficial e fidedigna de informações gerenciais do ecossistema das empresas do grupo baseiam-se na atribuição clara e unívoca de papéis de governança. Não é admissível que qualquer base de dados, tabela ou campo de informação resida no ecossistema analítico sem um responsável cadastrado e ativo. Os papéis formais de governança adotados são estruturados com base nas melhores práticas do DAMA-DMBOK e do COBIT 2019, estendendo-se por toda a estrutura administrativa do grupo corporativo. Política Global de Governança e Privacidade de Dados -An Consultoria - Supervisão - NVA 3.2 Responsabilidades Data Owner (Proprietário dos Dados): Este papel pertence obrigatoriamente a um gestor ou diretor de área de negócios, detentor natural do processo operacional gerador das informações. Sob nenhuma circunstância a Tecnologia da Informação (TI) ou a equipe de Engenharia de Dados será apontada como a proprietária dos dados. O Proprietário aprova acessos ao seu domínio, dita regras de negócio de transformação é válida a fidedignidade analítica dos indicadores calculados. Data Steward (Custodiante Administrativo / Operacional): Atua de forma ativa no Portal NVA, mapeando metadados, preenchendo dicionários de dados, definindo chaves operacionais e monitorando indicadores de qualidade e privacidade (LGPD)4. O Custodiante serve como ponte técnica e funcional entre o Proprietário dos Dados de Negócio e o Guardião Técnico. Data Custodian (Guardião Técnico): Representado por profissionais seniores de infraestrutura de TI e administração de banco de dados (DBAs)5. Cabe ao Guardião Técnico prover os ambientes físicos e lógicos adequados, monitorar o desempenho computacional das consultas, aplicar atualizações de segurança nos servidores, garantir a criptografia física dos dados em repouso e manter rotinas ativas de salvaguarda e plano de continuidade. Data Consumer (Consumidor de Dados): Qualquer utilizador, área de negócio, painel analítico, sistema externo de integração ou agente inteligente automatizado que realiza a leitura de bases de dados unificadas homologadas no repositório final do Portal NVA. Process Owner (Dono do Processo de Negócio): Gestor responsável pela integridade física e operacional das etapas administrativas ou industriais que alimentam os sistemas operacionais transacionais na origem. Ele responde pela correta inserção primária dos dados nos sistemas operacionais (ex: garantia de que o faturamento de cargas não insira campos nulos ou inconsistentes nos terminais de expedição do SSW). 3.3 RACI A Matriz RACI estabelece a responsabilização para cada atividade operacional e de governança relacionada ao ciclo de vida e manutenção do Portal NVA corporativo. Atividade de Governança Data Owner (DO) Data Steward (DS) Data Custodian (DC) Data Consumer (DM) Process Owner (PO) Cadastrar Nova Fonte de Dados A R C I R Validar Qualidade e Integridade A R C I C Aprovar Status como "Oficial NVA" A C I I I Definir Classificação de Segurança A R C I C Configurar Infraestrutura e Criptografia I C R I I Criar Nova Base Unificada (Gold) A R R I C Executar Processos de Backup/Restore I I R I I Consumir Dados Homologados I I C R I Legenda: R (Responsible/Executor), A (Accountable/Aprovador Final), C (Consulted/Consultado), I (Informed/Informado). 4. Metodologia NVA 4.1 Cadastro A integração técnica e funcional de qualquer nova fonte de dados de qualquer empresa do ecossistema ao repositório analítico controlado exige a estrita observância do Playbook de Integração de Nova Fonte de Dados, sendo expressamente vedada a criação direta de pipelines sem o preenchimento prévio das informações cadastrais no Portal NVA. O processo inicia-se através da submissão eletrônica do Formulário de Cadastro de Fonte de Dados pelo portal, devendo o proponente fornecer detalhadamente as características operacionais, técnicas, jurídicas e de segurança do ativo de informação proposto. O formulário estruturado de cadastro é composto pelos seguintes campos obrigatórios, parametrizados eletronicamente na interface do Portal NVA. Seção do Formulário Campo Técnico / Parâmetro Descrição / Opções de Preenchimento Exemplo Prático de Preenchimento Identificação CNPJ / Razão Social Dados jurídicos da empresa detentora da fonte de dados. 00.000.000/0001-00 - Rodoviário Eucatur. Identificação Área Responsável Unidade organizacional geradora do processo. Manutenção de Frotas e CPK. Identificação Dono do Processo Gestor operacional encarregado na origem. Gestor de Operações de Oficina. Identificação Data Owner Diretor de negócio aprovador da base analítica. Diretor Operacional Corporativo. Identificação Data Steward Custodiante analítico encarregado do catálogo. Engenheiro de Governança do NVA. Identificação Responsável Técnico Especialista de TI mantenedor do sistema operacional. DBA responsável pelas instâncias de banco de dados. Origem da Fonte Nome da Fonte Identificador de negócio da tabela de dados. Cópia totvs - Ordens de Serviço Oficina. Origem da Fonte Sistema de Origem Software gerador da informação operacional. totvs ERP Corporativo. Origem da Fonte Tecnologia / Banco Banco de dados ou formato físico original. Microsoft SQL Server (Instância Prod_Oficina). Origem da Fonte Ambiente de Destino Schema físico de destino no repositório analítico. repo_manutencao (Staging Area). Características Frequência de Carga Intervalo de atualização da cópia analítica. Diário (D-1 às 02:00h). Características SLA de Disponibilidade Tempo de resposta aceitável para suporte a falhas. 99.5% de sucesso mensal; mitigação em até 4 horas. Segurança / LGPD Classificação de Dado Nível de sensibilidade e controle de acesso. Restrita/Sensível (Se contiver dados pessoais). Segurança / LGPD Dado Pessoal / Sensível Contém identificadores sob controle da LGPD? Sim (Registra CPFs e dados de saúde de colaboradores). Segurança / LGPD Base Legal (LGPD) Justificativa legal que ampara o tratamento. Execução de Contrato (Art. 7º, V, LGPD). Segurança / LGPD Mascaramento Requerido Necessidade de ofuscação de colunas sensíveis. Sim (Mascaramento dinâmico no CPF e RG do mecânico). Integrações Consumidores Finais Dashboards, APIs ou IA consumidores da base. Dashboard CPK de Frotas; Agente de IA do WhatsApp. 4.2 Validação Uma vez submetido o formulário, a fonte de dados adquire automaticamente o status "Em Análise"11. Durante esta etapa, o Data Steward em conjunto com a equipe de engenharia do NVA realiza validações estruturais rigorosas: Teste de Integridade Referencial: Validação de chaves estrangeiras que ligam a nova fonte às dimensões globais de dados mestres da empresa. Teste de Volumetria e Consistência: Análise do comportamento histórico da base, identificando o volume médio de inserções diárias, desvios padrão em campos monetários e verificação de valores inválidos (como datas nulas ou CPFs compostos por sequências numéricas repetidas). Parecer de Privacidade: O Encarregado de Proteção de Dados (DPO) corporativo realiza auditoria jurídica sobre o enquadramento da base legal da LGPD e a conformidade das técnicas de mascaramento aplicadas nas colunas contendo dados sensíveis ou pessoais. Se a fonte apresentar qualquer inconsistência cadastral ou estrutural, o processo é colocado no status "Pendente Validação"11, sendo criada de forma automática uma Tarefa de Governança no quadro Kanban do portal para rastreamento da correção da inconformidade pelo solicitante. 4.3 Aprovação A transição de uma fonte de dados para o status "Validada" ocorre de forma automatizada no portal após o cumprimento do checklist de validação estrutural. Contudo, a homologação final para o status "Oficial NVA"11 exige a aprovação do Data Owner da área de negócios correspondente e a assinatura digital do responsável técnico nomeado pela governança. Ao atingir o status "Oficial NVA"11, as seguintes ações computacionais são realizadas automaticamente no ecossistema: Os indicadores globais de governança visíveis no Dashboard Executivo do Portal NVA realizam incremento dinâmico de valor no volume de fontes oficiais mapeadas e integradas. A árvore visual da Linhagem de Dados e o Mapa de Relacionamentos do portal desbloqueiam a exibição pública do fluxo de dados para consulta e navegação pelas demais áreas de negócios homologadas. Desbloqueio de credenciais técnicas para liberação de leitura em ambiente de produção para ferramentas analíticas ou canais automatizados autorizados de visualização de negócios. 4.4 Publicação A publicação consiste na efetiva disponibilização das tabelas analíticas integradas pertencentes à Camada Refined/Gold (NVA_unificado) para livre consumo corporativo pelas áreas requisitantes. Toda tabela publicada é catalogada no Catálogo de Dados corporativo, que expõe uma descrição detalhada em linguagem de negócios sobre o significado prático de cada entidade de informação. A publicação também gera de forma automática as definições estruturais para o barramento de APIs internas do grupo, garantindo que integrações de microsserviços consigam ler os dados publicados sem que ocorram desvios estruturais ou erros de interpretação semântica. 4.5 Versionamento Qualquer alteração na modelagem física ou lógica de dados mestres, tabelas de controle, bases unificadas analíticas, scripts Python de ingestão de dados ou canais de API exige a rastreabilidade absoluta proporcionada por mecanismos de versionamento formal. O versionamento é gerenciado através do controle sistemático de esquemas e alteração de estruturas computacionais: Versões de Esquema (Schema Migration): As bases de dados utilizam ferramentas de versionamento incremental e versionamento semântico (Semantic Versioning - ex: v1.1.0, v2.0.0). Alterações que não quebrem compatibilidade descendente (adição de campos opcionais ou novas dimensões informacionais) incrementam revisões secundárias; alterações estruturais que impliquem remoção de colunas vigentes ou tipagens incompatíveis exigem alteração de versão maior, mantendo a estrutura antiga ativa em paralelo durante um período pré-definido de transição e aviso de descontinuação (deprecation). Versionamento de Scripts e Código: Todos os scripts de carga em Python e pipelines de fluxo operacional de dados são armazenados de forma centralizada em repositórios de código Git controlados, exigindo fluxo rigoroso de revisão de código (Pull Requests) para aprovação prévia de qualquer alteração de estrutura informacional no repositório corporativo. 4.6 Descontinuação Quando uma determinada fonte de dados, tabela ou indicador analítico perde a sua utilidade operacional para o grupo das empresas corporativas, inicia-se o Processo Formal de Descontinuação (Deprecation Lifecycle)1: Identificação de Impacto: O Portal NVA realiza de forma automática a varredura da Linhagem de Dados para mapear quais painéis analíticos de BI, integrações ativas de APIs ou agentes de automação dependem diretamente daquela estrutura computacional. Notificação de Fim de Vida Útil (EOL): É enviada notificação digital automática para todos os Data Consumers e Data Owners que utilizam os ativos mapeados, estipulando um prazo transacional para migração de base analítica. Status "Desativado": Ao término do prazo de transição estabelecido pela governança, a fonte adquire o status final "Desativado" no portal, sendo as suas rotinas de carga de dados e scripts Python desabilitados, e as permissões de leitura do seu esquema no banco corporativo removidas em produção. 5. Gestão de Dados 5.1 Modelagem A modelagem de dados no Portal NVA segue padrões rigorosos para atender às especificidades das empresas controladas e coligadas da Família Gurgacz. Adota-se a modelagem multidimensional estruturada no conceito de esquemas estrela (Star Schema) para as bases analíticas unificadas (Gold Layer)4, enquanto a modelagem normalizada de terceira forma normal (3NF) é priorizada na camada de staging (repo_*) para mitigar redundâncias informacionais no repositório físico de dados. As chaves substitutas (Surrogate Keys) são implementadas na Trusted Layer para desvincular a dependência direta dos identificadores nativos voláteis dos ERPs originais. Toda tabela fato deve conter, no mínimo: Uma chave alternativa de negócios (Business Key), que preserva a rastreabilidade com o registro operacional físico do sistema de origem. Chaves estrangeiras que apontam diretamente para as dimensões corporativas de suporte dimensional. Métricas quantitativas limpas e prontas para agregações gerenciais de negócios. 5.2 Qualidade De acordo com as diretrizes do DAMA-DMBOK, a qualidade de dados não é uma atividade isolada, mas sim um processo de monitoramento contínuo sobre o ciclo de vida informacional. O Portal NVA operacionalizar este conceito por meio de regras de negócios automatizadas aplicadas às seguintes dimensões essenciais da qualidade: Dimensão de Qualidade Métrica e Regra Computacional Aplicada Limite Mínimo de Aceitação Ação em Caso de Inconformidade Completude (Completeness) Mede a ausência de registros nulos ou incompletos em campos cruciais (ex: CPF, Chave de NF)14. 100% para Chaves Primárias/Estrangeiras; 99% para colunas corporativas vitais. Suspensão da ingestão incremental da carga; abertura automática de tarefa de governança para correção. Exatidão / Acurácia Validação contra tabelas mestre, bases de referência nacionais e limites de distribuição de valores. 98% de exatidão em relação às fontes oficiais governamentais. Sinalização com rótulo "Baixo Nível de Confiança" no portal de dados. Consistência (Consistency) Ausência de divergências estruturais entre tabelas de sistemas integrados distintos. 99% de coerência e reconciliação referencial ativa. Geração automática de log de desvio; notificação prioritária aos donos de processo de origem. Timeliness (Tempestividade) Intervalo temporal de atualização dos registros operacionais analíticos em relação às transações reais. Atualização incremental com intervalo máximo de 24 horas (D-1). Alerta visual de expiração de dados no painel inicial do Portal NVA. Unicidade / Deduplicação Ausência de registros redundantes repetidos de uma mesma entidade real (ex: veículo idêntico com cadastros duplicados). 100% de unicidade em chaves primárias e dimensões de dados mestre do MDM. Execução automática de rotinas de higienização; eliminação física de repetições sistémicas. Validade (Validity) Conformidade dos valores computacionais em relação a formatos e domínios padronizados estruturais. 99% de conformidade com padrões de formatos (ex: padrão de placas Mercosul). Bloqueio temporário de registros incorretos; rejeição do lote com erro. 5.3 Catálogo O Catálogo de Dados do Portal NVA constitui a central unificada de busca e consulta de ativos de dados das empresas do ecossistema. Ele fornece uma interface de busca amigável em linguagem natural para utilizadores de negócios e analistas, permitindo localizar rapidamente definições semânticas de campos de tabelas corporativas cadastrados e ativos no repositório. O Catálogo expõe: Metadados Funcionais: Definições textuais em termos claros e orientados a negócios de cada campo estruturado. Associação de Responsabilidade: Nomeação explícita do Data Owner do negócio, do Data Steward encarregado e do Custodiante Técnico de suporte de infraestrutura correspondente. Classificação de Sensibilidade: Tags que identificam instantaneamente o perfil de confidencialidade da base analisada (ex: se contém dados sujeitos ao controle legal da LGPD)5. Status da Informação: Rótulos visuais atualizados em tempo real que atestam se a tabela é considerada "Oficial NVA", "Em Homologação" ou "Em Análise" pela equipe. 5.4 Metadados A governança do ecossistema assenta na gestão ativa de três tipos estruturais de metadados, conforme as definições de James Serra e do framework DAMA-DMBOK: Metadados de Negócio: Termos definidos sob o glossário conceitual de negócios das empresas, regras gerenciais de transformação lógica de indicadores corporativos, objetivos estratégicos das bases de dados unificadas analíticas e enquadramento regulatório com a privacidade da LGPD. Metadados Técnicos: Informações estruturais computacionais das instâncias dos servidores físicos de banco de dados, mapeamento detalhado dos tipos computacionais de dados de colunas, definições físicas das chaves de integridade referencial estabelecidas nas tabelas de staging e trusted, esquemas de bancos de dados ativos e parametrizações técnicas de conexões. Metadados Operacionais: Registros das execuções de pipelines de integração e ingestão executados pelos scripts Python de automação, logs consolidados de controle computacional de cargas de dados (linhas lidas, gravadas, tempo de duração, taxas de erros), datas e horas de última atualização das tabelas físicas em produção e estatísticas agregadas de volumetria. 5.5 Data Lineage A rastreabilidade absoluta constitui um requisito obrigatório para a auditoria de fidedignidade analítica de qualquer painel gerencial ou decisão baseada em sistemas inteligentes. O módulo de Linhagem de Dados (Data Lineage) do Portal NVA reconstrói de forma visual e gráfica o caminho tridimensional do dado desde a sua inserção operacional primária nos sistemas de origem até ao consumo final analítico. A linhagem permite realizar análise de impacto (Impact Analysis) em tempo real: caso ocorra uma alteração estrutural em uma tabela ou script Python de ingestão, o Portal sinaliza imediatamente no seu Mapa de Relacionamentos quais relatórios de Power BI, automações ou canais consumidores finais sofrerão interrupção física ou falha lógica de funcionamento. 5.6 Master Data O Gerenciamento de Dados Mestres (Master Data Management - MDM) do grupo corporativo visa estabelecer uma identidade computacional exclusiva para as entidades fundamentais compartilhadas entre as empresas controladas e coligadas (Rodoviário, Eucatur Cargas, Urbano, Gimave)1. A dispersão sistémica histórica gerou silos onde um único cliente ou ativo operacional físico de frota era representado sob cadastros fragmentados e inconsistentes entre as companhias jurídicas distintas. A estratégia de MDM centralizada unifica e limpa os cadastros mestres das seguintes entidades corporativas vitais: Vendas: O domínio corporativo de Vendas tem como objetivo consolidar, padronizar e relacionar os registros comerciais produzidos pelas diferentes empresas do ecossistema, assegurando uma visão única, confiável e auditável das operações realizadas nos segmentos Rodoviário, Cargas, Urbano e Gimave. Cliente: Unificação dos cadastros de passageiros corporativos, contratantes logísticos e compradores de ativos de frotas. Permite que o mesmo cidadão ou CNPJ que realiza compras de passagens terrestres tenha o seu cadastro financeiro e de perfil analítico relacionado com expedientes logísticos de cargas, unificando a identificação através da validação automática de dados mestres cruzando chaves de CPF/CNPJ de negócios. Colaborador: Centralização lógica de cadastros operacionais de motoristas, mecânicos de oficinas de manutenção, gestores operacionais de terminais rodoviários e equipes internas de apoio de escritórios de negócios das companhias, garantindo consistência referencial de credenciais de utilizadores. As chaves estruturais de relacionamento operacionais ligam e consolidam a informação: prefixo / PREFIXOVEIC: Chave operacional e primária de negócio para o controle e rastreamento analítico e operacional de Veículos. placa / PLACAATUALVEIC: Identificador regulatório alternativo para rastreamento de Veículos4. cliente_id / passageiro_cliente_id: Chaves lógicas de identificação de Clientes em sistemas de vendas de passagens terrestres e suporte ao pós-venda. cpf / cnpj: Dados pessoais de alta criticidade e sensibilidade sob amparo regulatório da LGPD, utilizados para unificação de dados mestres de Clientes e Colaboradores em esquemas lógicos protegidos. cod_os / NUMEROS: Identificador operacional de Ordem de Serviço de manutenção de frotas e veículos. viagem_id: Chave de relacionamento operacional utilizada para cruzar e conciliar transações comerciais de vendas com expedientes de movimentação de veículos e passageiros em terminais. 6. Segurança da Informação e Diretrizes Operacionais 6.1 Estrutura de Governança A segurança cibernética e a privacidade dos dados integrados no ecossistema de dados das empresas controladas e coligadas da Família Gurgacz baseiam-se em uma estrutura colegiada dedicada, sob a liderança do Comitê de Governança de Dados e Segurança da Informação. Este comitê constitui a instância corporativa máxima para deliberações de privilégios de acessos, aprovação de novas diretrizes normativas de segurança, gestão de conformidade jurídica regulatória e alocação de investimentos. A estrutura colegiada de governança estabelece as seguintes atribuições e fóruns periódicos de controle: Comitê Executivo de Dados: Fórum mensal composto pelos representantes das diretorias de negócios das companhias, lideranças táticas da AN Consultoria e o Encarregado de Proteção de Dados (DPO) corporativo. Cabe ao comitê analisar relatórios analíticos consolidados de conformidade à LGPD, auditar vulnerabilidades críticas de sistemas transacionais e validar propostas de descontinuação de ativos informacionais obsoletos. Data Steward Squad (NVA): equipe técnica de governança liderada pela AN Consultoria, operando de forma semanal no monitoramento ativo das bases analíticas, validação do catálogo de metadados corporativo, suporte técnico a donos de processos operacionais e mediação de conflitos sobre o significado de indicadores de performance. Security & Compliance Team (TI): Profissionais dedicados à administração física de perímetros computacionais seguros de rede, monitoração automatizada de logs de auditoria sistêmica de tentativas de intrusão, execução periódica de varreduras de vulnerabilidades de segurança e realização de planos de testes de recuperação e cópias de segurança física de dados. 6.2 Classificação das Informações A informação corporativa deve ser classificada de forma rigorosa quanto ao seu nível de sensibilidade e impacto potencial aos negócios, no intuito de modular as camadas de proteção de acesso e monitoramento. Nível de Classificação Definição e Descrição do Impacto Potencial Diretriz Geral de Segurança e Controle de Acesso Exemplos Práticos de Documentos e Bases do Grupo Pública Informações que podem ser livremente expostas ao público externo, sem riscos de perdas financeiras ou concorrenciais. Livre acesso; publicação irrestrita no site corporativo das empresas. Horários oficiais de passagens de autocarros; endereços físicos de garagens. Interna Dados restritos para o uso operacional de colaboradores e prestadores de serviços de apoio das empresas. Acesso concedido a utilizadores autenticados com e-mail corporativo institucional ativo. Manuais de procedimentos operacionais (POPs); circulares de avisos corporativos. Confidencial Informações estratégicas de alta relevância concorrencial ou dados pessoais protegidos por lei. Acesso estritamente baseado em perfis funcionais (RBAC); criptografia e mascaramento de dados (DDM)5. Desempenho financeiro consolidado; salários de cargos; relatórios de CPK de frotas. Restrita / Sensível Dados de alta criticidade sob rigoroso controle legal e regulatório, como informações de saúde de passageiros ou biometria. Acesso condicionado à aprovação explícita do DPO e do Data Owner; trilha de auditoria completa. Prontuários médicos; registros de diagnósticos; biometria facial de colaboradores. 6.2.1 Priorização demandasA incorporação de novas fontes de dados, o desenvolvimento de integrações sistêmicas e a disponibilização de novos painéis analíticos no Portal NVA operam sob um modelo estruturado de gestão ágil. Para assegurar que a capacidade produtiva do Núcleo de Valor e Automação (NVA) seja canalizada para iniciativas de alto impacto, todas as solicitações devem ser rigorosamente submetidas a uma esteira de priorização. A. Critérios Quantitativos e Qualitativos de Avaliação A avaliação técnica e negocial das demandas submetidas utiliza os seguintes indicadores corporativos para tomada de decisão: Retorno Financeiro sobre Investimento (ROI): Avaliação do valor financeiro direto que será economizado ou gerado pelas automações de fluxo informacional. Horas Poupadas de Trabalho (FTE - Full-Time Equivalent): Mensuração do volume gerencial mensal de esforço operacional e humano que será poupado através das integrações sistêmicas e rotinas robotizadas. Abordagem Incremental (MVP - Minimum Viable Product): Em conformidade com as diretrizes do NVA, prioriza-se a integração de demandas com menor complexidade técnica aliadas à alta entrega de valor. Um exemplo prático prioritário seria a unificação para o cálculo do Custo por KM rodado (CPK), cruzando dados operacionais do IMPETUS, ERP totvs e SSW. Risco e Conformidade (LGPD): Iniciativas que auxiliem no saneamento de dados sensíveis e na conformidade rigorosa exigida pela Lei Geral de Proteção de Dados possuem prioridade mitigatória legal. B. Matriz de Priorização de 6 Blocos (Score NVA) Todas as solicitações aprovadas no Gateway 2 são avaliadas mediante o modelo matemático ponderado de 6 Blocos Estratégicos (Score NVA), garantindo decisão quantitativa e transparente: • Impacto Operacional & FTE (20%) e Retorno Financeiro - ROI (20%): Medem a eliminação de trabalho manual e o ganho financeiro direto. • Alinhamento Estratégico (15%) e Governança, Risco & LGPD (15%): Medem o suporte a metas corporativas e a mitigação de riscos jurídicos/regulatórios. • Qualidade/MDM (15%) e Viabilidade Técnica/Esforço (15%): Medem a maturidade dos dados na Gold e a facilidade técnica (vinculada às Gavetas de Sprints do Discovery Técnico). C. Responsabilidades e Governança A governança sobre a esteira de demandas segue atribuições bem delineadas: Gestão Ágil do Backlog: A priorização do backlog de integrações operacionais do Portal NVA é responsabilidade direta da camada de gestão ágil do projeto (atualmente a cargo do especialista Denilson Freitas). Alinhamento Executivo: Nenhuma base analítica proposta para o ecossistema avançar sem antes obter alinhamento estratégico e aprovação formal do Comitê de Valor e Automação Corporativo. Time-to-Market: O principal objetivo deste fluxo de priorização é otimizar e reduzir a latência média (Time-to-Market) entre o momento da aprovação conceitual da demanda e a sua efetiva publicação operacional em produção. Por que essa abordagem funciona para o seu documento? Conecta com os KPIs atuais: Amarra a entrada de novas tabelas diretamente com métricas de negócio descritas no fim do seu texto, como FTE, Time-to-Market e ROI corporativo. Reforça Papéis: Direciona a responsabilidade de gerir esse fluxo à equipe ágil citada na Tabela de Visão Geral (Denilson Freitas / Comitê NVA). Reduz Gargalos: Aplica um conceito prático de mercado (Matriz Valor X Esforço) para filtrar pedidos que não justificariam os custos das chamadas de API ou espaço no Lakehouse. 6.3 Controle de Acesso O acesso a qualquer banco de dados, tabela analítica integrada ou recurso operacional exposto no ecossistema corporativo rege-se pelos controles mais rígidos de segurança cibernética baseados nas normas ISO/IEC 27001 e recomendações CIS Controls. Princípio do Menor Privilégio (Least Privilege): Os utilizadores recebem estritamente as permissões computacionais necessárias para a execução das suas funções de negócios. Nenhum utilizador possui acesso geral (Full Access) à totalidade das bases de dados por padrão. Segregação de Funções (Segregation of Duties): Os papéis técnicos de desenvolvimento de código de engenharia de dados (Scripts Python), validação de qualidade de dados (Data Steward) e administração física de bases (DBA - Data Custodian) são segregados de forma que um mesmo indivíduo não acumule competências operacionais de codificação e aprovação de mudanças. Autenticação Baseada em Perfis (RBAC & ABAC): O acesso às bases de dados analíticas publicadas baseia-se em perfis corporativos pré-cadastrados (Role-Based Access Control) e atributos dinâmicos contextuais do utilizador (Attribute-Based Access Control), tais como a empresa jurídica de origem e o departamento de negócio de atuação. Autenticação Única e Multi-Fator (SSO & MFA): Todas as credenciais de acesso operacionais das equipes internas e agentes de automação utilizam sistemas de autenticação única corporativa (Single Sign-On - SSO) integrados aos diretórios de identidades do grupo. A exigência de Autenticação de Múltiplos Fatores (MFA - via aplicativos de autenticação móveis) é obrigatória para utilizadores que detêm perfis de privilégios de alteração de esquemas (Administradores, DBAs e Editores do portal)4. Agentes de Inteligência Artificial e LLMs: Só poderão consumir dados originados estritamente da Camada Gold (NVA_unificado) ou de endpoints MCP com mascaramento dinâmico (DDM) ativo, sendo terminantemente vedado o acesso direto às camadas RAW e Staging para evitar alucinações e vazamento de dados sensíveis (PII). 6.4 Segregação de Dados Para viabilizar a coexistência pacífica e legalmente segura de informações de empresas que atuam em concorrência direta ou sob restrições severas de nichos regulatórios incompatíveis, a arquitetura física e lógica aplica a técnica de Chinese Walls baseada nos seguintes níveis computacionais de isolamento: Por Empresa: Credenciais sistémicas de leitura de bases analíticas pertencentes à empresa Eucatur Cargas não detêm privilégios de visualização física ou cruzamento na base de dados de passageiros rodoviários e urbanos, a menos que uma regra de negócio unificada de dados mestre do MDM tenha sido formalmente aprovada pelos respectivos Data Owners e pelo DPO. Por Departamento: Isolamento físico e lógico entre dados de operações operacionais de oficinas e frotas (Gimave / Oficina) em relação aos dados de faturamento financeiro e RH corporativo das empresas. Por Ambiente: Segregação física rígida de servidores de banco de dados e instâncias computacionais entre ambientes produtivos de dados (Production Lakehouse / DW), homologação (Staging / Testing) e desenvolvimento isolado (Sandbox). 6.5 Qualidade dos Dados O monitoramento contínuo da integridade e qualidade do repositório analítico corporativo é executado por rotinas computacionais automatizadas agendadas na plataforma. A medição contínua da integridade realiza verificações matemáticas e lógicas antes e após a execução de cada pipeline de ingestão: Controlo de Consistência Temporal: Alertas preventivos disparam se a latência temporal dos registros ultrapassar os SLAs contratuais estabelecidos nas tabelas cadastrais de fontes operacionais. Controlo de Integridade Referencial: Varreduras de integridade barram atualizações de tabelas de fato analíticas caso existam chaves de negócios que apontem para registros inexistentes nas dimensões mestres de suporte. Reconciliação e Unicidade: Validação de volumetria matemática para garantir que registros transacionais de passagens terrestres ou expedição de faturamento de cargas não apresentem duplicações computacionais induzidas por falhas em scripts de transformação incremental de dados. 6.6 Metadados A governança corporativa de dados assegura a total transparência semântica e rastreabilidade técnica dos metadados através do Portal NVA. Cabe ao Núcleo de Valor e Automação (NVA) auditar sistematicamente as bases de dados para garantir que: Nenhuma tabela seja movida para o status de "Oficial NVA" sem conter descrições detalhadas em linguagem clara de negócios de todos os seus campos computacionais ativos. Os caminhos operacionais dos scripts de carga em Python, as frequências físicas de atualizações operacionais e as origens lógicas estão plenamente mapeados na Linhagem Técnica exposta visualmente no portal de dados. 6.7 Versionamento A rastreabilidade histórica e o controle de alterações no ecossistema corporativo são garantidos por diretrizes rígidas de versionamento sistemático: Versionamento de Banco de Dados: Alterações na modelagem lógica e física das tabelas de staging e trusted são aplicadas de forma sequencial através de códigos estruturados de migração (DDL Scripts) controlados eletronicamente por ferramentas de automatização de alterações de esquemas lógicos. Versionamento de APIs: Os endpoints de fornecimento de dados para agentes de automação integrados de negócios ou relatórios gerenciais externos utilizam versionamento por caminhos explícitos na URL (ex: api/v1/veículos/, api/v2/veículos/), prevenindo desvios estruturais ou quebra de funcionamento de painéis de negócios ativos. Versionamento de Pipelines de ETL: Scripts Python que realizam as cargas e transformações computacionais de dados transacionais brutos em bases unificadas de consumo analítico utilizam ramos (branches) segregados e controle formal de versões de arquivos em repositórios corporativos centralizados. Versionamento de Relatórios e Dashboards: Os arquivos de modelagem de painéis de Business Intelligence (Power BI) são submetidos a versionamento sistemático de arquivos antes de serem publicados nos espaços de trabalhos institucionais online. 6.8 Backup e Retenção A resiliência operacional do repositório analítico e do Portal NVA baseia-se na implementação sistemática de rotinas robustas de salvaguarda física (Backup & Restore), dimensionadas de acordo com a criticidade das bases de dados: Toda rotina física de salvaguarda é executada de forma automatizada pelo Guardião Técnico, exigindo-se a validação semestral dos processos de restauração física (Restore Drills) para certificar a integridade dos dados salvos e a prontidão computacional das infraestruturas de contingência. 6.9 Particionamento Para suportar grandes volumes computacionais e acelerar o desempenho de consultas analíticas pesadas, implementa-se o particionamento físico das tabelas nas camadas Trusted e Gold utilizando estratégias otimizadas: Particionamento por Hash: Aplicado às colunas identificadoras de chaves mestres corporativas de alta cardinalidade do MDM (ex: chaves substitutas de veículos e chaves substitutas de clientes), garantindo distribuição física equitativa nas partições e alta concorrência computacional. Particionamento por Range (Faixa Temporal): Utilizado em tabelas fatos transacionais volumosas (ex: vendas de passagens ou ordens de serviços oficinas), segmentando fisicamente os registros por faixa de data. A partição temporal é tipicamente estabelecida ao nível de Ano e Mês, permitindo que consultas analíticas filtrem de forma instantânea períodos históricos específicos sem a necessidade de varredura (Full Table Scan) de registros obsoletos de anos anteriores. Particionamento por List (Lista de Domínio): Segmentação das tabelas analíticas integradas baseando-se em valores discretos pertencentes a domínios de negócios específicos, tais como por Empresa (ex: separar fisicamente registros da Eucatur Rodoviário, Urbano ou Gimave) ou por Produto de transporte logístico. 6.10 Gerenciamento do Ciclo de Vida do Dado O gerenciamento do ciclo de vida dos dados corporativos (Information Lifecycle Management - ILM) rege-se pelas seguintes etapas do ciclo operacional: 1. Criação: Coleta e ingestão de transações operacionais brutas das empresas do ecossistema para a Staging Area do repositório analítico. 2. Validação: Aplicação de scripts de tratamento lógicos na Trusted Layer, verificação de consistência estrutural e metadados ativos. 3. Uso: Disponibilização pública das tabelas analíticas homologadas na Gold Layer para consumo oficial por painéis analíticos e barramentos de APIs corporativos. 4. Atualização: Processos incrementais contínuos baseados em captura de alterações (CDC) ou recargas parametrizadas diárias, mantendo o histórico de alterações rastreáveis. 5. Arquivamento: Dados históricos transacionais com mais de 24 meses de inatividade operacional são transferidos eletronicamente para áreas de armazenamento de baixo custo (Cold Storage), mantendo a sua acessibilidade para auditorias profundas sob latência de resposta variável. 6. Descarte: Exclusão física definitiva e purga segura de dados pessoais e transações cuja obrigação legal de retenção expirou, atendendo integralmente às determinações da LGPD e políticas internas das empresas do grupo. 6.11 Integrações As integrações técnicas entre o repositório de dados analíticos unificado e os utilizadores operacionais ou de automações utilizam métodos padronizados sob rígidos protocolos de controle de perímetro e segurança corporativa: APIs de Integração: Camada de micro serviços RESTful desenvolvida e homologada sob protocolo de segurança HTTPS com autenticação ativa via tokens de acesso seguros OAuth2. As chamadas APIs passam por avaliações automatizadas de controle de acesso Baseado em Atributos (ABAC) para impedir o vazamento de dados intercompany. Webhooks Baseados em Eventos: Mecanismos de disparo automático de payloads estruturados em formato JSON para automação de fluxos de processos que operam em ferramentas externas. Barramentos de Mensageria (Apache Kafka / RabbitMQ): Utilizados como infraestrutura de alta tolerância a falhas para distribuição assíncrona de eventos corporativos vitais em tempo real, garantindo resiliência computacional na integridade de transações críticas distribuídas entre múltiplos domínios sistémicos das companhias. Transferência de Arquivos Seguros (SFTP): Protocolo de comunicação restrito para importação ou exportação automatizada de grandes volumes estruturados de dados financeiros, logs brutos ou arquivos operacionais remotos, operando com criptografia simétrica de chaves públicas SSH. 6.12 DevSecOps A implantação operacional de novos recursos informacionais, alteração de esquemas lógicos e desenvolvimento de scripts Python de integração e automação de processos segue práticas estruturadas de DevSecOps para garantir estabilidade e proteção ao ambiente produtivo: Pipelines de Integração e Implantação Contínua (CI/CD): Execução automatizada de testes funcionais estruturais, verificações sintáticas de código de scripts e análise estática de vulnerabilidades de segurança cibernética (SAST - Static Application Security Testing) a cada submissão de alterações no repositório Git corporativo. Revisão de Código Obrigatória (Code Review): Toda mudança estrutural ou nova rotina operacional de carga exige a aprovação técnica e funcional cruzada de pelo menos dois profissionais experientes da equipe de engenharia de dados do NVA corporativo, prevenindo desvios arquiteturais ou falhas de segurança cibernética. Esteira de Ambientes Homologados: Segregação absoluta e linear do ciclo de vida operacional de implantação: o código inicia-se na camada de Desenvolvimento Local, migra para a camada de Homologação em Sandbox (com dados integralmente anonimizados pela governança) para auditoria funcional de donos de processos operacionais e, por fim, é implantado em Produção após aprovação final e registro na trilha de auditoria. 6.13 Monitoramento O Núcleo de Valor e Automação (NVA) monitora continuamente o ecossistema corporativo através de indicadores chave de sucesso de governança e painéis analíticos operacionais ativos: Horas Poupadas de Trabalho (FTE - Full-Time Equivalent): Volume gerencial mensal de esforço operacional humano automatizado e poupado pelas integrações sistêmicas do NVA e rotinas robotizadas implantadas nas companhias. Grau de Qualidade de Dados Mapeados: Percentual volumétrico acumulado de registros de bases de dados ativas integradas que atendem perfeitamente aos critérios de conformidade estabelecidos nas regras automatizadas de qualidade. Tempo de Atendimento de Novas Integrações (Time-to-Market): Latência média compreendida entre a aprovação conceitual de uma demanda informacional analítica corporativa e a sua efetiva publicação operacional em produção. Retorno Financeiro sobre Investimento (ROI): Indicador de custos consolidados que mensura o valor financeiro direto economizado ou gerado pelas automação de frotas e fluxos informacionais gerenciais em relação aos custos computacionais e operacionais mantidos no NVA. Observabilidade de Cargas (Observability Logs): Painel técnico integrado que monitora o status físico de execução das rotinas Python no repositório corporativo (NVA controle cargas), disparando alertas críticos automáticos caso ocorram falhas lógicas de cargas, estouros de tempo de respostas das bases operacionais de origem ou violações de regras estruturais de SLAs contratuais. 6.14 Auditoria O Portal NVA mantém trilhas de auditoria (Audit Trails) detalhadas, contínuas e invioláveis de todos os eventos relevantes associados ao ciclo de vida de dados corporativos do grupo: Registro de Histórico de Alterações: Sempre que uma determinada base analítica, metadados funcionais, regras estruturais de transição ou privilégios de acessos funcionais sofrem modificações lógicas no portal corporativo, grava-se registro eletrônico contendo data, hora e credencial computacional do utilizador responsável. Aprovações Digitais de Homologações: Armazenamento seguro de assinaturas digitais, datas de avaliações e pareceres emitidos por Data Owners e Encarregados de Proteção de Dados (DPO) corporativos que justificaram a publicação de bases analíticas como "Oficial NVA" em produção. Logs de Consultas a Dados Sensíveis: Trilha de monitoramento em tempo real de acessos a esquemas físicos e colunas classificadas sob privilégios restritos de segurança (como dados pessoais de colaboradores ou diagnósticos médicos), permitindo auditorias periódicas rápidas sobre conformidade legal corporativa com a LGPD. 6.15 Conformidade e Continuidade A conformidade regulatória corporativa, a integridade operacional e a continuidade de negócios das empresas do ecossistema das companhias da Família Gurgacz baseiam-se em uma estratégia holística de resiliência e planos de contingência, integrando processos, cultura corporativa, governança e custos: Alta Disponibilidade Tecnológica (High Availability - HA): Toda infraestrutura física e lógica do repositório de dados analíticos integrado corporativo e do Portal NVA opera sob configurações de servidores distribuídos geograficamente redundantes com tolerância a falhas ativas de hardware e fontes redundantes. Estratégia de Recuperação de Desastres (Disaster Recovery - DR): Plano de ação computacional estruturado detalhando etapas técnicas imediatas para recuperação física das bases de dados unificadas e metadados de governança em caso de catástrofes sistêmicas severas ou interrupções físicas de operadoras de infraestruturas de telecomunicações. Plano de Contingência Operacional de Negócios: Conjunto normativo de procedimentos operacionais e táticos alternativos estruturados para manutenção das tomadas de decisões críticas, auditorias operacionais financeiras e monitoramento emergencial de frotas ativas das companhias (Eucatur Cargas, Rodoviário, Urbano, Gimave) em caso de indisponibilidade sistêmica prolongada do Portal NVA centralizado. A visão estratégica integrada de continuidade baseia-se nos seguintes pilares fundamentais corporativos de resiliência: Processos: Mapeamento estruturado das interdependências de negócios informacionais através da Linhagem de Dados exposta no Portal NVA, garantindo que em situações de crises operacionais ou restaurar de emergência de infraestruturas físicas de servidores as bases de dados mestres de frotas e clientes sejam recuperadas em ordem prioritária para suporte à continuidade operacional das oficinas da Gimave e logística de cargas. Cultura Organizacional: Realização periódica e contínua de campanhas educacionais internas de aculturamento de segurança de dados para todos os utilizadores das companhias, disseminando ativamente o papel do Dono do Processo de Negócio como o verdadeiro responsável pela exatidão operacional e privacidade das informações inseridas na origem, mitigando vulnerabilidades humanas de vazamentos informacionais ou erros sistémicos. Governança: Linha clara de escalonamento de crises para acionamento prioritário do Comitê de Governança de Dados, TI e assessoria jurídica em caso de incidentes de violações de dados pessoais cibernéticos, com fluxos rápidos de notificação obrigatória a autoridades regulatórias nacionais no prazo previsto em conformidade estrita com a LGPD. Custos: Dimensionamento inteligente do balanço financeiro corporativo entre os custos de manutenção física e infraestrutural de alta disponibilidade de servidores de contingência e armazenamento redundante de dados em relação ao impacto financeiro potencial decorrente de eventuais paradas ou atrasos operacionais de frotas terrestres e faturamentos de cargas por ausência de dados analíticos unificados. Operação: Manutenção de rotinas de monitoramento ativas automáticas e checklists periódicos de prontidão operacional realizados pela equipe técnica do NVA corporativo em conjunto com os guardiões de dados das empresas para garantir conformidade técnica estrutural. Gestão de Riscos: Análise de riscos e modelagem preditiva sistemática de vulnerabilidades estruturais tecnológicas e falhas operacionais das integrações e bancos utilizando as melhores práticas globais de análise de riscos previstas na norma ISO 310001. Continuidade de Negócio: Compromisso corporativo de garantir a blindagem operacional e reputacional das marcas das empresas pertencentes à Família Gurgacz assessores pela AN Consultoria, assegurando que o Portal NVA continue a prover visões sintetizadas consistentes e indicadores de performance auditáveis sob qualquer condição de estresse operacional. 7. Conclusões e Recomendações 7.1 Recomendações de Implementação Para garantir o sucesso operacional e a sustentabilidade a longo prazo do Portal NVA no ecossistema das empresas da Família Gurgacz (Rodoviário, Eucatur Cargas, Urbano, Gimave), a AN Consultoria e o Núcleo de Valor e Automação (NVA) estabelecem as seguintes recomendações prioritárias de implementação e adoção tecnológica: Abordagem Incremental (Mínimo Produto Viável - MVP): Recomenda-se evitar migrações massivas de dados sem a devida maturidade de governança. A integração de novas fontes de dados deve priorizar casos de uso específicos de alta entrega de valor e menor complexidade, tais como o cálculo do CPK de frotas correlacionando dados operacionais do IMPETUS, ERP totvs e SSW. Estreito Alinhamento com a Liderança: Toda e qualquer automação ou base analítica proposta para consolidação no Portal NVA deve ser formalmente aprovada pelo Comitê de Valor e Automação corporativo. Isso assegura o alinhamento estratégico, a remoção de impedimentos e a alocação de recursos financeiros e humanos nas unidades de negócios afetadas. Promoção Ativa da Cultura de Dados (Data Literacy): É fundamental instituir programas contínuos de capacitação técnica e conceitual para os donos de processos de negócios e guardiões de dados. O entendimento de que a TI atua como guardiã da infraestrutura e o negócio responde pela exatidão informacional deve ser amplamente sedimentado na cultura organizacional das empresas. Automatização Sistemática de Controles: O NVA deve focar na eliminação completa de reconciliações manuais. Todas as regras de qualidade, volumetria, testes de consistência intercompany e geração de logs computacionais de carga (NVA_controle_cargas) devem operar de forma automatizada e integrada nas esteiras DevSecOps. Adoção Pragmática de Padrões de Arquitetura: Conforme preconizado por James Serra, a escolha entre arquiteturas centralizadas (Modern Data Warehouse, Lakehouse) ou descentralizadas (Data Mesh, Data Fabric) deve pautar-se nas reais necessidades do negócio, no tamanho das equipes e na maturidade de metadados das empresas, mitigando a adoção de conceitos excessivamente complexos sem o devido suporte de governança e investimento de pessoal8. Referências citadas PORTAL NVA, https://mail.google.com/mail/?extsrc=sync&client=h&plid=ACUX6DMmfB8ZuyBwDGFZqU2_pkHZNfZcf2KcpME&mid=19f47ac9b1431b2f Núcleo de Valor e Automação, https://drive.google.com/a/grupogurgacz.com/open?id=1_DPV_TH_kxHgXYWFdjtORTagfqQmU21hk1ihkGlzhqU Call Kiara - 2026/07/13 09:01 GMT-03:00 - Anotações do Gemini, https://drive.google.com/a/grupogurgacz.com/open?id=19_yNIZxwryjWizk9NAqa3w5R0pw0YyhiOy4CvARL26I Manual_Portal_SSTO (em revisao).docx, https://drive.google.com/a/grupogurgacz.com/open?id=1sL_KidicuWZ_xhg1J-xHDcF9K63IpkZe Política de Governança Portal NVA, https://drive.google.com/a/grupogurgacz.com/open?id=1lZqL6ybL0Gc_6P5gHBGhV11K6EilKpuMw433_Os-2ss DAMA-DMBOK Explained: Data Management Framework - Snowflake, https://www.snowflake.com/en/data-governance/frameworks/dama-dmbok/ Deciphering Data Architectures - James Serra - Google Books, https://books.google.com/books/about/Deciphering_Data_Architectures.html?id=K0_zEAAAQBAJ Deciphering Data Architectures: When to Use a Warehouse, Fabric, Lakehouse, or Mesh, https://www.jamesserra.com/archive/2025/05/deciphering-data-architectures-when-to-use-a-warehouse-fabric-lakehouse-or-mesh/ Decifrando Arquiteturas de Dados - Novatec Editora, https://s3.novatec.com.br/sumarios/sumario-9788575229217.pdf DAMA-DMBOK: A Comprehensive Framework for Data Management, https://www.optimizemro.com/blog/dama-dmbok-a-comprehensive-framework-for-data-management/ Formulario_Fonte_de_Dados_Aprimorado.docx Data quality | naa.gov.au, https://www.naa.gov.au/information-management/build-data-interoperability/interoperability-development-phases/data-governance-and-management/data-quality Data Quality Dimensions: The No-BS Guide with Examples - Soda.io, https://soda.io/blog/guide-to-data-quality-dimensions The 6 dimensions of data quality explained with real-world cases | IA Governance, https://iagovernance.com/en/blog/data-quality-dimensions/ The six most used Data Quality dimensions - Clever Republic, https://www.cleverrepublic.com/resources/blog/the-six-most-used-data-quality-dimensions/ Data Warehouse vs Lakehouse vs Fabric vs Mesh: Which Data Architecture Should You Choose in 2026 | by Ed | Medium, https://medium.com/@edyau/data-warehouse-vs-lakehouse-vs-fabric-vs-mesh-which-data-architecture-should-you-choose-in-2026-5d327d4d4947 Data Mesh - Driving Insights At Scale | The Third Episode - Saxon AI, https://saxon.ai/podcasts/data-mesh-driving-insights-at-scale/