Diferenças

Aqui você vê as diferenças entre duas revisões dessa página.

Link para esta página de comparações

Ambos lados da revisão anterior Revisão anterior
Próxima revisão
Revisão anterior
pres:gerti:servico_de_desenvolvimento_de_sistemas_de_informacao:projetos:iago-dataflow [11/07/2025 00:08] mfaquinopres:gerti:servico_de_desenvolvimento_de_sistemas_de_informacao:projetos:iago-dataflow [09/09/2025 22:51] (atual) mfaquino
Linha 251: Linha 251:
  
 {{https://projetos.tce.go.gov.br/attachments/download/20340/clipboard-202505271145-dbr3p.png?nolink&1863x951}} {{https://projetos.tce.go.gov.br/attachments/download/20340/clipboard-202505271145-dbr3p.png?nolink&1863x951}}
 +
 +==== Processos Sigilosos ====
 +
 +Diariamente é executado a pipeline de verificação de documentos sigilosos: [[https://dataflow.tce.go.gov.br/dags/iago.confidential/graph|https://dataflow.tce.go.gov.br/dags/iago.confidential/graph]] \\
 +A verificação é realizada executando a seguinte query no Oracle, que retorna todos os processos que atualmente são sigilosos:
 +<code>
 +
 +SELECT
 +   PROAUTU_ID AS PROAUTU_ID,
 +   CODG_PROCESSO_N AS PROCESSO
 +FROM TCE_GO.PRO_AUTUACAO
 +WHERE INDR_BLOQUEIODOC_A IS NOT NULL
 +ORDER BY PROAUTU_ID DESC
 +
 +</code>
 +
 +Caso seja encontrado algum desses processos no elasticsearch, o mesmo é removido da base ''iago-search-autuacao'' \\ Caso o documento se torne público posteriormente, o mesmo será incluido novamente na base pela pipeline de carga de dados diária. \\ **OBS: A atualização dos dados é assíncrona podendo levar algumas horas entre a mudança de status no Oracle e a exclusão no elasticsearch.**
 +
 +Os logs dos processos removidos são registrados no próprio Airflow, sendo possível acompanhar periodicamente os documentos processados pelos administradores da ferramenta, ou usuários apenas leitores: \\ A seguir um exemplo de log de um processo que foi removido por se tornar sigiloso: **202500047003283**
 +
 +{{https://projetos.tce.go.gov.br/attachments/download/24324/clipboard-202509091945-472hj.png?nolink&1844x889}}
  
 ==== Tabela de Controle ==== ==== Tabela de Controle ====
  • pres/gerti/servico_de_desenvolvimento_de_sistemas_de_informacao/projetos/iago-dataflow.1752192482.txt.gz
  • Última modificação: 11/07/2025 00:08
  • por mfaquino