Elevados tempos de ingestão através do intake

Description

CAPL - Internal Support default text according to the team DoR (Definition of Ready)

1 - DESCRIBE THE ISSUE YOU'RE HAVING:

De maneira generalizada, um grande percentual de dados recebidos (acima de 80% em alguns casos) aparesenta tempos de ingestão no BQ bem posteriores ao tempo de chegada do dado na camada intake.

Para ilustrar o cenário, seguem alguns exemplos que superarm 1h, mas os casos se multiplicam se consideradas também as frações de minutos.

Exemplo Unificado

Outros Exemplos

Dados no grafana referente ao dia 07/Outubro:

https://grafana.ops.totvslabs.com/d/HgNiuKrZz/carol-overview?orgId=1&from=1696634260887&to=1696734642629&viewPanel=39

https://grafana.ops.totvslabs.com/d/HgNiuKrZz/carol-overview?orgId=1&from=1696636752129&to=1696725128013&viewPanel=38

2 - DESCRIBE ALTERNATIVES YOU CONSIDERED:
3 - ADD AS MUCH CONTEXT AS POSSIBLE (LINKS, SLACK CONVERSATIONS, SCREENSHOTS, ETC):