Errores #46
open
Elementos duplicados en cm-ci_fosc
100%
Description
En el dia de hoy se recibe el reclamo de que hay 19 elementos duplicados en la tabla cm.ci_fosc
El query que usé para encontrar estos casos:
select id_cm, cantidad
from (select id_cm, count (id_cm) as cantidad
from cm.ci_fosc
group by id_cm ) foo
where cantidad >1
Files
Updated by Demo MiGestion365 Admin 23 days ago
Se verifica que los elementos duplicados son:
GCAS0201-FOSC-00-020371-0001
GCAS0201-FOSC-01-020637-0001
GHUR0201-FOSC-06-020382-0001
GTFR0201-FOSC-01-022921-0001
GVSR0201-FOSC-05-020605-0001
JP000401-FOSC-00-020417-0001
LM002001-FOSC-00-021179-0001
MA000201-FOSC-00-020233-0001
MA000201-FOSC-00-020266-0001
MI002001-DTRA-00-000616-0001
ML000201-FOSC-00-022733-0001
MO000201-FOSC-00-020223-0001
MR000201-FOSC-00-022738-0001
MR000201-FOSC-00-022743-0001
MR000401-FOSC-00-022744-0001
SF010101-FOSC-08-021815-0001
SM010101-FOSC-05-004925-0001
TF000201-FOSC-00-022755-0001
TF002001-FOSC-00-022679-0001
Updated by Demo MiGestion365 Admin 23 days ago
- File clipboard-202605071501-qfyvw.png clipboard-202605071501-qfyvw.png added
- File clipboard-202605071502-7ubqv.png clipboard-202605071502-7ubqv.png added
- File clipboard-202605071503-eae7q.png clipboard-202605071503-eae7q.png added
Se verifica que los elementos duplicados se encuentran también en audit.ci_fosc_raw
select id_cm, cantidad
from (select id_cm, count (id_cm) as cantidad
from audit.ci_fosc_raw
group by id_cm ) foo
where cantidad >1
Viendo el script del loader encontramos donde se arma el data frame con la informacion:
Se define que la info del path surge del config:
En el config podemos ver que el archivo viene desde S3
Updated by Demo MiGestion365 Admin 23 days ago
- File clipboard-202605071506-u61rl.png clipboard-202605071506-u61rl.png added
- Status changed from Nueva to En curso
Se genera el mail pidiendo que se abra el reclamo a Netcom
Updated by Demo MiGestion365 Admin 23 days ago
De esta manera se verifica que la duplicación aparece ya en el json con el comando:
jq '.. | select(type=="string" and contains("JP000401-FOSC-00-020417-0001"))' file2-tmp.json
Updated by Demo MiGestion365 Admin 15 days ago
- File clipboard-202605151638-ootpr.png clipboard-202605151638-ootpr.png added
- File clipboard-202605151638-mnnu5.png clipboard-202605151638-mnnu5.png added
Se recibe notificación de que los elementos duplicados fueron eliminados pero yo sigo viendo uno: MI002001-DTRA-00-000616-0001 . Hay que validarlo en el crudo, ya que Esteban no lo ve.
Updated by Demo MiGestion365 Admin 8 days ago
- Due date set to 05/21/2026
- Status changed from En curso to Resuelta
- % Done changed from 80 to 100
Se verificó que efectivamente el tema se encuentra resuelto.
select id_cm, cantidad
from (select id_cm, count (id_cm) as cantidad
from audit.ci_fosc_raw
group by id_cm ) foo
where cantidad >1