American Tower

Se verifica que los elementos duplicados se encuentran también en audit.ci_fosc_raw

select id_cm, cantidad
from (select id_cm, count (id_cm) as cantidad
from audit.ci_fosc_raw
group by id_cm ) foo
where cantidad >1

Viendo el script del loader encontramos donde se arma el data frame con la informacion:

Se define que la info del path surge del config:

En el config podemos ver que el archivo viene desde S3

Se genera el mail pidiendo que se abra el reclamo a Netcom

De esta manera se verifica que la duplicación aparece ya en el json con el comando:

jq '.. | select(type=="string" and contains("JP000401-FOSC-00-020417-0001"))' file2-tmp.json

Se recibe notificación de que los elementos duplicados fueron eliminados pero yo sigo viendo uno: MI002001-DTRA-00-000616-0001 . Hay que validarlo en el crudo, ya que Esteban no lo ve.

Se verificó que efectivamente el tema se encuentra resuelto.

select id_cm, cantidad
from (select id_cm, count (id_cm) as cantidad
from audit.ci_fosc_raw
group by id_cm ) foo
where cantidad >1