Hola
buscando algunos consejos sobre qué columna(s) debería usar al configurar actualizaciones incrementales para mi conjunto de datos.
Actualmente estoy extrayendo datos de una base de datos de notificaciones y tengo una columna para una notificación llamada InsertDate, que es cuando se creó la notificación en el sistema. También tengo un LastUpdateDate, que es cuando la notificación se actualizó por última vez. Cada notificación tiene 1 fila en el sistema y solo LastUpdateDate cambia cuando se actualiza la notificación.
Ahora, los usuarios pueden entrar y actualizar una reclamación de hace 30 o 40 años. Tenemos afirmaciones que se remontan a 1970 y a veces estas viejas reclamaciones todavía se están actualizando debido a la subrogación y otras razones. Por lo tanto, tendría que asegurarme de que capture todos estos cambios en mi período de actualización incremental para no perderme nada.
Originalmente estaba pensando en usar InsertDate como mi fecha de actualización incremental para la carga histórica (primera vez) y la carga incremental y, a continuación, usar LastUpdateDate para el campo Detectar cambios de datos. Sin embargo, con el fin de capturar todos los cambios en el sistema que podrían suceder, tendría que volver 50 años cada vez que hago una actualización. Por ejemplo, una reclamación de 1970 podría actualizarse hoy y la actualización incremental tendría que comprobar todos los años que se remontan a 1970 para capturar solo el cambio de hoy. Siento que esto no me está ayudando mucho ya que todos los años tendrán que ser consultados en la base de datos de origen que parece derrotar el propósito de la actualización incremental. ¿Estoy en lo cierto en mi pensamiento o me estoy perdiendo algo?
