ODL Open Data Loader (BSS02)

Open Data LoaderDefinición

Sistema Externo

Loading…Loading…Loading…

Open Data Loader (ODL) es una potente herramienta que permite migrar información de un sistema externo a Open Smartflex.

Historia

EPM realiza al compra de Cableras y de la Empresa Antioqueña de Energía – EADE, la cual atendía el 86.5% de los municipios antioqueños.

Esto obliga a migrar toda la información del antiguo aplicativo comercial de EADE (SICE) a Open Smartflex instalado en EPM.

Open Data LoaderEl origen de ODL

ODL

Open Data LoaderAplicabilidad del ODL en los Proyectos de Implantación

Con

fig

ura

ció

n y

P

ara

metr

izació

n

Planeación y preparación

para Blackout

Tareas para el lanzamiento del

producto:Ej.

• Ajuste parámetros BD

• Dimensionamiento• Creación Usuarios• Etc.

Rollout

SalidaProducción

BlackOutFase de Pruebas

Sistema Externo

TXT

ODL

TEST 1

TEST 2

TEST n

ETL: Extracción, Transformación y Carga

ODL

n

Errores Migración

ODL

ODL como herramienta de Migración

Open Data LoaderVentajas

Elimina posibilidad de errores.Evita la utilización de Scripts para la migración de datos.

Garantiza la integridad de los datos.No es necesario deshabilitar FOREING KEYS para su ejecución

Mejora los tiempos de “Black Out”El ser solo proceso de migración los tiempos de espera para volver a subir el sistema son reducidos

Sistema EscalablePermite crecer en rendimiento según como lo requiera el proyecto.

ODL se puede encontrar como PI ubicado en el TAB de “Herramientas del Sistema” del producto.

Recepción del Archivo en modo “Solo validaciones” Procesamiento de Archivos Consulta de estado del proceso Visualización de Inconsistencias Recuperación por Bloques Reversión de Archivos

Open Data LoaderProceso

Open Data LoaderProceso

Recepción Archivos de migración

Archivo presenta errores?

Reprocesamiento

Reversión Fin

Solo validación

?

Genera Archivo de Inconsistencias

Si

Si

No

No

ALL_DIRECTORIES

DI_ODL_DIRECTORYPB - FECDEjecución de Carga de Datos

PB – FVCDPReversión y Reprocesamiento de Carga de Datos

Consulta de Estados de Procesos

Consulta de Inconsistencias

A través de un formato de archivo de texto plano, pre-definido y fijo, el sistema permite migrar, actualmente en Producto:

Cartera (factura, cuentas de cobro, cargos) Pagos Consumos Lecturas Rangos Liquidados

Open Data LoaderCómo funciona

Open Data LoaderEsquema General de Archivos

Bloque

[Valor total Cargos] [Total Pagos] Encabezado

[Cargos] Detalle

[Cargos] Detalle

[Pagos] Detalle

[Pagos] Detalle

BloqueSe define como la unidad atómica de una funcionalidad.

• Despliegue de inconsistencias• Recuperación de Inconsistencias• Commit

Open Data LoaderRegistro Detalles Cartera

1 Línea2 Bloque3 Tipo Registro4 LEEMSESU RALISESU CONSSESU5 CARGCONC6 CARGCACA7 CARGSIGN8 CARGVALO CUPOVALO PAGOVAPA9 CARGUNID10 CARGDOSO11 n/a12 CARGTIPR13 CONCBANC14 CONCFECR15 PAGOFECR CARFECR16 PAGOBANC17 PAGOSUBA18 CARGCODO19 PAGOFEPA CUPOFECH20 PAGOTDCO21 PAGOUSUA22 PAGOTDCO23 PAGOUSUA24 PAGOTERM25 PAGOPROG

26 CUCOPLSU27 CUCOCATE28 CUCOSUCA29 n/a30 n/a31 RALITICO32 COSSMECC33 COSSDICO34 COSSFERE35 COSSFUFA36 COSSNVEC37 LEEMFELA38 LEEMLETO39 LEEMLEAN40 LEEMFELE41 LEEMFAME42 LEEMCLEC43 LEEMOBLE44 LEEMPETL45 CARGBAVL46 CARGPECO

Open Data LoaderEjemplo Archivo Cartera

1 1 1 Contrato Num. Fiscal

Ciclo Año Mes FechaGeneración

Fecha vencimiento

ValorFactura

ValorPagado

Encabezado

2 1 2 Producto Concepto Signo Cargo

Causa Cargo

Valor del Cargo

Unidades FechaCreación

DB

3 1 2 Producto Concepto Signo Cargo

Causa Cargo

Valor del Cargo

Unidades FechaCreación

DB

3 1 2 Producto Concepto

Signo Cargo

Fecha Pago

Valor del Cargo

Forma de Pago

Banco Sucursal

PA

Detalles

Deducción Período de Facturación

Validación contra parámetro: DIAS_FECHA_GENERACION_ODL

Facturas

FACTURA

Cuentas de Cobro

CUENCOBR

Cargos

CARGOS

Pagos

PAGOS

Conciliaciones

CONCILIA

Cupones

CUPON

Saldos a Favor

SALDFAVO

Movimientos. SAFA

MOVISAFA

Validación de Nulidad

Open Data LoaderEntidades Pobladas en la Migración

Facturas

FACTURA

Cuentas de Cobro

CUENCOBR

Cargos

CARGOS

Pagos

PAGOS

Conciliaciones

CONCILIA

Cupones

CUPON

Saldos a Favor

SALDFAVO

Movimientos. SAFA

MOVISAFA

Consumos

CONSSESU

Lecturas

LECTELME

Rangos Liquidados

RANGLIQU

Cantidad de Datos Migrados / Tiempos

Open Data LoaderDatos

OPTFA OPPER OPPER 0

20

40

60

80

100

120

140

160

180

200

156

80

180

Tiempo (Min) Córdoba

Tiempo (Min) Córdoba

OPTFA OPPER OPPER 0

200,000400,000600,000800,000

1,000,0001,200,0001,400,0001,600,0001,800,000

557,883 485,253

1,654,534

Número de Registros Procesados Cór-doba

Número de Registros Procesados Córdoba

OPTFA OPPER OPPER 0

2

4

6

8

10

12

14

6

12 12

Número Hilos Córdoba

Número Hi-los Córdoba

Open Data LoaderInvitados Especiales

Experiencias Reales en Proyecto con ODL

Ricardo Calixto

Crecimiento de ODL con el Grupo de Migración

Pablo de la Peña