Ver Log ETL

2025-09-14 22:07:34,551 [INFO] Iniciando proceso ETL... 2025-09-14 22:07:34,552 [INFO] === INICIO ETL === 2025-09-14 22:07:34,552 [INFO] Paso 1: Extracción de datos 2025-09-14 22:07:34,552 [INFO] Iniciando extracción de cabeceras 2025-09-14 22:07:34,552 [INFO] Extrayendo órdenes desde linux_ordenes... 2025-09-14 22:07:34,552 [INFO] Intentando conectar a SQL Server... 2025-09-14 22:07:35,589 [INFO] Conexión SQL Server exitosa 2025-09-14 22:07:35,589 [INFO] Ejecutando consulta (últimos 30 días desde 2025-08-15): SELECT numero, cliente, vendedor, fecha_entrega, dias_restantes, estatus FROM dbo.linux_ordenes WHERE fecha_entrega >= ? 2025-09-14 22:07:36,818 [INFO] Extraídas 165 órdenes 2025-09-14 22:07:36,818 [INFO] [DEBUG] Columnas ordenes: ['numero', 'cliente', 'vendedor', 'fecha_entrega', 'dias_restantes', 'estatus'] 2025-09-14 22:07:36,818 [INFO] [DEBUG] dtypes ordenes: {'numero': dtype('O'), 'cliente': dtype('O'), 'vendedor': dtype('O'), 'fecha_entrega': dtype('O'), 'dias_restantes': dtype('int64'), 'estatus': dtype('O')} 2025-09-14 22:07:36,824 [INFO] [DEBUG] Nulos en fecha_entrega (ordenes) tras limpiar: 0 2025-09-14 22:07:36,927 [INFO] Iniciando extracción de líneas 2025-09-14 22:07:36,927 [INFO] Extrayendo pedidos desde linux_pedidos... 2025-09-14 22:07:36,927 [INFO] Intentando conectar a SQL Server... 2025-09-14 22:07:37,545 [INFO] Conexión SQL Server exitosa 2025-09-14 22:07:37,545 [INFO] Ejecutando consulta (últimos 30 días desde 2025-08-15): SELECT id, orden_id, clave, producto, unidad, cantidad, surtido, liq, saldo, fecha_entrega FROM dbo.linux_pedidos WHERE fecha_entrega >= ? 2025-09-14 22:07:40,825 [INFO] Extraídos 270 pedidos 2025-09-14 22:07:40,825 [INFO] [DEBUG] Columnas pedidos: ['id', 'orden_id', 'clave', 'producto', 'unidad', 'cantidad', 'surtido', 'liq', 'saldo', 'fecha_entrega'] 2025-09-14 22:07:40,826 [INFO] [DEBUG] dtypes pedidos: {'id': dtype('O'), 'orden_id': dtype('float64'), 'clave': dtype('O'), 'producto': dtype('O'), 'unidad': dtype('O'), 'cantidad': dtype('int64'), 'surtido': dtype('int64'), 'liq': dtype('int64'), 'saldo': dtype('int64'), 'fecha_entrega': dtype('O')} 2025-09-14 22:07:40,833 [INFO] [DEBUG] Nulos en fecha_entrega (pedidos) tras limpiar: 0 2025-09-14 22:07:40,936 [INFO] Extraídas 270 líneas 2025-09-14 22:07:40,936 [INFO] Extracción completada en 6.38s 2025-09-14 22:07:40,936 [INFO] Paso 2: Transformación de datos 2025-09-14 22:07:40,936 [INFO] Transformando datos de cabeceras 2025-09-14 22:07:40,937 [INFO] [DEBUG] Nulos por columna (cabeceras): {'numero': 0, 'cliente': 0, 'vendedor': 0, 'fecha_entrega': 0, 'dias_restantes': 0, 'estatus': 0} 2025-09-14 22:07:40,944 [INFO] Transformadas 165 cabeceras 2025-09-14 22:07:40,945 [INFO] [DEBUG] Ejemplo cabeceras transformadas (3): [{'id': '7252', 'numero': '7252', 'cliente': 'FINE TEC MOLDES', 'vendedor': 'ERICKA IVONNE DELGADO HUERTA', 'fecha_entrega': '2025-08-27', 'estatus': 'completado', 'dias_restantes': -18, 'prioridad': 'URGENTE'}, {'id': '7271', 'numero': '7271', 'cliente': 'CHAPRINT', 'vendedor': 'ERICKA IVONNE DELGADO HUERTA', 'fecha_entrega': '2025-09-01', 'estatus': 'completado', 'dias_restantes': -13, 'prioridad': 'URGENTE'}, {'id': '7276', 'numero': '7276', 'cliente': 'HUSSMANN CORPORATION', 'vendedor': 'LF', 'fecha_entrega': '2025-09-02', 'estatus': 'completado', 'dias_restantes': -12, 'prioridad': 'URGENTE'}] 2025-09-14 22:07:40,945 [INFO] Transformando datos de líneas 2025-09-14 22:07:40,945 [INFO] [DEBUG] Nulos por columna (lineas): {'id': 0, 'orden_id': 0, 'clave': 0, 'producto': 0, 'unidad': 0, 'cantidad': 0, 'surtido': 0, 'liq': 0, 'saldo': 0, 'fecha_entrega': 0} 2025-09-14 22:07:40,957 [INFO] Transformadas 270 líneas 2025-09-14 22:07:40,958 [INFO] [DEBUG] Ejemplo líneas transformadas (3): [{'id': '6328_8936', 'ID_UNICO': '6328_8936', 'orden_id': '6328.0', 'clave': '3180360', 'producto': 'TH318 SELLADOR PARABRISAS NEGRO 600 ML', 'unidad': 'PIEZA', 'cantidad': 100, 'surtido': 100, 'liq': 100, 'saldo': 0, 'fecha_entrega': '2025-12-31', 'dias_restantes': 108, 'entregado': 1, 'estatus': 'completado', 'fecha_completado': None, 'F_Alta': None, 'remision_producto': None}, {'id': '6336_8944', 'ID_UNICO': '6336_8944', 'orden_id': '6336.0', 'clave': '1100019', 'producto': 'TAPE AVERY ADHESIVE TRANSFER 1 1/2', 'unidad': 'METRO', 'cantidad': 25, 'surtido': 0, 'liq': 25, 'saldo': 25, 'fecha_entrega': '2025-10-01', 'dias_restantes': 17, 'entregado': 0, 'estatus': 'pendiente', 'fecha_completado': None, 'F_Alta': None, 'remision_producto': None}, {'id': '6373_8992', 'ID_UNICO': '6373_8992', 'orden_id': '6373.0', 'clave': '361602', 'producto': 'SELF SEALER 616, WHITE 2 LT', 'unidad': 'LITRO', 'cantidad': 1762, 'surtido': 0, 'liq': 1762, 'saldo': 1762, 'fecha_entrega': '2025-12-31', 'dias_restantes': 108, 'entregado': 0, 'estatus': 'pendiente', 'fecha_completado': None, 'F_Alta': None, 'remision_producto': None}] 2025-09-14 22:07:40,958 [INFO] Transformación completada en 0.02s 2025-09-14 22:07:40,958 [INFO] Paso 3: Carga de datos 2025-09-14 22:07:41,127 [INFO] Merge de órdenes completado: 165 insertadas, 0 actualizadas, 0 omitidas 2025-09-14 22:07:41,157 [INFO] Skipped manually modified pedido: 7121_10133 2025-09-14 22:07:41,157 [INFO] Skipped manually modified pedido: 7121_10133 2025-09-14 22:07:41,161 [INFO] Skipped manually modified pedido: 7157_10177 2025-09-14 22:07:41,162 [INFO] Skipped manually modified pedido: 7157_10178 2025-09-14 22:07:41,168 [INFO] Skipped manually modified pedido: 7176_10205 2025-09-14 22:07:41,183 [INFO] Skipped manually modified pedido: 7206_10240 2025-09-14 22:07:41,202 [INFO] Skipped manually modified pedido: 7229_10267 2025-09-14 22:07:41,203 [INFO] Skipped manually modified pedido: 7229_10267 2025-09-14 22:07:41,204 [INFO] Skipped manually modified pedido: 7229_10268 2025-09-14 22:07:41,204 [INFO] Skipped manually modified pedido: 7229_10268 2025-09-14 22:07:41,205 [INFO] Skipped manually modified pedido: 7229_10269 2025-09-14 22:07:41,205 [INFO] Skipped manually modified pedido: 7229_10269 2025-09-14 22:07:41,206 [INFO] Skipped manually modified pedido: 7229_10270 2025-09-14 22:07:41,207 [INFO] Skipped manually modified pedido: 7229_10270 2025-09-14 22:07:41,212 [INFO] Skipped manually modified pedido: 7232_10277 2025-09-14 22:07:41,231 [INFO] Skipped manually modified pedido: 7255_10303 2025-09-14 22:07:41,234 [INFO] Skipped manually modified pedido: 7257_10305 2025-09-14 22:07:41,235 [INFO] Skipped manually modified pedido: 7257_10306 2025-09-14 22:07:41,254 [INFO] Skipped manually modified pedido: 7284_10335 2025-09-14 22:07:41,254 [INFO] Skipped manually modified pedido: 7284_10335 2025-09-14 22:07:41,275 [INFO] Skipped manually modified pedido: 7296_10365 2025-09-14 22:07:41,276 [INFO] Skipped manually modified pedido: 7296_10365 2025-09-14 22:07:41,284 [INFO] Skipped manually modified pedido: 7304_10381 2025-09-14 22:07:41,302 [INFO] Skipped manually modified pedido: 7322_10408 2025-09-14 22:07:41,306 [INFO] Skipped manually modified pedido: 7328_10414 2025-09-14 22:07:41,318 [INFO] Merge de pedidos completado: 234 insertados, 11 actualizados, 25 omitidos 2025-09-14 22:07:41,318 [INFO] Carga completada en 0.36s 2025-09-14 22:07:41,318 [INFO] Conectando a PostgreSQL via psycopg... 2025-09-14 22:07:41,325 [INFO] Conexión PostgreSQL exitosa 2025-09-14 22:07:41,331 [INFO] Actualizados 0 pedidos con saldo 0 a estatus completado 2025-09-14 22:07:41,331 [INFO] [SUCCESS] ETL completado sin errores 2025-09-14 22:07:41,331 [INFO] === PROCESO ETL COMPLETADO EXITOSAMENTE === 2025-09-14 22:07:41,331 [INFO] Resumen: órdenes 165, pedidos 234