#!/usr/bin/env python3 # -*- coding: utf-8 -*- """ extraer_movimientos.py (extractor DETERMINISTA de movimientos por columnas) ============================================================================ Lee un PDF de estado de cuenta y extrae CADA movimiento (fecha, concepto, deposito, retiro, saldo) leyendo las COLUMNAS por coordenadas (no con IA). COMPUERTA DE VALIDACION: al final compara la suma de los movimientos extraidos contra los TOTALES REPORTADOS por el banco (totales_banco.py). Solo marca ok=True si CUADRAN (tolerancia 1 peso). Si no cuadra, ok=False -> el flujo debe caer a Gemini para ese estado (y la verificacion lo delata). Asi nunca se emiten movimientos inventados/incompletos en silencio. Uso: python3 extraer_movimientos.py Salida (stdout) JSON: {"banco","ok","cuadra","suma_dep","suma_ret","rep_dep","rep_ret","n", "transacciones":[{"fecha","concepto","deposito","retiro","saldo"}...]} """ import json import re import sys import importlib.util import os _here = os.path.dirname(os.path.abspath(__file__)) _spec = importlib.util.spec_from_file_location('tb', os.path.join(_here, 'totales_banco.py')) tb = importlib.util.module_from_spec(_spec) _spec.loader.exec_module(tb) MONEY = re.compile(r'^\d{1,3}(,\d{3})*\.\d{2}$') MONEY_NEG = re.compile(r'^\d{1,3}(,\d{3})*\.\d{2}-$') # Banorte: devolucion, signo pegado al final FECHA_PREFIX = re.compile(r'^(\d{2}-[A-Z]{3}-\d{4})') def _num(s): return float(s.replace(',', '')) _MESES = {'ENE': 1, 'FEB': 2, 'MAR': 3, 'ABR': 4, 'MAY': 5, 'JUN': 6, 'JUL': 7, 'AGO': 8, 'SEP': 9, 'OCT': 10, 'NOV': 11, 'DIC': 12} def _fecha_iso(f): """'02-MAR-2026' -> '2026-03-02'. Devuelve '' si no se reconoce.""" m = re.match(r'^(\d{2})-([A-Z]{3})-(\d{4})$', f or '') if not m or m.group(2) not in _MESES: return '' return '%s-%02d-%s' % (m.group(3), _MESES[m.group(2)], m.group(1)) DEP_KW = {'DEPOSITO', 'DEPOSITOS', 'DEPÓSITO', 'DEPÓSITOS', 'ABONO', 'ABONOS'} RET_KW = {'RETIRO', 'RETIROS', 'CARGO', 'CARGOS'} SAL_KW = {'SALDO', 'SALDOS'} EXCL = ('TOTAL', 'TOTALES', 'SALDOANTERIOR', 'SALDOFINAL', 'SALDOINICIAL', 'SALDOAL', 'SALDOPROMEDIO', 'SALDOMINIMO') def _cols_de_pagina(words): """Encuentra (depx, retx, salx) por el encabezado de la tabla (juntando renglones cercanos). Devuelve None si la pagina no tiene tabla de movimientos.""" filas = {} for w in words: filas.setdefault(round(w['top']), []).append(w) tops = sorted(filas) mejor = None for top in tops: grupo = [x for t2 in tops if abs(t2 - top) <= 16 for x in filas[t2]] ups = {x['text'].upper() for x in grupo} if (ups & DEP_KW) and (ups & RET_KW) and (ups & SAL_KW): dx = rx = sx = None for x in grupo: u = x['text'].upper() if u in DEP_KW and dx is None: dx = x['x1'] elif u in RET_KW and rx is None: rx = x['x1'] elif u in SAL_KW and sx is None: sx = x['x1'] if None not in (dx, rx, sx): mejor = (dx, rx, sx, top + 16) return mejor # Bandas FIJAS (borde derecho x1) por banco. La auto-calibracion resulto fragil; # las bandas fijas calibradas por banco son las unicas confiables. Cada banco # nuevo se calibra una vez. La COMPUERTA de validacion protege: si no cuadra # (banda mal puesta o layout distinto), ok=False -> fallback a Gemini. BANDAS = { 'SANTANDER': {'dep': (420, 436), 'ret': (488, 503), 'sal': (572, 586)}, } def _undouble(s): """Colapsa tokens con glifos DUPLICADOS (aabbcc.. -> abc..). Algunos Santander (p.ej. ENERO) renderizan parte de la tabla con cada glifo dibujado dos veces, de modo que pdfplumber tokeniza '145,000.00' como '114455,,000000..0000' y el encabezado 'DEPOSITO' como 'DDEEPPOOSSIITTOO'. Solo colapsa cuando TODO el texto viene en pares identicos consecutivos (longitud par >=4); en cualquier otro caso devuelve el token intacto, asi los meses 'limpios' no se alteran y montos legitimos como '11,000.00' (cuyo 3er par ',0' no es identico) jamas se tocan.""" if len(s) >= 4 and len(s) % 2 == 0 and all(s[i] == s[i + 1] for i in range(0, len(s), 2)): return s[::2] return s DEP_KW_H = {'DEPOSITO', 'DEPOSITOS', 'DEPÓSITO', 'DEPÓSITOS'} # Etiquetas que CIERRAN la tabla de movimientos. Todo lo que sigue (segunda # cuenta 'Dinero/Inversion Creciente', 'Comisiones pendientes de pago', # informacion fiscal, sellos SAT en base64, glosario) NO son movimientos. _SANT_FIN = ('SALDOFINALDELPERIODO', 'SALDOTOTALACUMULADO', 'COMISIONESPENDIENTES') def _santander_hdrs(words): """Filas que SON encabezado real de la tabla: DEPOSITO + RETIRO + SALDO en el MISMO renglon, en orden creciente de x y en la mitad derecha. Evita que el GLOSARIO ('DEP= DEPOSITO' / 'CGO= CARGO' / 'SDO= SALDO', en tres renglones distintos) se tome por tabla de movimientos: con la puerta anterior esa pagina se escaneaba entera y cualquier monto en banda se habria inyectado al ultimo movimiento real.""" filas = {} for w in words: filas.setdefault(round(w['top']), []).append(w) out = [] for top in sorted(filas): d = r = s = None for w in filas[top]: u = w['text'].upper() if u in DEP_KW_H and d is None: d = w['x1'] elif u in RET_KW and r is None: r = w['x1'] elif u in SAL_KW and s is None: s = w['x1'] if None not in (d, r, s) and d < r < s and d > 300: out.append((top, d, r, s)) return out def _santander_bandas(pages_words): """Bandas dep/ret/sal ancladas al ENCABEZADO (como ya hace _bbva_bandas): el encabezado da la columna y el CLUSTER de montos a su derecha da el borde exacto. Las bandas FIJAS dejaban solo 4.9-6.5 pt de margen (un caracter): un cambio de plantilla de Santander tiraba los montos fuera de banda EN SILENCIO (colm devuelve None -> el movimiento sale sin importe). Devuelve None si la pagina no trae encabezado, para caer a las bandas fijas calibradas.""" from collections import Counter hx = Counter() for words in pages_words: for (_t, d, r, s) in _santander_hdrs(words): hx[(round(d, 1), round(r, 1), round(s, 1))] += 1 if not hx: return None d, r, s = max(hx, key=lambda k: hx[k]) money_x = [w['x1'] for words in pages_words for w in words if MONEY.match(w['text'])] bandas = {} for name, hxx in (('dep', d), ('ret', r), ('sal', s)): c = Counter(round(x, 1) for x in money_x if 2 <= (x - hxx) <= 45) if not c: return None mode = c.most_common(1)[0][0] near = [x for x in c.elements() if abs(x - mode) <= 4] bandas[name] = (sum(near) / len(near) - 8, sum(near) / len(near) + 8) return bandas def _por_bandas(pdf, bandas): """Extrae movimientos por bandas x1 (dep/ret/sal). Santander.""" pages_words = [] for page in pdf.pages: words = page.extract_words(use_text_flow=False, keep_blank_chars=False) # Normaliza glifos duplicados (ver _undouble): no-op en meses limpios, # arregla los Santander que renderizan la tabla con cada glifo dos veces. for w in words: w['text'] = _undouble(w['text']) pages_words.append(words) bandas = _santander_bandas(pages_words) or bandas dband, rband, sband = bandas['dep'], bandas['ret'], bandas['sal'] def colm(x1): if dband[0] <= x1 <= dband[1]: return 'dep' if rband[0] <= x1 <= rband[1]: return 'ret' if sband[0] <= x1 <= sband[1]: return 'sal' return None movs = [] for words in pages_words: # Puerta ESTRICTA: solo paginas con un encabezado real de la tabla. hdrs = _santander_hdrs(words) if not hdrs: continue hdr_bottom = hdrs[0][0] + 2 filas = {} for w in words: if w['top'] <= hdr_bottom: continue filas.setdefault(round(w['top']), []).append(w) for top in sorted(filas): row = sorted(filas[top], key=lambda x: x['x0']) if not row: continue mdate = re.match(r'^(\d{2}-[A-Z]{3}-\d{4})(\d*)(.*)$', row[0]['text']) primer = ''.join(c for c in row[0]['text'].upper() if c.isalpha()) # FIN de la tabla de movimientos: cortar la pagina aqui. Antes esto # era un 'continue', asi que la tabla informativa 'Comisiones # pendientes de pago' colaba filas fantasma con fecha valida y sin # importe (2 en los 6 estados), y todo el texto posterior a la tabla # se pegaba al ultimo movimiento (conceptos de hasta 2,050 chars). if not mdate and any(primer.startswith(k) for k in _SANT_FIN): break if not mdate and any(primer.startswith(k) for k in EXCL): continue dep = ret = sal = None desc = [] for i, w in enumerate(row): if MONEY.match(w['text']): cm = colm(w['x1']) if cm == 'dep': dep = _num(w['text']) elif cm == 'ret': ret = _num(w['text']) elif cm == 'sal': sal = _num(w['text']) continue if i == 0 and mdate: if mdate.group(3): desc.append(mdate.group(3)) elif 110 < w['x0'] < 330: desc.append(w['text']) # Fila de TOTAL: un movimiento real NUNCA trae deposito Y retiro a la # vez -> cierra la tabla de esta pagina. if dep is not None and ret is not None: break if mdate: movs.append({'fecha': mdate.group(1), 'concepto': ' '.join(desc), 'deposito': dep, 'retiro': ret, 'saldo': sal}) elif movs and row[0]['x0'] > 110: if desc: movs[-1]['concepto'] += ' ' + ' '.join(desc) if movs[-1]['deposito'] is None and dep is not None: movs[-1]['deposito'] = dep if movs[-1]['retiro'] is None and ret is not None: movs[-1]['retiro'] = ret if sal is not None: movs[-1]['saldo'] = sal # (Sin dedup interno: dos movimientos reales PUEDEN compartir el mismo saldo # cuando el balance oscila (p.ej. +100k luego -100k y otra vez +100k). La # duplicacion por fila de TOTAL ya se evita arriba (dep y ret a la vez). El # dedupe entre corridas lo hace 'Filtrar duplicados' en el flujo.) for m in movs: m['concepto'] = m['concepto'][:300] return movs _MES_ABBR = {1: 'ENE', 2: 'FEB', 3: 'MAR', 4: 'ABR', 5: 'MAY', 6: 'JUN', 7: 'JUL', 8: 'AGO', 9: 'SEP', 10: 'OCT', 11: 'NOV', 12: 'DIC'} # Banamex: columnas RETIROS x1~317, DEPOSITOS x1~395, SALDO x1~474 # (orden RET|DEP|SALDO). BANAMEX_DEP = (384, 404) BANAMEX_RET = (306, 328) BANAMEX_SAL = (462, 486) # Columna CONCEPTO: arranca en x0~50 (ahi caen 'CAJA','HORA','PAGO','POR','AL') y # muere antes de la columna RETIROS. La columna FECHA vive en x0 18..46, por eso # el limite inferior es 48: mas arriba se perdia la primera palabra de cada linea # de continuacion ('POR ORDEN DE ...', 'AL BENEF. ...'). BANAMEX_DESC = (48, 262) _BX_FILA_FECHA = re.compile(r'^(\d{1,2})\s+(ENE|FEB|MAR|ABR|MAY|JUN|JUL|AGO|SEP|OCT|NOV|DIC)\b') # plomeria del bloque: identifica la operacion ante el banco, no la describe _BX_RUIDO = re.compile(r'^(CAJA|HORA|SUC|AUT|CLAVE|RASTREO:?|REF\.?|\d{2}:\d{2}|0{4,}|\d{10,})$', re.I) _BX_MES_NOM = {'ENERO': 1, 'FEBRERO': 2, 'MARZO': 3, 'ABRIL': 4, 'MAYO': 5, 'JUNIO': 6, 'JULIO': 7, 'AGOSTO': 8, 'SEPTIEMBRE': 9, 'OCTUBRE': 10, 'NOVIEMBRE': 11, 'DICIEMBRE': 12} def _banamex_periodo(pdf): """(mes_corte, anio_corte) de 'ESTADO DE CUENTA AL DD DE DE AAAA'. Hace falta para fechar bien los periodos que cruzan de anio (ENERO 2026): el 'DE (\\d{4})' anterior podia agarrar cualquier ano suelto del encabezado.""" t = ' '.join((p.extract_text() or '') for p in pdf.pages[:2]).upper() m = re.search(r'AL\s+\d{1,2}\s+DE\s+([A-ZÁÉÍÓÚ]+)\s+DE\s+(\d{4})', t) if m and _BX_MES_NOM.get(m.group(1)): return _BX_MES_NOM[m.group(1)], int(m.group(2)) ys = re.findall(r'\b(20\d{2})\b', t) return None, (int(ys[0]) if ys else 2025) def _banamex(pdf): """Banamex: layout multilinea. Cada movimiento es un BLOQUE que ABRE con la fila 'DD MMM ' y CIERRA con las lineas 'CAJA .. / HORA ..'; el IMPORTE se imprime alineado con esa ULTIMA linea, es decir DEBAJO de su propia fecha y ARRIBA de la fecha del movimiento SIGUIENTE. Por eso la fecha y el concepto se toman del bloque ABIERTO (el ultimo 'DD MMM' visto) y NO del siguiente. La version anterior buscaba la fecha hacia adelante (rows i..i+3), asi que le colgaba a cada importe la fecha y el concepto del movimiento siguiente (prueba semantica sobre los 6 estados: 529 de 1432 quedaban con un concepto de signo contrario al importe), y los importes que caian al inicio de una pagina se quedaban SIN fecha ni concepto (24 de 1531 = $2,420,790.61 en depositos y $713,698.80 en retiros) y el flujo los tiraba en silencio. El bloque ahora se arrastra entre paginas.""" mes_corte, anio = _banamex_periodo(pdf) movs = [] bloque = None # bloque vigente; sobrevive el salto de pagina def _desc(row): return ' '.join(w['text'] for w in row if BANAMEX_DESC[0] <= w['x0'] < BANAMEX_DESC[1] and not MONEY.match(w['text']) and not _BX_RUIDO.match(w['text'])).strip() for page in pdf.pages: words = page.extract_words(use_text_flow=False, keep_blank_chars=False) ups = set(w['text'].upper() for w in words) if not ('DEPOSITOS' in ups and 'RETIROS' in ups and 'SALDO' in ups): continue filas = {} for w in words: filas.setdefault(round(w['top']), []).append(w) hdr = min((round(w['top']) for w in words if w['text'].upper() == 'CONCEPTO'), default=-1) for top in sorted(filas): if top <= hdr: continue # encabezado de la tabla y cabecera de pagina row = sorted(filas[top], key=lambda x: x['x0']) txt = ' '.join(w['text'] for w in row) primer = ''.join(c for c in row[0]['text'].upper() if c.isalpha()) dep = ret = sal = None for w in row: if MONEY.match(w['text']): v = _num(w['text']) if BANAMEX_DEP[0] <= w['x1'] <= BANAMEX_DEP[1]: dep = v elif BANAMEX_RET[0] <= w['x1'] <= BANAMEX_RET[1]: ret = v elif BANAMEX_SAL[0] <= w['x1'] <= BANAMEX_SAL[1]: sal = v # filas de resumen del banco (TOTAL/SALDO MINIMO...) y la fila de # totales (trae deposito Y retiro a la vez): ni movimiento ni concepto. if primer.startswith(('TOTAL', 'SALDO')) or (dep is not None and ret is not None): continue md = _BX_FILA_FECHA.match(txt) if md: bloque = {'dia': int(md.group(1)), 'mes': md.group(2), 'desc': [_desc(row)]} elif bloque is not None: cont = _desc(row) if cont: bloque['desc'].append(cont) if dep is None and ret is None: continue if bloque is None: movs.append({'fecha': '', 'concepto': '', 'deposito': dep, 'retiro': ret, 'saldo': sal}) continue mn = _MESES[bloque['mes']] # el periodo cierra en mes_corte; un mes posterior es del anio anterior yr = anio if (mes_corte is None or mn <= mes_corte) else anio - 1 movs.append({ 'fecha': '%02d-%s-%d' % (bloque['dia'], bloque['mes'], yr), 'concepto': re.sub(r'\s{2,}', ' ', ' '.join(bloque['desc'])).strip()[:220], 'deposito': dep, 'retiro': ret, 'saldo': sal, }) return movs # BBVA: cargos x1~417, abonos x1~458. El encabezado solo aparece en algunas # paginas, asi que se colectan los montos por su X en TODAS las paginas. BBVA_DEP = (454, 462) BBVA_RET = (413, 421) BBVA_PIE = 45 # pt del pie de pagina que NO son tabla (aviso GAT + domicilio # legal). Medido en 84 paginas: la fila real mas baja queda a # 53 pt del fondo y la linea de pie mas alta a 40 pt. BBVA_X_OPER = 60 # x0 maximo de la columna OPER (donde vive la fecha del movimiento) def _bbva_bandas(pages_words): """Detecta las columnas CARGOS/ABONOS de la tabla de detalle de BBVA leyendo el ENCABEZADO (CARGOS + ABONOS + SALDO en el mismo renglon, con SALDO a la derecha). Devuelve (cband, aband). Las bandas FIJAS son fragiles porque cada formato de BBVA mueve las columnas (Libreton cargos~417 vs Pyme cargos~398); el encabezado las da exactas. Fallback a bandas fijas si no hay encabezado.""" from collections import Counter # 1) x1 de TODOS los tokens de dinero del documento (la verdad de las columnas) money_x = [w['x1'] for words in pages_words for w in words if MONEY.match(w['text'])] # 2) pares candidatos (cargo,abono) del encabezado, separacion 35-75 cands = Counter() for words in pages_words: filas = {} for w in words: filas.setdefault(round(w['top']), []).append(w) for top, grp in filas.items(): cxs = [w['x1'] for w in grp if w['text'].upper() == 'CARGOS' and w['x1'] > 340] axs = [w['x1'] for w in grp if w['text'].upper() == 'ABONOS' and w['x1'] > 340] for cx in cxs: for ax in axs: if 35 <= (ax - cx) <= 75: cands[(round(cx, 1), round(ax, 1))] += 1 if cands: # puntua por #tokens de dinero a +-10 px de cada columna; desempata por # las veces que el par aparece como encabezado. def _puntaje(par): cx, ax = par sc = (sum(1 for x in money_x if abs(x - cx) <= 10) + sum(1 for x in money_x if abs(x - ax) <= 10)) return (sc, cands[par]) cx, ax = max(cands, key=_puntaje) if _puntaje((cx, ax))[0] > 0: return (cx - 10, cx + 10), (ax - 10, ax + 10) return BBVA_RET, BBVA_DEP # Libreton u otros: bandas fijas calibradas def _bbva_anio(full): """Extrae (mes->anio) del periodo 'DEL DD/MM/AAAA AL DD/MM/AAAA' para fechar los movimientos (maneja periodos que cruzan anio, p.ej. DIC 2025 / ENE 2026).""" m = re.search(r'DEL\s+\d{1,2}/(\d{2})/(\d{4})\s+AL\s+\d{1,2}/(\d{2})/(\d{4})', full) a = {} if m: m1, y1, m2, y2 = int(m.group(1)), int(m.group(2)), int(m.group(3)), int(m.group(4)) a[m1] = y1 a[m2] = y2 # Meses FUERA del periodo (operacion rezagada que se liquida en este # corte): se fechan hacia ATRAS desde el inicio del periodo, nunca hacia # adelante. Sin esto un '31/DIC' en el estado ENE-FEB 2026 tomaba el anio # por defecto (2026) -> 2026-12-31: un anio de error, y encima fuera de la # ventana de 6 meses de la maqueta. setdefault respeta m1/m2 ya fijados. y, mth = y1, m1 for _ in range(11): mth -= 1 if mth == 0: mth, y = 12, y - 1 a.setdefault(mth, y) ys = re.findall(r'\b(20\d{2})\b', full) return a, (int(ys[0]) if ys else 2025) def _bbva(pdf): """BBVA: extrae cada movimiento POR BLOQUE. Un bloque va de una fila-fecha ('DD/MMM ...') a la siguiente. De cada bloque saca: fecha, monto (banda CARGOS/ABONOS detectada del encabezado) y la DESCRIPCION COMPLETA del bloque (todas las lineas de la columna de descripcion, x0~106-315), que incluye el NOMBRE de la contraparte (p.ej. 'BNET 0478... clara vazquez', 'Kenya Cabrera', 'MARIO GUTIERREZ JIMENEZ' en sus lineas de continuacion). Asi el desglose por persona puede agrupar por el nombre real. Es determinista CON fecha.""" pages_words = [p.extract_words(use_text_flow=False, keep_blank_chars=False) for p in pdf.pages] cband, aband = _bbva_bandas(pages_words) full = ' '.join((p.extract_text() or '') for p in pdf.pages[:2]) mes_anio, anio_def = _bbva_anio(full) fecha_ini = re.compile(r'^(\d{1,2})/([A-Z]{3})$') # 1) todas las filas en orden de pagina/posicion. Se DESCARTA el pie de pagina # (ultimos BBVA_PIE pt): ahi van el aviso GAT y el domicilio legal de BBVA # ('...DE BANCA MULTIPLE, GRUPO FINANCIERO Col. Juarez, Alcaldia # Cuauhtemoc; C.P. 06600...'), cuyas palabras caen en la columna de # descripcion (x0 106-315) y se pegaban al ULTIMO movimiento de cada # pagina: 50 de 686 conceptos contaminados y 23 que perdian el NOMBRE de la # contraparte al pasarse del corte de 220 chars. todas = [] for page, words in zip(pdf.pages, pages_words): lim = page.height - BBVA_PIE filas = {} for w in words: if w['top'] > lim: continue filas.setdefault(round(w['top']), []).append(w) for top in sorted(filas): todas.append(sorted(filas[top], key=lambda x: x['x0'])) # 2) segmentar en bloques por fila-fecha (cada movimiento empieza con DD/MMM) bloques = [] cur = None for row in todas: primer = ''.join(c for c in row[0]['text'].upper() if c.isalpha()) # Fila-resumen del banco ('TOTAL IMPORTE CARGOS/ABONOS', 'Saldo Final') en # el margen izquierdo: marca el FIN de la tabla de detalle. Ademas de # ignorarla hay que CERRAR el bloque abierto; si no, el ultimo movimiento # del estado sigue absorbiendo el texto posterior a la tabla ('Le # informamos que puede consultar... bbva.mx', avisos de privacidad). if primer.startswith(('TOTAL', 'SALDO')) and not (100 < row[0]['x0'] < 300): if cur: bloques.append(cur) cur = None continue md = fecha_ini.match(row[0]['text'].upper()) # La fila-fecha de un movimiento SIEMPRE arranca en la columna OPER # (x0~15-17). Las lineas de detalle imprimen tambien 'DD/MMM hh:mm # AUT:nnnn' pero en la COLUMNA DE DESCRIPCION (x0~106): NO abren # movimiento. Sin este filtro parten en dos el bloque real (11 casos en # los 6 estados) y, si la linea cayera antes del renglon del importe, le # robarian el monto al movimiento. if md and md.group(2) in _MESES and row[0]['x0'] < BBVA_X_OPER: if cur: bloques.append(cur) cur = {'md': md, 'rows': [row]} elif cur: cur['rows'].append(row) if cur: bloques.append(cur) # 3) de cada bloque: monto (primer monto en banda, ignorando filas de total/ # resumen) + descripcion completa (col descripcion, sin montos ni ruido). movs = [] for blk in bloques: md = blk['md'] yr = mes_anio.get(_MESES[md.group(2)], anio_def) fecha = '%02d-%s-%d' % (int(md.group(1)), md.group(2), yr) d = r = None desc = [] for row in blk['rows']: primer = ''.join(c for c in row[0]['text'].upper() if c.isalpha()) # fila resumen del banco (TOTAL IMPORTE/Saldo Anterior/Final) en margen # o caja derecha -> se ignora (montos y texto). El comercio 'TOTAL PLAY' # arranca en la col de descripcion (100 no es movimiento if row_d is not None and row_r is not None: continue if d is None and r is None: if row_d is not None: d = row_d elif row_r is not None: r = row_r if d is None and r is None: continue movs.append({'fecha': fecha, 'concepto': ' '.join(desc)[:220], 'deposito': d, 'retiro': r, 'saldo': None}) return movs # Banorte: tabla con Fecha 'DD-MMM-YY' pegada a la descripcion + columnas # DEPOSITOS x1~417 / RETIROS x1~487 / SALDO x1~560. Trae saldo por fila. BANORTE_DEP = (412, 423) BANORTE_RET = (482, 493) BANORTE_SAL = (554, 566) def _banorte(pdf): """Banorte: una fila = un movimiento. Fecha 'DD-MMM-YY' al inicio (pegada a la descripcion), monto en banda DEPOSITOS/RETIROS y SALDO corrido por fila. Las filas 'SALDO ANTERIOR'/'SIN MOVIMIENTOS' NO traen monto en dep/ret -> se ignoran solas (no se cuelan como movimientos, que es lo que Gemini hacia mal).""" movs = [] fre = re.compile(r'^(\d{2})-([A-Z]{3})-(\d{2})(.*)$') for page in pdf.pages: words = page.extract_words(use_text_flow=False, keep_blank_chars=False) filas = {} for w in words: filas.setdefault(round(w['top']), []).append(w) for top in sorted(filas): row = sorted(filas[top], key=lambda x: x['x0']) md = fre.match(row[0]['text']) if md and md.group(2) in _MESES: fecha = '%s-%s-20%s' % (md.group(1), md.group(2), md.group(3)) dep = ret = sal = None desc = [md.group(4)] if md.group(4) else [] for w in row[1:]: t = w['text'] neg = bool(MONEY_NEG.match(t)) if neg or MONEY.match(t): # Devolucion (DEV.SPEI): Banorte imprime el signo pegado al final # ('8,500.00-') = monto NEGATIVO que NETEA la columna. El '-' extra # ensancha el token: se descuenta su ancho para ubicar la banda. x1 = w['x1'] - (w['x1'] - w['x0']) / len(t) if neg else w['x1'] v = -_num(t[:-1]) if neg else _num(t) if BANORTE_DEP[0] <= x1 <= BANORTE_DEP[1]: dep = v elif BANORTE_RET[0] <= x1 <= BANORTE_RET[1]: ret = v elif BANORTE_SAL[0] <= x1 <= BANORTE_SAL[1]: sal = v elif w['x0'] > 80: desc.append(t) if dep is None and ret is None: continue # SALDO ANTERIOR / SIN MOVIMIENTOS (sin monto) -> ignorar movs.append({'fecha': fecha, 'concepto': ' '.join(desc).strip(), 'deposito': dep, 'retiro': ret, 'saldo': sal}) elif movs and 80 <= row[0]['x0'] <= 130: # continuacion: la descripcion del movimiento sigue en lineas con # sangria (~x0 85): 'DEL CLIENTE ', 'BENEF:', # 'A LA CUENTA: '... Se agrega al ultimo movimiento para que # el desglose por persona pueda sacar el nombre real. cont = ' '.join(w['text'] for w in row if not MONEY.match(w['text']) and not MONEY_NEG.match(w['text'])) if cont: movs[-1]['concepto'] = (movs[-1]['concepto'] + ' ' + cont).strip() for m in movs: m['concepto'] = m['concepto'][:300] return movs # ---- American Express (TARJETA DE CREDITO) -------------------------------- import unicodedata as _ud def _up(s): return ''.join(c for c in _ud.normalize('NFD', s or '') if _ud.category(c) != 'Mn').upper() _MESES_ES = {'ENERO': 1, 'FEBRERO': 2, 'MARZO': 3, 'ABRIL': 4, 'MAYO': 5, 'JUNIO': 6, 'JULIO': 7, 'AGOSTO': 8, 'SEPTIEMBRE': 9, 'OCTUBRE': 10, 'NOVIEMBRE': 11, 'DICIEMBRE': 12} def _amex_anios(t): """mes->anio del periodo de facturacion, para fechar los movimientos. El periodo puede cruzar el anio (p.ej. 'Del 14 deDiciembre al 13 deEnero de2026'): el mes final lleva el anio impreso y el inicial el anio anterior si mes1>mes2.""" a = {} mp = re.search(r'Del\s+\d{1,2}\s*de\s*([A-Za-zÁÉÍÓÚáéíóú]+)\s*al\s*\d{1,2}\s*de\s*' r'([A-Za-zÁÉÍÓÚáéíóú]+)\s*de\s*(\d{4})', t, re.I) if mp: m1 = _MESES_ES.get(_up(mp.group(1))) m2 = _MESES_ES.get(_up(mp.group(2))) y2 = int(mp.group(3)) if m2: a[m2] = y2 if m1: a[m1] = y2 if (m2 and m1 <= m2) else y2 - 1 return a def _amex(pdf, mes_anio): """American Express: cada operacion es una fila 'DD deMES '. CARGO (consumo) = importe SIN marca; ABONO (pago/credito) = importe con marca 'CR'. La 'CR' va en un renglon APARTE, debajo del importe (no en el texto del comercio: 'STARBUCKS OLO CR MEXICO' es CARGO), por eso se detecta por POSICION: una 'CR' cuyo top esta 0-20px debajo del importe y a +-60px de su borde derecho.""" movs = [] anio_def = max(mes_anio.values()) if mes_anio else 2025 fre = re.compile(r'^(\d{1,2})\s*de([A-Za-zÁÉÍÓÚáéíóú]+)') for page in pdf.pages: words = page.extract_words(use_text_flow=False, keep_blank_chars=False) crs = [w for w in words if w['text'].strip() == 'CR'] def es_cr(a): return any(0 < (c['top'] - a['top']) < 20 and abs(c['x1'] - a['x1']) < 60 for c in crs) filas = {} for w in words: filas.setdefault(round(w['top']), []).append(w) for top in sorted(filas): row = sorted(filas[top], key=lambda x: x['x0']) txt = ' '.join(w['text'] for w in row) md = fre.match(txt) if not md: continue mes = _MESES_ES.get(_up(md.group(2))) if not mes: continue ams = [w for w in row if MONEY.match(w['text'])] if not ams: continue a = ams[-1] yr = mes_anio.get(mes, anio_def) fecha = '%04d-%02d-%02d' % (yr, mes, int(md.group(1))) concepto = re.sub(r'^\d{1,2}\s*de[A-Za-zÁÉÍÓÚáéíóú]+\s*', '', txt) concepto = re.sub(r'\s*[\d,]+\.\d{2}(\s*CR)?\s*$', '', concepto).strip() tipo = 'ABONO' if es_cr(a) else 'CARGO' movs.append({'fecha': fecha, 'concepto': concepto[:220], 'importe': _num(a['text']), 'tipo': tipo}) return movs # ---- MONEX ----------------------------------------------------------------- # La tabla de MONEX tiene OCHO columnas y CUATRO de ellas son numericas y # CONTIGUAS: 'Movimiento garantia'(x1~533), 'Saldo en garantia'(x1~609), # 'Saldo disponible'(x1~688) y 'Saldo total'(x1~764). Por eso las bandas se leen # del ENCABEZADO de CADA pagina y no se fijan a mano: la subcuenta en dolares que # MONEX imprime al final del mismo estado usa OTRAS coordenadas (Abonos x1~380 en # vez de ~367, Cargos ~452 en vez de ~447) y encima parte el encabezado en DOS # renglones. _MX_FECHA = re.compile(r'^(\d{1,2})/([A-Za-z]{3})$') # Holgura de banda. Los importes van alineados a la DERECHA exactamente al x1 del # encabezado (medido en MARZO+ABRIL: las 722 celdas de dinero de las columnas # Abonos/Cargos/'Saldo total' dan x1_monto - x1_encabezado = 0.0 pt EXACTO), y la # columna numerica vecina mas cercana esta a 76 pt. _MX_TOL = 8.0 # Hueco vertical minimo que SEPARA dos bloques de movimiento. Medido en # MARZO+ABRIL: dentro del bloque 2.0-9.8 pt, entre bloques 16.8-19.4 pt. _MX_SEP = 13.0 _MX_PERIODO = re.compile( r'PERIODO\s*:?\s*Del\s+(\d{1,2})\s+([A-Za-zÁÉÍÓÚáéíóú]+)\s+(\d{4})\s+al\s+' r'(\d{1,2})\s+([A-Za-zÁÉÍÓÚáéíóú]+)\s+(\d{4})', re.I) # Ruido de plomeria del bloque: identifica la operacion ante el banco pero no # describe el movimiento ni aporta el NOMBRE de la contraparte. Se quita SOLO la # etiqueta con su valor numerico, nunca texto con nombres. _MX_RUIDO = [ re.compile(r'Clave\s+de\s+Rastreo\s*:?\s*[\w/]*', re.I), re.compile(r'Referencia\s+Numerica\s*:?\s*\d*', re.I), re.compile(r'Cuenta\s+(?:beneficiaria|ordenante)\s*:?\s*\d*', re.I), re.compile(r'Fecha\s+Confirmaci\w*\s*n?\s*de\s+[Ll]iquidaci\w*\s*n?\s*:?\s*' r'[\d\-]*\s*[\d:]*', re.I), re.compile(r'Dato\s+no\s+verificado\s+por\s+esta\s+institu\S*', re.I), re.compile(r'Email:\S+', re.I), re.compile(r'\b\d{15,}\b'), ] def _monex_periodo(pdf): """mes->anio del PERIODO de la hoja 1 ('PERIODO: Del 1 Marzo 2026 al 31 marzo 2026'): meses en ESPANOL y con mayuscula inconsistente, y sin anio en la fecha de cada movimiento ('02/Mar'). Los meses FUERA del periodo se fechan hacia ATRAS desde su inicio (igual que en BBVA), para que una operacion rezagada de diciembre dentro del estado de enero no se vaya al anio SIGUIENTE.""" t = ' '.join((p.extract_text() or '') for p in pdf.pages[:3]) a = {} y1 = None m = _MX_PERIODO.search(t) if m: m1, y1 = _MESES_ES.get(_up(m.group(2))), int(m.group(3)) m2, y2 = _MESES_ES.get(_up(m.group(5))), int(m.group(6)) if m2: a[m2] = y2 if m1: a[m1] = y1 y, mth = y1, m1 for _ in range(11): mth -= 1 if mth == 0: mth, y = 12, y - 1 a.setdefault(mth, y) else: # respaldo: 'Peso Mexicano al 31 Marzo 2026' del resumen de la hoja 2 m2 = re.search(r'\bal\s+\d{1,2}\s+([A-Za-zÁÉÍÓÚáéíóú]+)\s+(\d{4})', t, re.I) if m2 and _MESES_ES.get(_up(m2.group(1))): y1 = int(m2.group(2)) a[_MESES_ES[_up(m2.group(1))]] = y1 ys = re.findall(r'\b(20\d{2})\b', t) return a, (y1 or (int(ys[0]) if ys else 2025)) def _monex_hdr(words): """Encabezado de la tabla de movimientos -> (bandas, zonas, top_fin), o None si la pagina no es de la tabla. Se exige la firma COMPLETA (Descripcion + Referencia + Abonos + Cargos + 'Saldo total'): la hoja del 'Resumen Divisas' tambien trae las palabras 'Abonos', 'Cargos' y 'Saldo total:', y con una puerta laxa se colaria. Como se distingue 'Saldo total'(x1~764) de las otras tres columnas numericas contiguas: por su ETIQUETA COMPLETA, no por su posicion. La etiqueta se reconstruye a partir del par de palabras SALDO + TOTAL, aceptando las dos formas en que MONEX la imprime -- CONTIGUAS en el mismo renglon ('Saldo'@723/745 + 'total'@747/764, hueco 1.9 pt) o APILADAS en dos renglones con las cajas solapadas en x ('Saldo'@742/763 arriba, 'total'@746/763 abajo, en la tabla en dolares). Al exigir que la 2a palabra sea literalmente 'total', 'Saldo disponible'(688), 'Saldo en garantia'(609) y 'Movimiento garantia'(533) quedan descartadas aunque esten pegadas.""" anc = [w for w in words if _up(w['text']).rstrip(':') == 'DESCRIPCION' and w['x0'] < 220] if not anc: return None desc = anc[0] hdr = [w for w in words if abs(w['top'] - desc['top']) <= 18] def uno(nombre): c = [w for w in hdr if _up(w['text']) == nombre] return c[0] if c else None ref, ab, ca = uno('REFERENCIA'), uno('ABONOS'), uno('CARGOS') if not (ref and ab and ca): return None sal = None for t in [w for w in hdr if _up(w['text']) == 'TOTAL']: for s in [w for w in hdr if _up(w['text']) == 'SALDO']: contiguo = abs(s['top'] - t['top']) <= 2 and 0 <= (t['x0'] - s['x1']) <= 3.5 apilado = (abs(s['top'] - t['top']) > 2 and min(s['x1'], t['x1']) > max(s['x0'], t['x0'])) if contiguo or apilado: x1 = max(s['x1'], t['x1']) sal = x1 if sal is None else max(sal, x1) if sal is None: return None bandas = {'dep': ab['x1'], 'ret': ca['x1'], 'sal': sal} # zonas en x: DESCRIPCION va del inicio de su encabezado al de 'Referencia'; # la FECHA vive a la izquierda de la descripcion ('Fechas Liquidacion # (Pactada)', x0~30). zonas = {'d0': desc['x0'] - 4, 'd1': ref['x0'] - 2, 'f1': desc['x0'] - 6} return bandas, zonas, max(w['top'] for w in hdr) + 3 def _monex(pdf): """MONEX: layout multilinea con la fila del IMPORTE en MEDIO del bloque de descripcion (hay lineas de descripcion ANTES y DESPUES), la fecha EN LA MISMA fila que los importes, y bloques que CRUZAN de pagina. Tres trampas propias de MONEX: 1) Abonos Y Cargos se imprimen LOS DOS en cada fila (uno en '0.00'), asi que la regla de los otros bancos ('trae deposito Y retiro a la vez -> es fila de totales, ignorar') borraria TODOS los movimientos. Aqui un movimiento real es abonos>0 XOR cargos>0. Las filas 0.00/0.00 (deposito de intereses que el ISR netea el mismo dia) no mueven el saldo y no son movimiento. 2) El estado trae al final una SUBCUENTA EN DOLARES con la MISMA tabla y otras coordenadas. Se corta la lectura al cerrar la cuenta en pesos. 3) La fecha viene 'DD/Mmm' SIN anio (ver _monex_periodo). """ mes_anio, anio_def = _monex_periodo(pdf) filas = [] # (ipag, top, row, bandas, zonas) for ip, page in enumerate(pdf.pages): words = page.extract_words(use_text_flow=False, keep_blank_chars=False) if not words: continue T = _up(' '.join(w['text'] for w in words)) # La cuenta en PESOS es la PRIMERA del estado. Un segundo bloque 'Resumen # cuenta' o un titulo 'Movimientos de EN ' despues de haber # empezado a leer movimientos = SUBCUENTA EN OTRA DIVISA (MONEX cierra el # estado con 'dolar americano': misma tabla, importes en USD, y su propia # cadena de saldos que arranca otra vez desde su saldo inicial). Sumarla # contaminaria los totales en pesos. if filas and (re.search(r'RESUMEN\s+CUENTA', T) or re.search(r'MOVIMIENTOS\s+DE\s+\w+\s+EN\s+\S', T)): break h = _monex_hdr(words) if not h: continue bandas, zonas, hdr_fin = h pw = {} for w in words: if w['top'] > hdr_fin: pw.setdefault(round(w['top'], 1), []).append(w) fin_tabla = False for top in sorted(pw): row = sorted(pw[top], key=lambda x: x['x0']) # Etiquetas de la propia tabla, impresas en la ZONA DE COLUMNAS # NUMERICAS (a la derecha de la descripcion): no son movimiento ni # descripcion. 'Saldo final:' CIERRA la tabla de la cuenta en pesos. etiq = _up(' '.join(w['text'] for w in row if w['x0'] >= zonas['d1'] and not MONEY.match(w['text']))) if etiq.startswith(('SALDO FINAL', 'TOTAL')): fin_tabla = True break if etiq.startswith('SALDO INICIAL') or etiq.startswith('HOJA'): continue # fila de apertura y pie de pagina 'Hoja N de M' filas.append((ip, top, row, bandas, zonas)) if fin_tabla: break # 1) filas de IMPORTE: fecha 'DD/Mmm' en la columna de fechas + monto en la # banda Abonos o Cargos. Se guarda tambien el 'Saldo total' de la fila. imp = {} for i, (_ip, _top, row, bandas, zonas) in enumerate(filas): fk = None for w in row: if w['x0'] < zonas['f1']: fk = fk or _MX_FECHA.match(w['text']) if not fk or _up(fk.group(2)) not in _MESES: continue d = r = s = None for w in row: if not MONEY.match(w['text']): continue v = _num(w['text']) if abs(w['x1'] - bandas['dep']) <= _MX_TOL: d = v elif abs(w['x1'] - bandas['ret']) <= _MX_TOL: r = v elif abs(w['x1'] - bandas['sal']) <= _MX_TOL: s = v if d is None and r is None: continue imp[i] = (fk, d or 0.0, r or 0.0, s) # 2) reparto de las lineas de DESCRIPCION entre filas de importe consecutivas. # El corte va en el HUECO VERTICAL MAS GRANDE que hay entre las dos: dentro # de un bloque el interlineado es 9.8 pt (y 2-7 pt alrededor de la fila del # importe, que MONEX centra en el bloque) y entre bloques 16.8-19.4 pt # (medido en los 160 pares de filas de importe que caen en la misma hoja de # MARZO+ABRIL: intra-bloque max 9.8, separador min 16.8). # El bloque CRUZA de pagina (medido: el bloque de MARZO hoja 3 top=554 # sigue con 10 renglones al inicio de la hoja 4), asi que un salto de # pagina NO es corte por si mismo. Pero cuando el bloque siguiente ARRANCA # justo en la primera fila de la hoja no hay hueco separador que encontrar: # si el mayor hueco de las dos hojas se queda por debajo de _MX_SEP, el # corte ES el salto de pagina (sin esto, el ultimo movimiento de la hoja se # quedaba con la primera linea del bloque siguiente). idx = sorted(imp) corte = {} for a, b in zip(idx, idx[1:]): mejor = (-1.0, None) salto = None for j in range(a, b): if filas[j][0] != filas[j + 1][0]: salto = j # ultima fila antes de cambiar de hoja continue hueco = filas[j + 1][1] - filas[j][1] if hueco > mejor[0]: mejor = (hueco, j) if mejor[0] >= _MX_SEP or salto is None: corte[a] = mejor[1] if mejor[1] is not None else a else: corte[a] = salto movs = [] for k, i in enumerate(idx): ini = corte[idx[k - 1]] + 1 if k else 0 fin = corte[i] if k + 1 < len(idx) else len(filas) - 1 fk, d, r, s = imp[i] if (d > 0) == (r > 0): continue # 0.00/0.00 (intereses neteados por el ISR el mismo dia) # La descripcion sale de la COLUMNA DE DESCRIPCION (x0 entre el inicio de # su encabezado y el de 'Referencia', ~104-240). No hace falta filtrar # tokens con formato de dinero: la columna numerica mas a la izquierda # (Abonos) arranca en x0>=325, asi que nada de ahi cae en la banda, y en # cambio si aparecen importes que SON parte del texto ('Compra de divisas # 5.80 USD a un tipo de cambio de 18.1235'). desc = [] for j in range(ini, fin + 1): z = filas[j][4] for w in filas[j][2]: if z['d0'] <= w['x0'] < z['d1']: desc.append(w['text']) txt = re.sub(r'\s{2,}', ' ', ' '.join(desc)) for rx in _MX_RUIDO: txt = rx.sub(' ', txt) txt = re.sub(r'\s{2,}', ' ', txt).strip(' ,;:') mnum = _MESES[_up(fk.group(2))] movs.append({ 'fecha': '%02d-%s-%d' % (int(fk.group(1)), _up(fk.group(2)), mes_anio.get(mnum, anio_def)), 'concepto': txt[:220], 'deposito': d if d > 0 else None, 'retiro': r if r > 0 else None, 'saldo': s, }) return movs # ---- HSBC ------------------------------------------------------------------- # HSBC imprime DOS veces los mismos importes: en 'DETALLE MOVIMIENTOS CUENTA DE # CHEQUES' (la contabilidad real) y otra vez en las tablas informativas # "Informacion SPEI's Enviados/Recibidos durante el periodo", que repiten cada # transferencia con su 'Monto del pago'. Leer las dos DUPLICA los importes: es # exactamente lo que hacia Gemini. Aqui se extrae SOLO el DETALLE, cortando la # seccion en cuanto aparece cualquier otro bloque. _HSBC_PERIODO = re.compile( r'Per[ií]odo\s*del\s*(\d{2})/(\d{2})/(\d{4})\s*al\s*(\d{2})/(\d{2})/(\d{4})', re.I) # Encabezado de la tabla de movimientos. Coordenadas medidas identicas en los 6 # estados: Retiro/Cargo x1=397.0, Deposito/Abono x1=481.4, Saldo x1=549.1. Las # etiquetas van CENTRADAS sobre su columna y los importes ALINEADOS A LA DERECHA, # asi que el offset etiqueta->importe no es constante (+4 en cargo, -9 en abono, # +16 en saldo): de ahi la tolerancia amplia. Las columnas estan a 68-84 pt entre # si, asi que +-22 no puede solaparlas. _HSBC_TOL = 22.0 # Todo lo que CIERRA la seccion de movimientos. # Encabezados de OTRAS secciones. Se ancla al INICIO de la fila y solo se evalua # en filas que NO son movimiento: la palabra 'SPEI' aparece dentro de la # descripcion de muchos movimientos legitimos ('CGO SPEI NOMINA 15FEB26'), asi # que buscarla en cualquier parte cortaba la tabla en el primer movimiento SPEI. _HSBC_FIN = re.compile( r'^(Informaci[oó]n|Emitido\s+por|RESUMEN|CIFRAS\s+EXPRESADAS|Estimado|' r'Otros\s+Datos|Tus\s+Movimientos|Comisiones\s+Cobradas)', re.I) def _hsbc_periodo(pdf): """(mes, anio) del periodo del estado. El detalle solo trae el DIA.""" t = '' for pg in pdf.pages[:2]: t += (pg.extract_text() or '') m = _HSBC_PERIODO.search(t) if m: return int(m.group(2)), int(m.group(3)) return None, None def _hsbc_hdr(filas, tops): """(top, bandas) del encabezado del DETALLE en esta pagina, o None.""" for top in tops: tx = {w['text']: w for w in filas[top]} if 'Retiro/Cargo' in tx and 'Depósito/Abono' in tx: sal = None for w in filas[top]: if w['text'] == 'Saldo' and w['x1'] > 500: sal = w['x1'] b = {'ret': tx['Retiro/Cargo']['x1'], 'dep': tx['Depósito/Abono']['x1']} if sal is not None: b['sal'] = sal return top, b return None def _hsbc(pdf): """HSBC: una fila = un movimiento. La columna 'Dia' trae SOLO el dia (el mes y el anio salen del periodo). Columnas Retiro/Cargo, Deposito/Abono y Saldo alineadas a la derecha. Las lineas siguientes sin dia son continuacion de la descripcion o de la referencia.""" mes, anio = _hsbc_periodo(pdf) movs = [] for page in pdf.pages: words = page.extract_words(use_text_flow=False, keep_blank_chars=False) filas = {} for w in words: filas.setdefault(round(w['top']), []).append(w) tops = sorted(filas) h = _hsbc_hdr(filas, tops) if not h: continue hdr_top, banda = h def col(x1): for nom in ('ret', 'dep', 'sal'): if nom in banda and abs(x1 - banda[nom]) <= _HSBC_TOL: return nom return None for top in tops: if top <= hdr_top + 2: continue row = sorted(filas[top], key=lambda z: z['x0']) txt = ' '.join(w['text'] for w in row) ret = dep = sal = None for w in row: if MONEY.match(w['text']): c = col(w['x1']) if c == 'ret': ret = _num(w['text']) elif c == 'dep': dep = _num(w['text']) elif c == 'sal': sal = _num(w['text']) # descripcion: entre la columna del dia y la de Referencia/Serial desc = ' '.join(w['text'] for w in row if 60 < w['x0'] < 310 and not MONEY.match(w['text'])) # dia: primer token, 1-2 digitos, en la columna de la izquierda md = re.fullmatch(r'(\d{1,2})', row[0]['text']) es_mov = bool(md) and row[0]['x1'] <= 60 and (ret is not None or dep is not None) if es_mov: fecha = ('%02d-%s-%d' % (int(md.group(1)), _MES_ABBR[mes], anio) if mes else '') movs.append({'fecha': fecha, 'concepto': desc.strip(), 'deposito': dep, 'retiro': ret, 'saldo': sal}) elif _HSBC_FIN.match(txt.strip()): break # arranca otra seccion: se cierra el DETALLE elif movs and desc.strip(): movs[-1]['concepto'] = (movs[-1]['concepto'] + ' ' + desc.strip()).strip() for m in movs: m['concepto'] = m['concepto'][:220] return movs def extraer(path): import pdfplumber rep = tb.extraer(path) banco = rep['banco'] moneda = rep.get('moneda', 'MXN') # 'USD' si la cuenta es en dolares (BBVA USD) if banco == 'AMEX': # TARJETA DE CREDITO -> bloque aparte: clasifica cargos (consumo) vs abonos # (pagos/creditos) y valida cada suma contra el resumen del banco. with pdfplumber.open(path) as pdf: t_full = '\n'.join((p.extract_text() or '') for p in pdf.pages[:2]) movs = _amex(pdf, _amex_anios(t_full)) sum_car = round(sum(m['importe'] for m in movs if m['tipo'] == 'CARGO'), 2) sum_abo = round(sum(m['importe'] for m in movs if m['tipo'] == 'ABONO'), 2) rep_car, rep_abo = rep.get('cargos'), rep.get('pagos_creditos') cuadra = (rep_car is not None and rep_abo is not None and abs(sum_car - rep_car) <= 1.0 and abs(sum_abo - rep_abo) <= 1.0) tx = [{'fecha': m['fecha'], 'descripcion': m['concepto'], 'cargos': m['importe'] if m['tipo'] == 'CARGO' else None, 'abonos': m['importe'] if m['tipo'] == 'ABONO' else None, 'saldo': None, 'moneda': moneda, 'tipo': m['tipo']} for m in movs] return { 'banco': 'AMEX', 'tipo': 'TARJETA_CREDITO', 'moneda': moneda, 'ok': bool(cuadra), 'cuadra': bool(cuadra), 'suma_cargos': sum_car, 'suma_abonos': sum_abo, 'rep_cargos': rep_car, 'rep_abonos': rep_abo, 'suma_dep': sum_abo, 'suma_ret': sum_car, # alias esquema banco 'rep_dep': rep_abo, 'rep_ret': rep_car, # alias esquema banco 'tarjeta': rep, # resumen completo de la tarjeta 'n': len(movs), 'transacciones': tx, } bandas = BANDAS.get(banco) with pdfplumber.open(path) as pdf: if banco == 'BANAMEX': movs = _banamex(pdf) elif banco == 'BBVA': movs = _bbva(pdf) elif banco == 'BANORTE': movs = _banorte(pdf) elif banco == 'MONEX': movs = _monex(pdf) elif banco == 'HSBC': movs = _hsbc(pdf) elif bandas: movs = _por_bandas(pdf, bandas) # Santander (bandas fijas) else: movs = [] suma_dep = round(sum(m['deposito'] or 0 for m in movs), 2) suma_ret = round(sum(m['retiro'] or 0 for m in movs), 2) rd, rr = rep['depositos'], rep['retiros'] cuadra = (rd is not None and rr is not None and abs(suma_dep - rd) <= 1.0 and abs(suma_ret - rr) <= 1.0) # CUADRE POR CADENA DE SALDOS (respaldo). Algunos bancos NETEAN en sus totales # de cabecera un par de movimientos que si movieron el saldo. Caso medido: # HSBC FEBRERO trae la comision de administracion (599.00 + IVA 95.84) y la # BONIFICACION de la del mes anterior (599.00 + 95.84); HSBC las cancela entre # si y no las cuenta ni en 'Depositos/Abonos' ni en 'Retiros/Cargos', asi que # nuestra suma queda +694.84 de CADA lado. Los 34 movimientos son reales: la # cadena de saldos impresa los confirma uno por uno. # # Solo se acepta con las TRES condiciones a la vez, que juntas son mas fuertes # que el cuadre de sumas: (1) el banco imprime saldo en >=90% de los # movimientos y TODOS coinciden con el acumulado, (2) el saldo final calculado # cae exacto en el que reporta el banco, y (3) la diferencia es la MISMA en # depositos y en retiros (neteo, no dinero perdido ni inventado). Un movimiento # duplicado rompe la cadena y uno faltante rompe el saldo final, asi que esto # no puede enmascarar los defectos que la compuerta existe para atrapar. cuadra_saldo = False si0, sf0 = rep.get('saldo_inicial'), rep.get('saldo_final') if (not cuadra and rd is not None and rr is not None and si0 is not None and sf0 is not None and movs): con_saldo = [m for m in movs if m.get('saldo') is not None] if len(con_saldo) >= 0.9 * len(movs): acc, mal = si0, 0 for m in movs: acc = round(acc + (m['deposito'] or 0) - (m['retiro'] or 0), 2) if m.get('saldo') is not None and abs(acc - m['saldo']) > 0.01: mal += 1 simetrico = abs((suma_dep - rd) - (suma_ret - rr)) <= 0.01 if mal == 0 and abs(acc - sf0) <= 0.01 and simetrico: cuadra_saldo = True cuadra = cuadra or cuadra_saldo # transacciones en el FORMATO que consume el flujo (igual que Gemini): # fecha YYYY-MM-DD, descripcion, cargos(retiro), abonos(deposito), saldo, moneda tx_flujo = [] for m in movs: tx_flujo.append({ 'fecha': _fecha_iso(m['fecha']), 'descripcion': m['concepto'], 'cargos': m['retiro'], 'abonos': m['deposito'], 'saldo': m['saldo'], 'moneda': moneda, }) return { 'banco': banco, 'moneda': moneda, 'ok': bool(cuadra), 'cuadra': bool(cuadra), 'suma_dep': suma_dep, 'suma_ret': suma_ret, 'rep_dep': rd, 'rep_ret': rr, 'saldo_inicial': rep.get('saldo_inicial'), 'saldo_final': rep.get('saldo_final'), 'cuadra_por_saldo': bool(cuadra_saldo), 'n': len(movs), 'transacciones': tx_flujo, } def main(): if len(sys.argv) < 2: print(json.dumps({'error': 'Uso: extraer_movimientos.py ', 'ok': False})) sys.exit(1) try: r = extraer(sys.argv[1]) print(json.dumps(r, ensure_ascii=False)) except Exception as e: print(json.dumps({'error': str(e), 'ok': False})) sys.exit(1) if __name__ == '__main__': main()