Automatización de datos y sistemas de generación de leads
Plataformas de datos y operación de scrapers para generación de leads B2B, enriquecimiento, deduplicación e informes.
300+ tareas • 11 participantes
Reto
Los scrapers tenían que mantener utilizables 7M+ registros pese a cambios en los sitios objetivo, caídas de proxies, migraciones y sincronizaciones con el CRM.
Resultado
Procesé 7M+ registros y 1M+ leads B2B para el mercado DACH.
Mi aportación
Coordiné la estabilidad de los scrapers y las correcciones de calidad de datos a través de migraciones de AWS y servidores, actualizaciones de bases de datos y enriquecimiento de CRM. Gestioné los traspasos al cliente y los informes de los flujos de recogida y sincronización.
Qué se entregó
- Pipelines que extrajeron 7M+ registros y procesaron 1M+ leads B2B
- Enriquecimiento y deduplicación en el CRM, sincronizados con Pipedrive
- Informes en Looker Studio
- Superaron migraciones de servidores y traspasos repetidos al cliente
- Gestión de cuentas de origen y listas de bloqueo para que la flota sobreviviera a cambios en sitios y accesos
Equipo de entrega
Equipo: 5 backend, 2 frontend, 2 UI/UX, 1 DevOps, 1 QA.
Tecnologías
- Python
- Django
- AWS
- nginx
- Docker
- SQL
- web scraping
- sincronización de bases de datos
- exportaciones CSV
- Pipedrive
- Looker Studio