Кейс
Автоматизація даних і лідогенерація
Платформи даних і scraper operations для B2B-лідогенерації, збагачення, дедуплікації та звітності.
300+ завдань • 11 учасників
Завдання
Скрапери мали утримувати 7 млн+ записів придатними попри зміни сайтів-джерел, збої проксі, міграції та синхронізацію з CRM.
Результат
Оброблено 7 млн+ записів і 1 млн+ B2B-лідів для ринку DACH.
Склад команди: 5 бекенд, 2 фронтенд, 2 UI/UX, 1 DevOps, 1 QA.
Мій внесок
Координував стабільність скраперів, виправлення якості даних, міграції AWS/серверів, оновлення баз даних, передачі клієнтам і процеси звітності.
Що випущено
- Потоки даних, що зібрали 7 млн+ записів і обробили 1 млн+ B2B-лідів
- Збагачення й дедуплікація CRM із синхронізацією до Pipedrive
- Звітність у Looker Studio
- Пережили міграції серверів і неодноразові передачі клієнтам
Стек
- Python
- Django
- AWS
- nginx
- Docker
- SQL
- вебскрапінг
- синхронізація БД
- CSV-експорти
- Pipedrive
- Looker Studio