от25,3 USDT2 д.
Автоматизация сбора данных: веб-скрапинг, парсинг PDF и десктопных приложений
О услуге
Разрабатываю под ключ инструменты автоматизации и сбора данных на Python. Полный цикл: от анализа вашей задачи до рабочего скрипта, который можно запускать без моего участия.
В услугу входит:
Анализ источника данных (сайт, десктопная программа, PDF, Excel) и подбор оптимального инструмента.
Написание кода с обработкой ошибок, логированием и системой чекпоинтов (если скрипт упадёт на середине — продолжит с места остановки, а не начнёт сначала).
Сохранение результата в удобном вам формате: Excel, JSON, CSV, PDF, LaTeX или прямая выгрузка в вашу CRM/БД.
Инструкция по запуску и краткая документация.
7 дней бесплатных правок после сдачи.
Что я делаю чаще всего:
Парсинг сайтов с антибот-защитой (Cloudflare, капчи, динамический JS).
Автоматизация десктопных программ, у которых нет API (1С, PROSIS, закрытые клиенты вендоров).
Извлечение данных из «кривых» PDF-документов: таблицы без границ, сканы, многостраничные мануалы.
Построение ETL-пайплайнов: сбор → очистка → нормализация → выгрузка в отчёт.
Опыт:
3 года коммерческой разработки. За это время сделал 20+ работающих инструментов для одного крупного заказчика — дистрибьютора спецтехники. Скрипты ежедневно собирают каталоги запчастей и сервисную документацию у 6 мировых вендоров: Caterpillar, Volvo, Komatsu, JCB, CNH Industrial (Case/New Holland/Steyr).
Параллельно разрабатывал парсеры маркетплейсов оборудования (TractorHouse, MachineryTrader) — сбор миллионов лотов с параллельной загрузкой изображений и выгрузкой в Excel.
Все инструменты работают в продакшене годами, а не «один раз показали и забыли».
Чем я отличаюсь от других исполнителей:
Делаю скрипты, которые не падают. В моих проектах заложены многоуровневые чекпоинты, retry-логика и валидация файлов. Если отвалится интернет, сядет сервер или сайт поменяет вёрстку — скрипт корректно восстановится, а не потеряет 8 часов работы.
Берусь за то, от чего отказываются другие. GUI без API, PDF без структуры, сайты с жёсткой антибот-защитой, legacy-приложения 10-летней давности. Там, где стандартный requests + BeautifulSoup бессилен, я использую связку pywinauto + OpenCV + OCR или Playwright + stealth + прокси.
Думаю о бизнес-задаче, а не о коде. Перед стартом всегда уточняю, зачем вам данные и кто будет ими пользоваться. Часто оказывается, что вместо сложного парсинга задачу решает проще — например, прямой SQL-запрос или API, о котором заказчик не знал.
Работаю автономно. 3 года веду проект удалённо, без ежедневных созвонов и микроменеджмента. Сам разбираюсь в чужом интерфейсе, сам нахожу обходные пути, сам сдаю рабочий результат.
Честно оцениваю сроки и риски. Если задача технически невозможна или находится в серой правовой зоне (например, сбор персональных данных без согласия) — скажу об этом сразу, до того как возьму предоплату.
Если у вас рутинная задача по сбору, обработке или переносу данных — напишите кратко, что нужно сделать. Отвечу, берусь ли, в какие сроки и какой результат вы получите.
Что нужно от вас: ✅ Ссылка на целевой сайт или название программы. ✅ Список данных для сбора (какие именно поля/файлы нужны). ✅ Пример желаемого результата (скриншот или пустой шаблон Excel). ✅ Доступы (логин/пароль), если сайт требует авторизации. ✅ Информация о защите (если знаете, что есть капча, Cloudflare или блокировки).
- Исходный код
- Документация
- Интеграция с API
- Сопровождение
- Система чек поинтов (Checkpoint/Restore)
Python