Парсинг сайта снакомств

  • Опубликовано 3 года назад
  • Просмотры 5
  • Закончить проект

Описание

Нужно написать парсер для собирания фоток с профилей юзеров с сайта/приложения знакомств
Парсер должен проходить по профилям и сохранять все фотографии в определённом формате
#Country#-# UniqueID #-#Name #-#Age#-#PhotoNum#
или по папкам
#Country#/# UniqueID #-#Name #-#Age#-#PhotoNum#
Надо будет держать БД для сохранения скачанных профилей, что бы не парсить дважды
Проблемы, которые могут возникнуть:
• Сайты/приложения работают по геолокации. Надо понять как менять геолокацию в браузере что бы просматривать профили по странам
• Возможно возникнут блокировки, типа ввода каптчи и надо будет обходить
• Возможно наши юзеры/аккаунты будут блочить или попадать под лимиты, надо будет искать решение, или понять лимиты сайта по к-ву просмотров
Проект надо не только разработать, но и поддерживать в процессе парсинга
Нам могут понадобиться телефонные номера для смс верификаций и может прокси для геолакации
Возможно стоит его вести на удалённой машине, что бы у нас был совместный доступ, для контроля и дебагинга
Для поддержки проекта, сможем договориться о по-часовой оплате
Предложите вашу цену для создания проекта, и для подержания на плаву
Доп. Расходы обсудим отдельно

Опубликовано 3 года назад