Техническое задание: Парсинг Яндекс Карт

Цель задачи

Разработать или использовать готовый инструмент для парсинга данных с картографического сервиса. Извлечь из базы данные о компаниях, соответствующих заданным критериям поиска.

Список поисковых запросов

Для поиска необходимо последовательно использовать следующий перечень ключевых фраз:

• карьер песка
• карьер щебня
• перевалка
• база песка
• нерудные материалы
• сыпучие материалы
• песок навалом
• щебень навалом

География поиска

Поиск организаций осуществляется в строго указанном регионе: Москва и Московская область.

Важные требования к парсингу

1. Определение границ. Парсер должен обрабатывать данные только в пределах административных границ указанных населенных пунктов.
2. Глубина поиска. Необходимо извлечь все записи (точки на карте), которые появляются по заданным запросам в этих границах. Данные не должны ограничиваться только списком результатов стандартной строки поиска на самой карте.
3. Игнорирование ограничений. Стандартный поиск Яндекс.Карт имеет алгоритмические ограничения. Решение должно обходить их для получения полных списков.

Данные к извлечению

По каждой организации (фирме) в результатах выдачи необходимо сохранить имя (заголовок организации) и адрес. Данные по телефону, названию и сайту собирать не нужно.

Пример списка собираемой информации:

• Имя компании (титл): [скрыто по заданию]
• Телефон: [исключить сбора]
• Сайт: [исключить сбора]