Встретил на профи.ру такое ТЗ: Парсинг сайтов недвижимости в лиды Битрикс 24.

Спарсить: контакты, объявления, цены.
При появлении нового подходящего по требованиям объявления на рекламной площадке (Авито, Циан) ,сравнить с базой, добавить лид в Битрикс 24 (если это не дубль).

Условия :

1. тип контакта=собственник,
2. создано сегодня,
3. СПБ и ЛО,
4. Тип квартиры: квартиры, комнаты, апартаменты.

Параметры для передачи в Битрикс :

• ссылка на объявление,
• адрес,
• телефон,
• описание,
• цена ,
• общая площадь квартиры,
• этаж,
• этажность,
• источник

До передачи в crm сравниваем потенциальный Лид с лидами с другой площадки для выявления дублей: по адресу, стоимости (+/- ? тыс. руб), этажу, общей площади.

Ранее загруженные в базу лиды добавляем повторно только через месяц и при забракованных статусах Лида в срм (стадии уточним в ходе работы).

Бюджет — до 40000 руб.