{ "version": "https:\/\/jsonfeed.org\/version\/1", "title": "Евгений Лукин: заметки с тегом Парсинг", "_rss_description": "Заметки, конспекты", "_rss_language": "ru", "_itunes_email": "", "_itunes_categories_xml": "", "_itunes_image": "", "_itunes_explicit": "", "home_page_url": "https:\/\/evgenylukin.ru\/blog\/tags\/parsing\/", "feed_url": "https:\/\/evgenylukin.ru\/blog\/tags\/parsing\/json\/", "icon": "https:\/\/evgenylukin.ru\/blog\/user\/userpic@2x.jpg?1601030084", "author": { "name": "Евгений Лукин", "url": "https:\/\/evgenylukin.ru\/blog\/", "avatar": "https:\/\/evgenylukin.ru\/blog\/user\/userpic@2x.jpg?1601030084" }, "items": [ { "id": "100", "url": "https:\/\/evgenylukin.ru\/blog\/all\/pydoll-async-web-automation-in-python\/", "title": "🚀 Pydoll: Async Web Automation in Python!", "content_html": "

https:\/\/github.com\/autoscrape-labs\/pydoll<\/a><\/p>\n

🔥 Installation<\/p>\n

pip install pydoll-python<\/code><\/pre>
⚡ Quick Start
\nGet started with just a few lines of code:<\/p>\n
import asyncio\r\nfrom pydoll.browser.chrome import Chrome\r\nfrom pydoll.constants import By\r\n\r\nasync def main():\r\n    async with Chrome() as browser:\r\n        await browser.start()\r\n        page = await browser.get_page()\r\n        \r\n        # Works with captcha-protected sites\r\n        await page.go_to('https:\/\/example-with-cloudflare.com')\r\n        button = await page.find_element(By.CSS_SELECTOR, 'button')\r\n        await button.click()\r\n\r\nasyncio.run(main())<\/code><\/pre>",
            "date_published": "2025-03-27T20:39:41+03:00",
            "date_modified": "2025-03-27T20:39:37+03:00",
            "_date_published_rfc2822": "Thu, 27 Mar 2025 20:39:41 +0300",
            "_rss_guid_is_permalink": "false",
            "_rss_guid": "100",
            "_e2_data": {
                "is_favourite": false,
                "links_required": [
                    "system\/library\/highlight\/highlight.js",
                    "system\/library\/highlight\/highlight.css"
                ],
                "og_images": []
            }
        },
        {
            "id": "82",
            "url": "https:\/\/evgenylukin.ru\/blog\/all\/pro-portfolio-parsinga\/",
            "title": "Про портфолио парсинга",
            "content_html": "
Большинство из клиентов, у кого внедряли решения парсинга конкурентов предпочитают оставаться в тени, считая это своим преимуществом — поэтому здесь далеко не все из реализованных проектов.<\/p>\n",
            "date_published": "2022-06-15T15:11:50+03:00",
            "date_modified": "2022-06-15T15:11:46+03:00",
            "_date_published_rfc2822": "Wed, 15 Jun 2022 15:11:50 +0300",
            "_rss_guid_is_permalink": "false",
            "_rss_guid": "82",
            "_e2_data": {
                "is_favourite": false,
                "links_required": [],
                "og_images": []
            }
        },
        {
            "id": "79",
            "url": "https:\/\/evgenylukin.ru\/blog\/all\/instrukciya-po-parsingu-python-selenium-webdriver\/",
            "title": "Инструкция по парсингу: Python + Selenium + WebDriver",
            "content_html": "
Чтобы скачать актуальную версию WebDriver переходим на chrome:\/\/settings\/help<\/a>, чтобы узнать версию вашего браузера.
\nПо ссылке https:\/\/sites.google.com\/chromium.org\/driver\/<\/a> скачиваем вебдрайвер для версии вашего барузера и для вашей операционной системы. Например, у меня это chromedriver_win32.zip
\nИзвлекаем в папку с проектом файл chromedriver.exe.
\nУстанавливаем в окружение библиотеку Selenium.<\/p>\n
from selenium import webdriver\r\ndriver = webdriver.Chrome('chromedriver.exe')\r\ndriver.get(url)<\/code><\/pre>",
            "date_published": "2022-03-13T10:04:29+03:00",
            "date_modified": "2022-08-12T16:36:38+03:00",
            "_date_published_rfc2822": "Sun, 13 Mar 2022 10:04:29 +0300",
            "_rss_guid_is_permalink": "false",
            "_rss_guid": "79",
            "_e2_data": {
                "is_favourite": false,
                "links_required": [
                    "system\/library\/highlight\/highlight.js",
                    "system\/library\/highlight\/highlight.css"
                ],
                "og_images": []
            }
        },
        {
            "id": "71",
            "url": "https:\/\/evgenylukin.ru\/blog\/all\/tz-na-monitoring-avito\/",
            "title": "ТЗ на мониторинг Авито",
            "content_html": "
Встретил на профи.ру такое ТЗ: Парсинг сайтов недвижимости в лиды Битрикс 24.<\/p>\n
Спарсить: контакты, объявления, цены.
\nПри появлении нового подходящего по требованиям объявления на рекламной площадке (Авито, Циан) ,сравнить с базой, добавить лид в Битрикс 24 (если это не дубль).<\/p>\n
Условия :<\/p>\n
    \n
  1. тип контакта=собственник,<\/li>\n
  2. создано сегодня,<\/li>\n
  3. СПБ и ЛО,<\/li>\n
  4. Тип квартиры: квартиры, комнаты, апартаменты.<\/li>\n<\/ol>\n
    Параметры для передачи в Битрикс :<\/p>\n