Как ускорить парсинг. Selectolax
Парсить на пайтоне можно не только с помощью БьютифулСуп, но и ещё нескольких библиотек.
Замер скорости: https://rushter.com/blog/python-fast-html-parser/
Синтаксис Selectolax: https://github.com/rushter/selectolax/blob/master/examples/walkthrough.ipynb