[#] [Перевод] Скрапинг бесконечно прокручивающейся страницы
habrabot(difrex,1) — All
2016-10-18 22:30:04


# Скрапинг бесконечно прокручивающейся страницы {#skraping-beskonechno-prokruchivayuscheysya-stranicy}



Добро пожаловать в советы по Scrapy от профессионалов! В этом месяце мы поделимся несколькими уловками, чтобы помочь ускорить вашу работу связанную с веб-скрапингом. Как ведущие мэйнтейнеры Scrapy мы сталкиваемся с каждыми препятствием, которое вы можете себе представить. Так что не волнуйтесь — вы в надёжных руках. Не стесняйтесь контактировать с нами в твиттере или фейсбуке с любыми предложениями для будущих статей.



![][1]



В эру одностраничных приложений и тонн AJAX-запросов на одной странице множество веб-сайтов заменили кнопку навигации "вперёд/назад" на причудливый механизм бесконечной прокрутки страницы. Веб-сайты использующие этот механизм загружают новую сущность каждый раз, когда пользователь достигает конца страницы при вертикальной прокрутке(вспомните Twitter, Facebook, Google Images). Даже несмотря на то, что [UX-эксперты][2] утверждают что механизм бесконечной прокрутки предоставляет чрезмерное количество данных для пользователей, мы видим увеличивающееся количество веб-страниц прибегающих к предоставлению бесконечного списка результатов.

[Читать дальше →][3]

[1]: https://habrastorage.org/files/db2/9ac/2f7/db29ac2f70634f9b945d00288af74e57.png
[2]: https://www.smashingmagazine.com/2013/05/infinite-scrolling-lets-get-to-the-bottom-of-this/
[3]: https://habrahabr.ru/post/312816/?utm_source=habrahabr&utm_medium=rss&utm_campaign=feed_posts#habracut