Парсеры, роботы, автоматизация, Selenium, PhantomJS на PHP

В этой лекции вы узнаете, что такое PhantomJS и как его запускать из командной строки.

Вы также узнаете, как получить скриншот, исходный код страницы.

Вы увидите, как можно задать параметры браузера, например, разрешение экрана (размер окна).

В этой лекции мы создадим приложение-генератор скриншотов сайтов на PHP. Узнаем как подменять User Agent.

В этой лекции мы напишем JS код, который будет получать все ссылки на страницы категорий Zappos.com. Далее этот код будет использоваться для получения JSON и передачи массива ссылок на сторону PHP. В следующей лекции мы запустим этот код в PhantomJS и научимся работать с файловой системой.

В этой лекции мы узнаем, как выполнить сторонний (пользовательский) код на странице, которая загружена через PhantomJS.

В этой лекции показано, как записать данные на диск из PhantomJS. Также мы прочитаем эти данные из PHP и превратим их в ассоциативный массив.

В этой лекции вы узнаете, как использовать рекурсию в PhantomJS для того, чтобы пройтись по пеждинации (1,2,...200...) страниц каталога. Мы будем находить ссылку на след. страницу каталога и парсить ее.

В этой лекции вы узнаете, как спарсить все ссылки на товары со страницы категории интернет магазина.

В этой лекции вы увидите, как можно записать все ссылки на товары в один файл JSON для того, чтобы дальше работать с ними в PHP.

В этой лекции вы узнаете, как написать свой парсер гугл транслейт и как передавать параметры из командной строки прямо в PhantomJS.