Я написал парсинг. Но времени выполнения скрипта не хватает, чтобы спарсить весь объем.
Предположил, что можно выкачивать частями. Т.е. скачал 500 строчек в базу. В пхп отметил, что id начинается с 501 и снова запускаем. Но в этом случае надо чтобы скрипт пропускал те 500 совпадений, которые уже скачаны иначе с 501 айдишника в базу полетят снова первые данные, который скрипт найдет на доноре.
Есть ли возможность, пользуясь библиотекой simle-html-dom и найдя определенный тег, пропускать его до тех пор, пока не отсчитает нужное количество, после чего парсит теги?
Предположил, что можно выкачивать частями. Т.е. скачал 500 строчек в базу. В пхп отметил, что id начинается с 501 и снова запускаем. Но в этом случае надо чтобы скрипт пропускал те 500 совпадений, которые уже скачаны иначе с 501 айдишника в базу полетят снова первые данные, который скрипт найдет на доноре.
Есть ли возможность, пользуясь библиотекой simle-html-dom и найдя определенный тег, пропускать его до тех пор, пока не отсчитает нужное количество, после чего парсит теги?