Современные сайты развиваются очень быстро, зачастую люди просто не успевают следить за содержимым и наполнениям сайтов. Поэтому программисты разрабатывают ботов, иногда их называют парсерами, которые позволяют выполнять рутинную работу по наполнению/корректировке сайта без человека. Так например может быть парсер товаров для интренет-магазина, который позволяет выставлять товары на сайт с сайта поставщика, или например, парсер тизерных сетей, который позволяет анализируя конкурентов выбрать оптимальные настройки таргентинга для ваших объявлений, или ещё более распространенное — парсер сайтов доноров, для создания/наполнения MFA (Made for Adsence) сайтов чужим контентом.
Итак, как сделать парсер на PHP
Сначала нужно определиться что именно мы собираемся отпарсить. Можно парсить XML (например файлы с прайсами в формате Яндекс Маркет XML), можно парсить разновидность XML — HTML, то есть в прямом виде сайты их страницы прямо по ссылкам, в конце концов можно парсить просто текст, находя в нем нужные данные, слова или цифры. Для каждого из этих подходов есть свой вариант решения, а то и несколько.
Как сделать парсер на PHP XML
Для того, чтобы отпарсить XML можно использовать несколько инструментов.
- Наиболее удобный и быстрый с точки зрения разработки способ — это использовать встроенные в PHP классы XMLReader и SimpleXML, о них написано много документации и строк подсказок, поэтому здесь мы не будем описывать как их использовать. Одно но: эти классы при больших размерах файла могут напрочь забить оперативку сервера и “сложить весь вебсервер в гармошку”.
- Более производительный, но и более трудоемкий вариант — использовать регулярные выражения. Да, вам нужно знать как их использовать, но при этом узкоспециальную информацию, без построения дерева веток xml быстрее и проще получить именно через регулярные выражения
Как сделать парсер на PHP HTML
Для того, чтобы отпарсить HTML таже можно использовать несколько инструментов.
- Поскольку HTML — это по сути урезанный XML, то тут все также можно использовать XMLReader и SimpleXML
- Если удобнее, можно использовать JQuery-подобный инструмент, например ganon php, html query или simple_html_dom (вариантов на самом деле много, главное, чтобы подходило по параметрам)
- Как и в случае с XML, вы можете использовать регулярные выражения. По сравнению с предыдущими 2-мя вариантам — этот самый быстрый. Мы всегда в проектах используем именно его, потому, что можно ещё и гибко настраивать какую информацию получать, и что с ней делать.
Думаю, эта статья поможет вам определиться, и сделать выбор как сделать парсер на php. Удачи в разработке!
Также рекомендуем прочитать:
Купите мне кофе