добавил ридми и лицензию, немного прокомментировал sitemap_scan.php

LICENSE

+Copyright © Vitaliy Buturlin, Evgeny Danilovich, 2018. All rights reserved.
+Разрабатывалось для: https://code4life.ru и https://film4life.ru
+
+----------------------------------------------------------------------------------
+
+Permission is hereby granted, free of charge, to any person obtaining a copy 
+of this software and associated documentation files (the "Software"), to deal 
+in the Software without restriction, including without limitation the rights 
+to use, copy, modify, merge, publish, distribute, sublicense, and/or sell 
+copies of the Software, and to permit persons to whom the Software is 
+furnished to do so, subject to the following conditions:
+
+The above copyright notice and this permission notice shall be included in 
+all copies or substantial portions of the Software.
+The word SkyXEngine can not be included in the product name.
+
+THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR 
+IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY, 
+FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE 
+AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER 
+LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM, 
+OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN 
+THE SOFTWARE.
+
+ADDITION:
+Any contribution (adding something to the Software)
+intentionally submitted to the authors of the Software for inclusion in the Software,
+must comply with the terms of this License, excluding any additional conditions.
+
+-----------------------------------------------------------------------------------
+
+Данная лицензия разрешает лицам, получившим копию данного программного обеспечения 
+и сопутствующей документации (в дальнейшем именуемыми «Программное Обеспечение»), 
+безвозмездно использовать Программное Обеспечение без ограничений, 
+включая неограниченное право на использование, копирование, изменение, слияние, 
+публикацию, распространение, сублицензирование и/или продажу копий 
+Программного Обеспечения, а также лицам, которым предоставляется данное 
+Программное Обеспечение, при соблюдении следующих условий:
+
+Указанное выше уведомление об авторском праве и данные условия должны быть 
+включены во все копии или значимые части данного Программного Обеспечения.
+Слово SkyXEngine не может быть включено в название продукта.
+
+ДАННОЕ ПРОГРАММНОЕ ОБЕСПЕЧЕНИЕ ПРЕДОСТАВЛЯЕТСЯ «КАК ЕСТЬ», БЕЗ КАКИХ-ЛИБО ГАРАНТИЙ, 
+ЯВНО ВЫРАЖЕННЫХ ИЛИ ПОДРАЗУМЕВАЕМЫХ, ВКЛЮЧАЯ ГАРАНТИИ ТОВАРНОЙ ПРИГОДНОСТИ, 
+СООТВЕТСТВИЯ ПО ЕГО КОНКРЕТНОМУ НАЗНАЧЕНИЮ И ОТСУТСТВИЯ НАРУШЕНИЙ, 
+НО НЕ ОГРАНИЧИВАЯСЬ ИМИ. НИ В КАКОМ СЛУЧАЕ АВТОРЫ ИЛИ ПРАВООБЛАДАТЕЛИ 
+НЕ НЕСУТ ОТВЕТСТВЕННОСТИ ПО КАКИМ-ЛИБО ИСКАМ, ЗА УЩЕРБ ИЛИ ПО ИНЫМ ТРЕБОВАНИЯМ, 
+В ТОМ ЧИСЛЕ, ПРИ ДЕЙСТВИИ КОНТРАКТА, ДЕЛИКТЕ ИЛИ ИНОЙ СИТУАЦИИ, 
+ВОЗНИКШИМ ИЗ-ЗА ИСПОЛЬЗОВАНИЯ ПРОГРАММНОГО ОБЕСПЕЧЕНИЯ 
+ИЛИ ИНЫХ ДЕЙСТВИЙ С ПРОГРАММНЫМ ОБЕСПЕЧЕНИЕМ.
+
+ДОБАВЛЕНИЕ:
+Любой вклад (добавление чего-либо к Программному Обеспечению) 
+намерено представленный авторам Программного обеспечения для включения в Программное Обеспечение, 
+должен соответствовать условиям данной Лицензии, исключая любые дополнительные условия.

README

+Copyright © Vitaliy Buturlin, Evgeny Danilovich, 2018. All rights reserved.
+
+SiteMapScan - php скрипт для загрузки всех страниц из sitemap.xml, с целью обращения к страницам для создания их кэша на стороне движка.
+Зачем делали? На наших блогах на Wordpress не работал общий кэш, вот затем и сделали, чтобы скрипт косвенно помогал его делать)
+
+Инструкция по установке:
+ - взять simple_html_dom.php и sitemap_scan.php и скопировать в нужное место на сайте, к примеру в корень (в следующей версии планирую убрать simple_html_dom, дабы снизить вычисления)
+ - настроить Cron на вызов sitemap_scan.php
+ 
+Использует cUrl.
+/sitemap.xml должно существовать или хотя бы редиректить (301)
\ No newline at end of file

sitemap_scan.php

 <?php
 
+/******************************************************
+Copyright © Vitaliy Buturlin, Evgeny Danilovich, 2018
+See the license in LICENSE
+******************************************************/
+
 set_time_limit(0);
 
 include('./simple_html_dom.php');
 
+//! файл для записи отчета, каждый раз при вызове скрипта файл обнуляется
 $g_sFilelog = "sitemap_scan_log.txt";
 
 //**************************************************************************
 
+//! загрузка страницы
 function LoadPage($sUrl, $canDelay = true)
 {
 	$sHeaders = array(
@@ -54,6 +61,7 @@ function LoadPage($sUrl, $canDelay = true)
 	return($result);
 }
 
+//! сканирование всех sitemap (начиная с sitemap.xml), и загрузка всех страниц из всех sitemap'ов
 function ScanSiteMap($sUrl)
 {
 	global $g_sFilelog;
@@ -103,10 +111,7 @@ function ScanSiteMap($sUrl)
 //**************************************************************************
 
 file_put_contents($g_sFilelog, "");
-/*echo $_SERVER["HTTP_X_FORWARDED_PROTO"] . "://" . $_SERVER["HTTP_HOST"] . "/sitemap.xml";
-echo "<pre>";
-print_r($_SERVER);
-echo "</pre>";*/
+
 ScanSiteMap($_SERVER["HTTP_X_FORWARDED_PROTO"] . "://" . $_SERVER["HTTP_HOST"] . "/sitemap.xml");
 
 ?>
\ No newline at end of file