Как работают «оптимизаторы» в «SEO-компании №1» или небольшой отзыв на Demis Group

Есть у меня товарищ с сайтом на Joomla, который я сделал год назад. Т.к. я не занимался и не занимаюсь продвижением сайтов, на вопрос о повышении позиций в поисковиках, порекомендовал товарищу самостоятельно найти компанию, которая профессионально этим занимается.

logo

Такая компания нашлась, называется она Demis Group. Предоставили им доступы и начали работу. Тут стоит отметить, что все это время ко мне не обращались с правками, поэтому я не застал процесс «оптимизации», и очень зря, как оказалось.

Проблемы обнаружились, когда меня попросили сделать адаптивную версию сайта. Клиенту оптимизатор посоветовал, мол, Гуглу нравятся такие сайты, они выше в выдаче, да и в целом удобнее. Сайт тогда мы сделали фиксированным, был ограничен бюджет. Ну не проблема, сказано — сделано!

Открываю сайт, смотрю внешне, в админке. Параллельно запускаю PhpStorm, гружу проект к себе на компьютер с SFTP, ведь были изменения со стороны оптимизатора. Смотрю на тайтлы, как были при мне, такими же и остались. WTF? Где продвижение? В админке, в пунктах меню все тоже самое. Никаких компонентов SEO не установлено. Ооокей, смотрю корень сайта и нахожу чужеродные файлы:

_adminer.php
_varvara.php
d-seo.php
d-url-rewriter.php

Думаю, некоторые по названию уже начали понимать, с чем мне пришлось столкнуться.

_adminer.php — это менеджер БД, взят отсюда http://www.adminer.org/
_varvara.php — самописная хрень, которая делает поиск и замену во всех файлах на хостинге

Еще раз, Демису были предоставлены все доступы к хостингу. Что мешало воспользоваться встроенным у хостера PhpMyAdmin? Зачем устанавливать потенциально опасные скрипты, без спроса, какая в этом необходимость? Абсолютно непрофессиональный подход к делу, даже опасный.

Ок, смотрим файлы d-seo.php.

/**
* Оптимизаторский файл. Подключать только include_once!!! Не забываем global $aSEOData, где нужно.
*
* if (file_exists($_SERVER['DOCUMENT_ROOT'] . '/d-seo.php')) {
* include_once($_SERVER['DOCUMENT_ROOT'] . '/d-seo.php');
* }
*
* Изменяемые параметры массива $aSEOData (квадратными скобками выделены неактивные)
* title - title страницы
* descr - meta descr
* keywr - meta keywords
*
*/

//Глобальные значения (по умолчанию)
$aSEOData['title'] = '';
$aSEOData['descr'] = '';
$aSEOData['keywr'] = '';
$aSEOData['h1'] = '';
$aSEOData['text-top'] = '';
$aSEOData['text-bot'] = '';

//Определяем адрес (REQUEST_URI есть не всегда)
$sSEOUrl = $_SERVER['REQUEST_URI'];
//$sSEOUrl = DUR_REQUEST_URI;

//Собственно вариации для страниц
switch ($sSEOUrl) {
case '/': // Добавлено 28 January 2015 в 10:36
$aSEOData['title'] = 'Металлопрокат — купить в «МТК» в Новосибирске | Цены на металлопрокат без надбавок';
$aSEOData['descr'] = 'В ООО «МТК» вы можете купить металлопрокат оптом и в розницу. Цены свободны от лишних надбавок. На всю металлопродукцию действует гарантия качества. Телефоны в Новосибирске: (383) 361-26-34, (383) 361-21-74.';
$aSEOData['keywr'] = 'купить металлопрокат в новосибирске цена стоимость металл';
break;

case '/metalloprokat/chernyi-prokat.html': // Добавлено 28 January 2015 в 10:36
$aSEOData['title'] = 'Черный металлопрокат — купить в «МТК» в Новосибирске | Продажа черного металлопроката: цены';
$aSEOData['descr'] = 'В ООО «МТК» вы можете купить черный металлопрокат. Цены на черный металлопрокат представлены на сайте. Телефоны в Новосибирске: (383) 361-26-34, (383) 361-21-74.';
$aSEOData['keywr'] = 'черный черный металлопрокат новосибирск цена продажа';
break;

case '/metalloprokat/listovoy-prokat.html': // Добавлено 28 January 2015 в 10:36
$aSEOData['title'] = 'Листовой прокат — купить в «МТК» в Новосибирске | Продажа листового проката: цены';
$aSEOData['descr'] = 'В ООО «МТК» вы можете купить листовой прокат. Цены на листовой прокат представлены на сайте. Телефоны в Новосибирске: (383) 361-26-34, (383) 361-21-74.';
$aSEOData['keywr'] = 'листовой прокат купить продажа цена';
$aSEOData['h1'] = 'Листовой прокат с доставкой по Новосибирску';
break;

case '/metalloprokat/armaturniy-prokat.html': // Добавлено 28 January 2015 в 10:36
$aSEOData['title'] = 'Стальная арматура — продажа в «МТК» в Новосибирске | Арматурный прокат: цены, характеристики';
$aSEOData['descr'] = 'В ООО «МТК» вы можете купить стальную арматуру. Цены на арматурный прокат представлены на сайте. Телефоны в Новосибирске: (383) 361-26-34, (383) 361-21-74.';
$aSEOData['keywr'] = 'арматура стальная цена арматурный прокат';
$aSEOData['h1'] = 'Арматурный прокат разных типов';
break;

case '/metalloprokat/trubniy-prokat.html': // Добавлено 28 January 2015 в 10:36
$aSEOData['title'] = 'Трубный прокат: цены, характеристики | Продажа трубного металлопроката в «МТК» в Новосибирске';
$aSEOData['descr'] = 'В ООО «МТК» вы можете купить трубный прокат. Цены на трубный прокат представлены на сайте. Телефоны в Новосибирске: (383) 361-26-34, (383) 361-21-74.';
$aSEOData['keywr'] = 'трубный прокат';
$aSEOData['h1'] = 'Трубный прокат различных типоразмеров';
break;

case '/metalloprokat/perfometall.html': // Добавлено 28 January 2015 в 10:36
$aSEOData['title'] = 'Перфорированный металл — продажа в «МТК» в Новосибирске | Продажа перфометалла';
$aSEOData['descr'] = 'В ООО «МТК» вы можете купить перфорированный металл. Цены на перфометалл представлены на сайте. Телефоны в Новосибирске: (383) 361-26-34, (383) 361-21-74.';
$aSEOData['keywr'] = 'перфорированный металл цена перфометалл';
$aSEOData['h1'] = 'Легкий и износостойкий перфометалл по индивидуальным эскизам';
break;

case '/metalloprokat/nerzhaveushiy-prokat.html': // Добавлено 28 January 2015 в 10:36
$aSEOData['title'] = 'Нержавеющий металлопрокат — продажа в Новосибирске | Прокат из нержавеющей стали';
$aSEOData['descr'] = 'В ООО «МТК» вы можете купить нержавеющий металлопрокат. Цены на нержавеющий металлопрокат представлены на сайте. Телефоны в Новосибирске: (383) 361-26-34, (383) 361-21-74.';
$aSEOData['keywr'] = 'нержавеющий металлопрокат новосибирск цена';
$aSEOData['h1'] = 'Нержавеющий металлопрокат';
break;

default:
break;
}

// // генерация мета-тегов
// $arExceptions = array (
// '/catalogue/shiny/dlya-pogruzchikov/',
// '/catalogue/arenda-pogruzchikov/',
// );

//if(!in_array($sSEOUrl, $arExceptions)) {
if (empty($aSEOData['title']) or empty($aSEOData['descr'])) {
if (preg_match('%<h1[^>]*>(.*)</h1>%siU', $sContent, $h1)) {
//чистим h1 от лишних тегов
$h1[1] = preg_replace('%<[^>]*>%siU', '', $h1[1]);
$h1[1] = trim($h1[1]);

//if (empty($aSEOData['title']))
// $aSEOData['title'] = $h1[1] .' | Мебель для офиса';

if (empty($aSEOData['descr']))
$aSEOData['descr'] = 'Продажа изделий черного металлопроката, услуги раскройки металла, помощь в транспортировке. '. $h1[1] .'. Наш телефон в Новосибирске: +7 (383) 361-26-34';
}
}
//}

///РЕПЛЕЙСЫ
///////////

// вставка текста до каталога
// if (isset($aSEOData['text-top']) && !empty($aSEOData['text-top'])) {
// $sContent = str_replace('<!--text-top-->', '<div id="text-top" class="seo">'.$aSEOData['text-top'].'</div>', $sContent);
// }
// // вставка текста после каталога
// if (isset($aSEOData['text-bot']) && !empty($aSEOData['text-bot'])) {
// $sContent = str_replace('<!--text-bot-->', '<div id="text-bot" class="seo">'.$aSEOData['text-bot'].'</div>', $sContent);
// }

// замена тегов на css (не расскоменчивать - пропадают заголовки)
//$sContent = preg_replace('%<h3 class="chg-to-css">(.*)</h3>%siU', '<div class="kak_h3">$1</div>', $sContent);

// цели
$sContent = str_replace('<input type="submit" value="Отправить" name="form[send]" id="send" class="rsform-submit-button" />',
'<input type="submit" value="Отправить" name="form[send]" id="send" class="rsform-submit-button" onclick="yaCounter25698332.reachGoal(\'zvonok\'); ga(\'send\', \'event\', \'knopka\', \'звонок\'); return true;"/>',
$sContent);

// реплейсы для конкретных страниц
// switch ($sSEOUrl) {
// case '/index.php':
// break;
// case '/kontakty.php':
// break;
// }

//Обработка
function changeHeadBlock ($sContent, $sRegExp, $sBlock) {
if (preg_match($sRegExp, $sContent)) {
return preg_replace($sRegExp, $sBlock, $sContent);
}
else {
return str_replace('<head>', '<head>' . $sBlock, $sContent);
}
}
if(isset($_SERVER['X_DUSYA']) || isset($_SERVER['HTTP_X_DUSYA'])) {
$sContent = str_replace('<head>', '<head><!--origUrl="' . $sSEOUrl . '"-->' , $sContent);
}
if (isset($aSEOData['title']) && !empty($aSEOData['title'])) {
$aSEOData['title'] = htmlspecialchars($aSEOData['title']);
$sContent = changeHeadBlock($sContent, '#<title>.*</title>#siU', '<title>' . $aSEOData['title'] . '</title>');
}
if (isset($aSEOData['descr']) && !empty($aSEOData['descr'])) {
$aSEOData['descr'] = htmlspecialchars($aSEOData['descr']);
$sContent = changeHeadBlock($sContent, '#<meta[^>]+name[^>]{1,7}description[^>]*>#siU', '<meta name="description" content="' . $aSEOData['descr'] . '" />');
}
if (isset($aSEOData['keywr']) && !empty($aSEOData['keywr'])) {
$aSEOData['keywr'] = htmlspecialchars($aSEOData['keywr']);
$sContent = changeHeadBlock($sContent, '#<meta[^>]+name[^>]{1,7}keywords[^>]*>#siU', '<meta name="keywords" content="' . $aSEOData['keywr'] . '" />');
}
if (isset($aSEOData['h1']) && !empty($aSEOData['h1'])) {
$sContent = preg_replace('#(<h1[^>]*>).*(</h1>)#siU', '$1'.$aSEOData['h1'].'$2', $sContent);
}

 

Великолепно, Demis! Заместо того, чтобы воспользоваться встроенными SEO функциями Joomla, мы сделаем свой велосипед!

velosiped-sdelay-samЧто, если клиент поменяет алиас URL у пункта меню? Ничего страшного, мы ведь об этом не узнаем, да и клиент не сразу догадается об отвалившихся тайтлах, а если и узнает, ну так что стоит зайти и исправить? Ну да, клиент сам не полезет в этот ужас, для этого ведь существуем мы!

Теперь файл d-url-rewriter.php

// Раздел настройки ЧПУ (Все пути начинаются с ведущего слеша от корневой директории)
$aURLRewriter = array (
// '/test1' => '/test-OK',
);
//Сквозные редиректы
$aR301SkipCheck = array (
// '/test2' => '/test-OK',
'/sitemap' => '/sitemap.html',
);
//Удаленные страницы
$a410Response = array (
// '/test3',
'/contacts.html/',
);
$a404Response = array (
// '/test4',
);
// if(in_array($_SERVER['REQUEST_URI'], $a404)) {
// header("HTTP/1.1 404 Not Found");
// echo file_get_contents('http://uitek.ru/rus/404');
// exit;
// }
// Только замена ссылок
$aURLRewriterOnly = array (
// '/test5' => '/test-OK',
);

define('DUR_DEBUG', 0); //Включение режима отладки (вывод инфо в конце исходного текста на странице)
define('DUR_PREPEND_APPEND', 0); //Единая точка входа (.htaccess) Не рекомендуется
define('DUR_BASE_ROOT', 0); //Прописать принудительно <base href="http://domain.com/"> Бывает полезно при ссылках вида href="?page=2". При указании строки, пропишет ее
define('DUR_LINK_PARAM', 0); //Дописать путь перед ссылками вида href="?page=2"
define('DUR_ANC_HREF', 0); //Пофиксить ссылки вида href="#ancor"
define('DUR_ROOT_HREF', 1); //Пофиксить ссылки вида href="./"
define('DUR_REGISTER_GLOBALS', 0); //Регистрировать глобальные переменные
define('DUR_SKIP_POST', 1); //Не выполнять подмену при запросе POST
define('DUR_CMS_TYPE', 'NONE'); //Включение особенностей для CMS, возможные значения: NONE, NETCAT, JOOMLA, HTML, DRUPAL, WEBASYST, ICMS
define('DUR_OUTPUT_COMPRESS', 'NONE'); //Сжатие выходного потока, возможные значения: NONE, GZIP, DEFLATE, AUTO, SKIP
define('DUR_SUBDOMAINS', 0); //Обрабатывать поддомены, указываем здесь основной домен!
define('DUR_SKIP_USERAGENT', '#^(|mirror)$#'); //Не выполнять редиректы при указанном HTTP_USER_AGENT (регулярка)
define('DUR_SKIP_URLS', '#^/_?(admin|manag|bitrix|indy|cms|phpshop|varvara.php|captcha|jscripts/|modules|includes|templates|wp-admin)#siU'); //Skip URLS
define('DUR_FIX_CONTLEN', 1); //Фиксить Content-Length
define('DUR_PATHINFO', 0); //Регистрировать переменные для передачи вида /index.php/uri

///new
define('DUR_FIX_RELATIVE', 1); //Фиксить относительные ссылки (только для DUR_MAIN_CYCLE = ortodox)
define('DUR_FIX_DOTTED', 0); //Фиксить ссылки от "./" (только для DUR_MAIN_CYCLE = ortodox)
define('DUR_FIX_HTTP_HOST', $_SERVER['HTTP_HOST']); //Фиксить HTTP_HOSTв ссылках, прописываем, например, значение "www.mysite.ru", чтобы сократить количество host-зависимых подмен ссылок
define('DUR_CACHE_REWRITED', 0); //Кэшировать все замены в этом рерайтере, должна быть создана папка d-cache в корне с правами на запись
define('DUR_CACHE_MEMORY', 40960000); //Критическая масса кеша (в байтах), при превышении этого значения кеш очищается
define('DUR_CACHE_TIME', 3); //Критическое время жизни кеша, при превышении этого значения кеш очищается
define('DUR_MAIN_CYCLE', 'ortodox'); //Константа для выбора типа основного цикла, значения: callback, str_replace, ortodox

// Раздел обработки
define('DUR_TIME_START', microtime(true));
define('DUR_REQUEST_URI', $_SERVER['REQUEST_URI']);
define('DUR_HTTP_HOST', $_SERVER['HTTP_HOST']);
define('DUR_FULL_URI', $_SERVER['HTTP_HOST'] . $_SERVER['REQUEST_URI']);
define('BX_COMPRESSION_DISABLED', true); //Hack for bitrix
define('DUR_SKIP_THIS', preg_match(DUR_SKIP_URLS, DUR_REQUEST_URI, $aM));
define('DUR_SKIP_R301', !isset($_SERVER['HTTP_USER_AGENT']) || preg_match(DUR_SKIP_USERAGENT, $_SERVER['HTTP_USER_AGENT']));
if (defined('DUR_DEBUG') && DUR_DEBUG) {
ini_set('display_errors', 1);
ini_set('error_reportings', E_ALL);
}
if (isset($_GET['_openstat'])) {
unset($_GET['_openstat']);
unset($_REQUEST['_openstat']);
unset($HTTP_GET_VARS['_openstat']);
$_SERVER['REQUEST_URI'] = preg_replace('%[&?]_openstat=[^&]+(&|$)%siU', '', $_SERVER['REQUEST_URI']);
}
if (in_array($_SERVER['REQUEST_URI'], $a410Response) && !DUR_SKIP_THIS) {
header('HTTP/1.0 410 Gone');
echo '<h1 style="font-size: 18pt;">Ошибка 410</h1><p>Страница удалена</p><p style="text-align: right; margin: 10px;"><a href="/">На главную</a></p>';
exit;
}
if (in_array($_SERVER['REQUEST_URI'], $a404Response) && !DUR_SKIP_THIS) {
dur404native();
}
if (isset($aR301SkipCheck[$_SERVER['REQUEST_URI']]) && !DUR_SKIP_THIS && !DUR_SKIP_R301) {
if (!defined('DUR_SKIP_POST') || !DUR_SKIP_POST || (strtoupper($_SERVER['REQUEST_METHOD']) != 'POST')) {
header('Location: ' . $aR301SkipCheck[$_SERVER['REQUEST_URI']], true, 301);
exit;
}
}
foreach ($aURLRewriter as $sKey => $sVal) {
$aURLRewriter[$sKey] = str_replace(
array('р', 'у', 'к', 'е', 'н', 'х', 'в', 'а', 'о', 'ч', 'с', 'м', 'и', 'т', ' '),
array('p', 'y', 'k', 'e', 'h', 'x', 'b', 'a', 'o', '4', 'c', 'm', 'n', 't', '_'),
$sVal
);
if (!defined('DUR_SEO_REQUEST_URI') && ($sVal == $_SERVER['REQUEST_URI'])) {
define('DUR_SEO_REQUEST_URI', $sKey);
}
}
$aURFlip = array_flip($aURLRewriter);
//Многократная вложенность замен (до 10)
for ($i = 0; $i < 10; $i++) {
foreach ($aURLRewriter as $sFrom => $sTo) {
if (isset($aURLRewriter[$sTo])) {
$aURLRewriter[$sFrom] = $aURLRewriter[$sTo];
$aURFlip[$aURLRewriter[$sTo]] = $sFrom;
}
}
}
//Joomla hack! (Против защиты от register globals)
if (defined('DUR_CMS_TYPE') && (DUR_CMS_TYPE == 'JOOMLA')) {
$_SERVER['dur'] = array($aURLRewriter, $aURFlip, $aURLRewriterOnly);
}
//Единая точка входа
if (defined('DUR_PREPEND_APPEND') && DUR_PREPEND_APPEND && !DUR_SKIP_THIS) {
durRun ();
}

// Функции
function durRun () {
if (defined('DUR_RUNNED')) return;
// if (isset())
define('DUR_RUNNED', 1);
durR301();
ob_start('durLinkChanger');
durIFRewrite();
}

function dur404 () {
$aPages404 = array('404.php', '404.html', '404.htm', 'index.php', 'index.html', 'index.htm');
header('HTTP/1.1 404 Not found');
foreach ($aPages404 as $sPage404) {
if (file_exists($_SERVER['DOCUMENT_ROOT'] . '/' . $sPage404)) {
include($_SERVER['DOCUMENT_ROOT'] . '/' . $sPage404);
exit;
}
}
echo '<h1>Ошибка 404</h1><p>Страница не найдена</p><p style="text-align: right; margin: 10px;"><a href="/">На главную</a></p>';
exit;
}
function dur404native() {
$_SERVER['REQUEST_URI'] = '/thispagewasdeleted';
$_GET = $_REQUEST = array();
}
function durRewrite ($sURL) {
global $QUERY_STRING, $REQUEST_URI, $REDIRECT_URL, $HTTP_GET_VARS;
define('DUR_DEBUG_BEFORE', "SERVER:\n" . durDebugVar($_SERVER) . "\n\nGET:\n" . durDebugVar($_GET) . "\n\nREQUEST:\n" . durDebugVar($_REQUEST) . "\n");
if (defined('DUR_CMS_TYPE') && (DUR_CMS_TYPE == 'WEBASYST')) {
$sURL = '/?__furl_path=' . substr($sURL, 1) . '&frontend=1';
}
if (defined('DUR_CMS_TYPE') && (DUR_CMS_TYPE == 'ICMS')) {
$sURL = '/index.php?path=' . substr($sURL, 1, -5) . '&frontend=1';
}
$QUERY_STRING = strpos($sURL, '?') ? substr($sURL, strpos($sURL, '?') + 1) : '';
$REQUEST_URI = $sURL;
$REDIRECT_URL = $sURL;
$_SERVER['QUERY_STRING'] = $QUERY_STRING;
$_SERVER['REDIRECT_URL'] = $sURL;
$_SERVER['REQUEST_URI'] = $sURL;
if (defined('DUR_CMS_TYPE') && (DUR_CMS_TYPE == 'NETCAT')) {
putenv('REQUEST_URI=' . $sURL);
//$_ENV['REQUEST_URI'] = $sURL;
}
if (defined('DUR_CMS_TYPE') && (DUR_CMS_TYPE == 'DRUPAL')) {
$_GET['q'] = substr($sURL, 1);
$_REQUEST['q'] = substr($sURL, 1);
}
if (preg_match_all('%[\?&]([^\=]+)\=([^&]*)%', $sURL, $aM)) {
$aParams = array();
foreach ($aM[1] as $iKey => $sName) {
$sVal = urldecode($aM[2][$iKey]);
if (preg_match('#^(.+)\[\]$#siU', $sName, $aMatch)) {
$aParams[$aMatch[1]][] = $sVal;
}
elseif (preg_match('#^(.+)\[([\w-]+)\]$#siU', $sName, $aMatch)) {
$aParams[$aMatch[1]][$aMatch[2]] = $sVal;
}
else {
$aParams[$sName] = $sVal;
}
}
foreach ($aParams as $sKey => $mVal) {
$_GET[$sKey] = $mVal;
$HTTP_GET_VARS[$sKey] = $mVal;
$_REQUEST[$sKey] = $mVal;
if (defined('DUR_REGISTER_GLOBALS') && DUR_REGISTER_GLOBALS) {
global $$sKey;
$$sKey = $mVal;
}
}
}
if (defined('DUR_PATHINFO') && DUR_PATHINFO) {
$_SERVER['PATH_INFO'] = substr($sURL, 1);
$_SERVER['PHP_SELF'] = $sURL;
}
if (DUR_CMS_TYPE == 'HTML') {
$sFName = $sURL;
if ($iPos = strpos($sFName, '?')) {
$sFName = substr($sFName, 0, $iPos);
}
if (file_exists($_SERVER['DOCUMENT_ROOT'] . $sFName)) {
include($_SERVER['DOCUMENT_ROOT'] . $sFName);
exit;
}
else {
dur404();
}
}
}

function durIFRewrite () {
global $aURFlip, $aURLRewriter;
if (DUR_SKIP_THIS) return;
$sKey = 'http://' . $_SERVER['HTTP_HOST'] . $_SERVER['REQUEST_URI'];
if (defined('DUR_SUBDOMAINS') && DUR_SUBDOMAINS && isset($aURFlip[$sKey])) {
if (!defined('DUR_ORIG_RURI')) {
define('DUR_ORIG_RURI', $aURFlip[$sKey]);
}
durRewrite ($aURFlip[$sKey]);
}
elseif (isset($aURFlip[$_SERVER['REQUEST_URI']])) {
if (!defined('DUR_ORIG_RURI')) {
define('DUR_ORIG_RURI', $aURFlip[$_SERVER['REQUEST_URI']]);
}
durRewrite ($aURFlip[$_SERVER['REQUEST_URI']]);
}
elseif (defined('DUR_CMS_TYPE') && (DUR_CMS_TYPE == 'HTML')) {
if (file_exists($_SERVER['DOCUMENT_ROOT'] . $_SERVER['REQUEST_URI'])) {
durRewrite ($_SERVER['REQUEST_URI']);
}
else {
dur404();
}
}
}

function durR301 () {
global $aURFlip, $aURLRewriter;
if (DUR_SKIP_THIS || DUR_SKIP_R301) return;
if (defined('DUR_SKIP_POST') && DUR_SKIP_POST && (strtoupper($_SERVER['REQUEST_METHOD']) == 'POST')) {
return;
}
if (isset($aURLRewriter[$_SERVER['REQUEST_URI']])) {
if ('http://' . DUR_HTTP_HOST == trim($aURLRewriter[$_SERVER['REQUEST_URI']], '/')) {
return;
}
header('Location: ' . $aURLRewriter[$_SERVER['REQUEST_URI']], true, 301);
exit;
}
}

function durRExpEscape ($sStr) {
return str_replace(array('?', '.', '-', ':', '%', '[', ']', '(', ')'), array('\\?', '\\.', '\\-', '\\:', '\\%', '\\[', '\\]', '\\(', '\\)'), $sStr);
}

function durReplaceOnceLink ($sLink, $sNewLink, $sContent) {
$sContent = preg_replace('%(href\s*=\s*[\'"]?)\s*' . durRExpEscape ($sLink) . '([#\'"\s>])%siU', '$1' . $sNewLink . '$2', $sContent);
if (strpos($sLink,'&'))
$sContent = preg_replace('%(href\s*=\s*[\'"]?)\s*' . durRExpEscape (str_replace('&', '&amp;', $sLink)) . '([#\'"\s>])%siU', '$1' . $sNewLink . '$2', $sContent);
return $sContent;
}

function durReplaceLink ($sHost, $sBase, $sFrom, $sTo, $sContent) {
$sNewLink = $sTo;
// Link type: "http://domain/link"
$sContent = durReplaceOnceLink ('http://' . $sHost . $sFrom, $sNewLink, $sContent);
// Link type: "https://domain.com/link"
// $sContent = durReplaceOnceLink ('https://' . $sHost . $sFrom, $sNewLink, $sContent);
// Link type: "//domain.com/link"
// $sContent = durReplaceOnceLink ('//' . $sHost . $sFrom, $sNewLink, $sContent);
if (!defined('DUR_FIRST_TIC'))
{
// Link type: "/link"
$sContent = durReplaceOnceLink ($sFrom, $sNewLink, $sContent);
// Link type: "./link"
if (defined('DUR_FIX_DOTTED') && DUR_FIX_DOTTED) {
$sContent = durReplaceOnceLink ('.' . $sFrom, $sNewLink, $sContent);
}
if (defined('DUR_FIX_RELATIVE') && DUR_FIX_RELATIVE) {
// Link type: "link" (Calc fromlink)
$aLink = explode('/', $sFrom);
$aBase = empty($sBase) ? array('') : explode('/', str_replace('//', '/', '/' . $sBase));
$sReplLnk = '';
for ($i = 0; $i < max(count($aLink), count($aBase)); $i++) {
if (isset($aBase[$i]) && isset($aLink[$i])) {
if ($aLink[$i] == $aBase[$i]) {
continue;
}
else {
for ($j = $i; $j < count($aBase); $j++) {
$sReplLnk .= '../';
}
for ($j = $i; $j < count($aLink); $j++) {
$sReplLnk .= $aLink[$j] . '/';
}
break;
}
}
elseif (isset($aLink[$i])) {
$sReplLnk .= $aLink[$i] . '/';
}
elseif (isset($aBase[$i])) {
$sReplLnk .= '../';
}
}
$sReplLnk = preg_replace('%/+%', '/', $sReplLnk);
$sReplLnk2 = trim($sReplLnk, '/');
$sReplLnk3 = rtrim($sReplLnk2, '.');
if (strlen($sReplLnk) > 1) {
$sContent = durReplaceOnceLink ($sReplLnk, $sNewLink, $sContent);
if (defined('DUR_FIX_DOTTED') && DUR_FIX_DOTTED) {
$sContent = durReplaceOnceLink ('./' . $sReplLnk, $sNewLink, $sContent);
}
}
if (($sReplLnk2 != $sReplLnk) && (strlen($sReplLnk2) > 1)) {
$sContent = durReplaceOnceLink ($sReplLnk2, $sNewLink, $sContent);
if (defined('DUR_FIX_DOTTED') && DUR_FIX_DOTTED) {
$sContent = durReplaceOnceLink ('./' . $sReplLnk2, $sNewLink, $sContent);
}
}
if (($sReplLnk3 != $sReplLnk2) && (strlen($sReplLnk3) > 1)) {
$sContent = durReplaceOnceLink ($sReplLnk3, $sNewLink, $sContent);
if (defined('DUR_FIX_DOTTED') && DUR_FIX_DOTTED) {
$sContent = durReplaceOnceLink ('./' . $sReplLnk3, $sNewLink, $sContent);
}
}
}
}
return $sContent;
}

function durGZDecode($sS) {
$sM = ord(substr($sS,2,1)); $iF = ord(substr($sS,3,1));
if ($iF & 31 != $iF) return null;
$iLH = 10; $iLE = 0;
if ($iF & 4) {
if ($iL - $iLH - 2 < 8) return false;
$iLE = unpack('v',substr($sS,8,2));
$iLE = $iLE[1];
if ($iL - $iLH - 2 - $iLE < 8) return false;
$iLH += 2 + $iLE;
}
$iFCN = $iFNL = 0;
if ($iF & 8) {
if ($iL - $iLH - 1 < 8) return false;
$iFNL = strpos(substr($sS,8+$iLE),chr(0));
if ($iFNL === false || $iL - $iLH - $iFNL - 1 < 8) return false;
$iLH += $iFNL + 1;
}
if ($iF & 16) {
if ($iL - $iLH - 1 < 8) return false;
$iFCN = strpos(substr($sS,8+$iLE+$iFNL),chr(0));
if ($iFCN === false || $iL - $iLH - $iFCN - 1 < 8) return false;
$iLH += $iFCN + 1;
}
$sHCRC = '';
if ($iF & 2) {
if ($iL - $iLH - 2 < 8) return false;
$calccrc = crc32(substr($sS,0,$iLH)) & 0xffff;
$sHCRC = unpack('v', substr($sS,$iLH,2));
$sHCRC = $sHCRC[1];
if ($sHCRC != $calccrc) return false;
$iLH += 2;
}
$sScrc = unpack('V',substr($sS,-8,4));
$sScrc = $sScrc[1];
$iSZ = unpack('V',substr($sS,-4));
$iSZ = $iSZ[1];
$iLBD = $iL-$iLH-8;
if ($iLBD < 1) return null;
$sB = substr($sS,$iLH,$iLBD);
$sS = '';
if ($iLBD > 0) {
if ($sM == 8) $sS = gzinflate($sB);
else return false;
}
if ($iSZ != strlen($sS) || crc32($sS) != $sScrc) return false;
return $sS;
}

function durGZDecode2($sS) {
$iLen = strlen($sS);
$sDigits = substr($sS, 0, 2);
$iMethod = ord(substr($sS, 2, 1));
$iFlags = ord(substr($sS, 3, 1));
if ($iFlags & 31 != $iFlags) return false;
$aMtime = unpack('V', substr($sS, 4, 4));
$iMtime = $aMtime[1];
$sXFL = substr($sS, 8, 1);
$sOS = substr($sS, 8, 1);
$iHeaderLen = 10;
$iExtraLen = 0;
$sExtra = '';
if ($iFlags & 4) {
if ($iLen - $iHeaderLen - 2 < 8) return false;
$iExtraLen = unpack('v', substr($sS, 8, 2));
$iExtraLen = $iExtraLen[1];
if ($iLen - $iHeaderLen - 2 - $iExtraLen < 8) return false;
$sExtra = substr($sS, 10, $iExtraLen);
$iHeaderLen += 2 + $iExtraLen;
}
$iFilenameLen = 0;
$sFilename = '';
if ($iFlags & 8) {
if ($iLen - $iHeaderLen - 1 < 8) return false;
$iFilenameLen = strpos(substr($sS, $iHeaderLen), chr(0));
if ($iFilenameLen === false || $iLen - $iHeaderLen - $iFilenameLen - 1 < 8) return false;
$sFilename = substr($sS, $iHeaderLen, $iFilenameLen);
$iHeaderLen += $iFilenameLen + 1;
}
$iCommentLen = 0;
$sComment = '';
if ($iFlags & 16) {
if ($iLen - $iHeaderLen - 1 < 8) return false;
$iCommentLen = strpos(substr($sS, $iHeaderLen), chr(0));
if ($iCommentLen === false || $iLen - $iHeaderLen - $iCommentLen - 1 < 8) return false;
$sComment = substr($sS, $iHeaderLen, $iCommentLen);
$iHeaderLen += $iCommentLen + 1;
}
$sCRC = '';
if ($iFlags & 2) {
if ($iLen - $iHeaderLen - 2 < 8) return false;
$sCalcCRC = crc32(substr($sS, 0, $iHeaderLen)) & 0xffff;
$sCRC = unpack('v', substr($sS, $iHeaderLen, 2));
$sCRC = $sCRC[1];
if ($sCRC != $sCalcCRC) return false;
$iHeaderLen += 2;
}
$sDataCRC = unpack('V', substr($sS, -8, 4));
$sDataCRC = sprintf('%u', $sDataCRC[1] & 0xFFFFFFFF);
$iSize = unpack('V', substr($sS, -4));
$iSize = $iSize[1];
$iBodyLen = $iLen - $iHeaderLen - 8;
if ($iBodyLen < 1) return false;
$sBody = substr($sS, $iHeaderLen, $iBodyLen);
$sS = '';
if ($iBodyLen > 0) {
switch ($iMethod) {
case 8: $sS = gzinflate($sBody); break;
default: return false;
}
}
$sCRC = sprintf('%u', crc32($sS));
$bCRCOK = ($sCRC == $sDataCRC);
$bLenOK = ($iSize == strlen($sS));
if (!$bLenOK || !$bCRCOK) return false;
return $sS;
}

function durGZCheck ($sContent) {
$iLen = strlen($sContent);
if ($iLen < 18 || strcmp(substr($sContent, 0, 2), "\x1f\x8b")) {
return $sContent;
}
$sData = durGZDecode2($sContent);
if (!$sData) {
$sData = durGZDecode($sContent);
}
return $sData ? $sData : $sContent;
}

function durOutputCompress ($sContent) {
if (!defined('DUR_OUTPUT_COMPRESS')) {
define('DUR_OUTPUT_COMPRESS', 'SKIP');
}
if (DUR_OUTPUT_COMPRESS == 'SKIP') {
return $sContent;
}
$aAccept = array();
if (isset($_SERVER['HTTP_ACCEPT_ENCODING'])) {
$aAccept = array_map('trim', explode(',', strtolower($_SERVER['HTTP_ACCEPT_ENCODING'])));
}
$bGZIP = in_array('gzip', $aAccept) && function_exists('gzencode');
$bDEFL = in_array('deflate', $aAccept) && function_exists('gzdeflate');
$sCompress = DUR_OUTPUT_COMPRESS;
if ((!$bGZIP && !$bDEFL) || (!$bGZIP && ($sCompress == 'GZIP')) || (!$bDEFL && ($sCompress == 'DEFLATE'))) {
$sCompress = 'NONE';
}
if ($sCompress == 'AUTO') {
$sCompress = $bGZIP ? 'GZIP' : ($bDEFL ? 'DEFLATE' : 'NONE');
}
switch ($sCompress) {
case 'GZIP':
header('Content-Encoding: gzip');
$sContent = gzencode($sContent);
break;
case 'DEFLATE':
header('Content-Encoding: deflate');
$sContent = gzdeflate($sContent, 9);
break;
default:
//header('Content-Encoding: none');
}
return $sContent;
}

function durDebugEscape ($sText) {
return str_replace(array('--', '-->'), array('==', '==}'), $sText);
}

function durDebugVar ($mVar, $sPref = ' ') {
$Ret = '';
foreach ($mVar as $sKey => $sVal) {
$Ret .= "{$sPref}{$sKey} => ";
if (is_array($sVal)) {
$Ret .= "ARRAY (\n" . durDebugVar($sVal, $sPref.' ') . "{$sPref})\n";
}
else {
$Ret .= "{$sVal}\n";
}
}
return durDebugEscape($Ret);
}

function durLinkChanger ($sContent) {
global $aURFlip, $aURLRewriter, $aURLRewriterOnly;

if (DUR_SKIP_THIS) return $sContent;
if (strlen($sContent) < 500) return $sContent;
if (DUR_CACHE_REWRITED && file_exists($_SERVER['DOCUMENT_ROOT'].'/d-cache')) {

/// Модуль кеширования контента - start

$aDataStore = array();

$icachedays = DUR_CACHE_TIME*60*60*24;

$sMD5Content = md5($sContent); // MD5 от контента составляет часть имени файла кэша; это значение нужно для поиска готового к выводу контента в кеше
$sCacheFName = $_SERVER['DOCUMENT_ROOT'].'/d-cache/'.$sMD5Content.'.html.cache'; // имя файла кеша текущего контента
$sTimeFName = $_SERVER['DOCUMENT_ROOT'].'/d-cache/time.cache'; // имя файла данных кеша

$aStoredData = array();
$aStoredData = unserialize(file_get_contents($sTimeFName)); // массив из файла данных кеша
$timestamp = $aStoredData['d_scripts_time']; // время последнего изменения файлов d-seo и d-url-rewriter
$tOverallLenght = $aStoredData['cache_weight']; // Занимаемое кешем место на диске
$tLastClear = $aStoredData['last_clear_time'];
$dtimestamp = filemtime($_SERVER['DOCUMENT_ROOT'].'/d-url-rewriter.php'); // время изменения d-url-rewriter

// если есть файл d-seo, то берем его время изменения и записываем в переменную $dtimestamp максимум от времени последнего изменения скриптов
if (file_exists($_SERVER['DOCUMENT_ROOT'] . '/d-seo.php')) {
$dTMPtimestamp = filemtime($_SERVER['DOCUMENT_ROOT'].'/d-seo.php');
if ($dTMPtimestamp > $dtimestamp)
$dtimestamp = $dTMPtimestamp;
}

// если время последнего изменения, записанное в файл данных кеша отличается от реального, чистим весь кеш.
if ($timestamp != $dtimestamp || $tOverallLenght > DUR_CACHE_MEMORY || time() - $tLastClear > $icachedays) {
if($dh = @opendir($_SERVER['DOCUMENT_ROOT'].'/d-cache/')) {
while (($obj = readdir($dh)) !== false) {
if($obj=='.' || $obj=='..') continue;
@unlink($_SERVER['DOCUMENT_ROOT'].'/d-cache/'.$obj);
}
closedir($dh);
}
$aDataToStore['d_scripts_time'] = $dtimestamp; // записываем в массив время последнего изменения файлов d-seo и d-url-rewriter
$aDataToStore['last_clear_time'] = $tLastClear = time();
$aDataToStore['cache_weight'] = $tOverallLenght = 0;
file_put_contents($sTimeFName,serialize($aDataToStore));
}
}
// если есть соотв. файл в кеше, записываем его содержимое в $sContent
if (isset($sCacheFName) && file_exists($sCacheFName)) {
$sContent = file_get_contents($sCacheFName);
}

/// Модуль кеширования контента - break

else {

$iTimeStart = microtime(true);
$sContent = durGZCheck($sContent);
if (defined('DUR_CMS_TYPE') && (DUR_CMS_TYPE == 'JOOMLA') && isset($_SERVER['dur'])) {
$aURLRewriter = $_SERVER['dur'][0];
$aURFlip = $_SERVER['dur'][1];
$aURLRewriterOnly = $_SERVER['dur'][2];
unset($_SERVER['dur']);
}
$aURLRewriter = array_merge($aURLRewriter, $aURLRewriterOnly);
//Base path
if (preg_match('%<[^<>]*base[^<>]*href=[\'"]?([\w_\-\.\:/]+)[\'"\s>][^<>]*>%siU', $sContent, $aM)) {
$sBase = $aM[1];
$sBaseHref = $aM[1];
}
else {
$sBase = 'http://' . $_SERVER['HTTP_HOST'] . substr($_SERVER['REQUEST_URI'], 0, strrpos($_SERVER['REQUEST_URI'], '/'));
$sBaseHref = '';
}
$sBase = trim(str_replace(array('http://', 'https://'), '', $sBase), '/');
$aHosts = array($_SERVER['HTTP_HOST']);
if (substr($_SERVER['HTTP_HOST'], 0, 4) == 'www.') {
$aHosts[] = substr($_SERVER['HTTP_HOST'], 4);
}
if (defined('DUR_SUBDOMAINS') && DUR_SUBDOMAINS) {
$sExtHost = str_replace('www.www.', 'www.', 'www.' . DUR_SUBDOMAINS);
$aHosts[] = $sExtHost;
$aHosts[] = str_replace('www.', '', $sExtHost);
}
$aHosts = array_unique($aHosts);
$sBase = str_replace($aHosts, '', $sBase);
//href="?..."
if (defined('DUR_LINK_PARAM') && defined('DUR_ORIG_RURI') && DUR_LINK_PARAM) {
$sContent = preg_replace('%(href\s*=\s*[\'"]?)\s*([?#].*[#\'"\s>])%siU', '$1' . DUR_ORIG_RURI . '$2', $sContent);
}

if (defined('DUR_FIX_HTTP_HOST') && DUR_FIX_HTTP_HOST) {
$aHosts = array(DUR_FIX_HTTP_HOST);
$sFalseHost = str_replace('www.www.','','www.'.DUR_FIX_HTTP_HOST);
$sContent = str_replace('http://'.$sFalseHost, 'http://'.DUR_FIX_HTTP_HOST, $sContent);

}

//Main cicle
if (defined('DUR_MAIN_CYCLE'))
{
if (DUR_MAIN_CYCLE == 'str_replace' || DUR_MAIN_CYCLE == 'callback')
{
///Нормализация ссылок, все ссылки на сайте должны прийти к виду href="http://HTTP_HOST/REQUEST_URI" , т.е. в кавычках, без пробелов и с хостом
///Опасносте начинается здесь
$sContent = preg_replace('#\shref\s*=[\s]?([A-Za-z0-9\?\/][^\s]*)(\s|/>|>)#siU',' href="http://'.DUR_FIX_HTTP_HOST.'/$1"$2',$sContent);
$sContent = preg_replace('#\shref\s*=[\s]?"([A-Za-z0-9\?\/][^"]*)"#siU',' href="http://'.DUR_FIX_HTTP_HOST.'/$1"',$sContent);
$sContent = str_replace(array(
'http://'.DUR_FIX_HTTP_HOST.'/http://'.DUR_FIX_HTTP_HOST.'',
'http://'.DUR_FIX_HTTP_HOST.'//',
'http://'.DUR_FIX_HTTP_HOST.'/http',
'http://'.DUR_FIX_HTTP_HOST.'/mailto:',
'http://'.DUR_FIX_HTTP_HOST.'/javascript',
'http://'.DUR_FIX_HTTP_HOST.'/skype',
'http://'.DUR_FIX_HTTP_HOST.'/tel',
),
array(
'http://'.DUR_FIX_HTTP_HOST.'',
'http://'.DUR_FIX_HTTP_HOST.'/',
'http',
'mailto:',
'javascript',
'skype',
'tel',
),
$sContent
);
/// - end
}

if (DUR_MAIN_CYCLE == 'str_replace')
{
foreach ($aURLRewriter as $sFrom => $sTo) {
if (strpos($sContent, 'href="http://'.DUR_FIX_HTTP_HOST.$sFrom.'"'))
$sContent = str_replace('href="http://'.DUR_FIX_HTTP_HOST.$sFrom.'"','href="http://'.DUR_FIX_HTTP_HOST.$sTo.'"',$sContent);
}
}
else if(DUR_MAIN_CYCLE == 'callback')
{
function durMainCycleCallback($href) {
global $aURLRewriter;
if (isset($aURLRewriter[$href[1]])) return 'href="http://'.DUR_FIX_HTTP_HOST.$aURLRewriter[$href[1]].'"';
else return $href[0];
}

$sContent = preg_replace_callback('#href="http://'.DUR_FIX_HTTP_HOST.'([^"]*)"#siU','durMainCycleCallback',$sContent);
}
else if(DUR_MAIN_CYCLE == 'ortodox')
{
foreach ($aHosts as $sHost) {
foreach ($aURLRewriter as $sFrom => $sTo) {
$sContent = durReplaceLink ($sHost, $sBase, $sFrom, $sTo, $sContent);
}
if (!defined("DUR_FIRST_TIC")) define("DUR_FIRST_TIC", true);
}
}
else {
$sContent .= "<!--Nothing to do here!-->";
}
}

if (file_exists($_SERVER['DOCUMENT_ROOT'] . '/d-seo.php')) {
include_once($_SERVER['DOCUMENT_ROOT'] . '/d-seo.php');
}
if ((defined('DUR_BASE_ROOT') && DUR_BASE_ROOT) || !empty($sBaseHref)) {
if (strlen(DUR_BASE_ROOT) > 7) {
$sBaseHref = DUR_BASE_ROOT;
}
else {
$sBaseHref = (empty($sBaseHref) ? 'http://' . $aHosts[0] : $sBaseHref) . '/';
}
$sBaseHref = trim($sBaseHref, '/') . '/';
$sBaseHref = '<base href="' . $sBaseHref . '">';
$sContent = preg_replace('%<base[^>]+href[^>]+>%siU', '', $sContent);
$sContent = preg_replace('%(<head(\s.*)?>)%siU', "$1" . $sBaseHref, $sContent);
}
if (defined('DUR_ANC_HREF') && DUR_ANC_HREF) {
$sContent = preg_replace('%(href\s*=\s*["\']+)(#\w)%siU', '$1' . DUR_REQUEST_URI . '$2', $sContent);
}
if (defined('DUR_ROOT_HREF') && DUR_ROOT_HREF) {
$sContent = preg_replace('%(href\s*=\s*["\']*)\./(\w)%siU', '$1http://' . $_SERVER['HTTP_HOST'] . $sBase . '/$2', $sContent);
}
if (function_exists('durOtherReplacer')) {
$sContent = durOtherReplacer ($sContent);
}
}

if (DUR_CACHE_REWRITED && file_exists($_SERVER['DOCUMENT_ROOT'].'/d-cache')) {
/// Модуль кеширования контента - continue
file_put_contents($sCacheFName, $sContent);
// $aDataToStore = $aStoredData;
$aDataToStore['last_clear_time'] = $tLastClear;
$aDataToStore['d_scripts_time'] = $dtimestamp;
$aDataToStore['cache_weight'] = (int)$tOverallLenght + (int)strlen($sContent);
file_put_contents($sTimeFName,serialize($aDataToStore));
/// Модуль кеширования контента - end
}

if (defined('DUR_DEBUG') && DUR_DEBUG) {
$sContent .= "\n<!--\n";
if (defined('DUR_DEBUG_BEFORE') && DUR_DEBUG_BEFORE) {
$sContent .= " ===== VARS BEFORE REWRITE =====\n\n" . DUR_DEBUG_BEFORE;
}
$sContent .= "===== VARS AFTER REWRITE =====\n\nSERVER:\n" . durDebugVar($_SERVER) . "\n\nGET:\n" . durDebugVar($_GET) . "\n\nREQUEST:\n" . durDebugVar($_REQUEST) . "\n";
$sContent .= "\nCONSTANTS:\n" .
' DUR_REQUEST_URI => ' . durDebugEscape(DUR_REQUEST_URI) . "\n" .
' DUR_HTTP_HOST => ' . durDebugEscape(DUR_HTTP_HOST) . "\n" .
' DUR_FULL_URI => ' . durDebugEscape(DUR_FULL_URI) . "\n" .
' DUR_ORIG_RURI => ' . (defined('DUR_ORIG_RURI') ? durDebugEscape(DUR_ORIG_RURI) : 'NOT-SET') . "\n" .
' DUR_SEO_REQUEST_URI => ' . (defined('DUR_SEO_REQUEST_URI') ? durDebugEscape(DUR_SEO_REQUEST_URI) : 'NOT-SET') . "\n";

$iTimeNow = microtime(true);
$iTimeAll = ($iTimeNow - DUR_TIME_START) / 1000;
$iTimeContent = ($iTimeStart - DUR_TIME_START) / 1000;
$iTimeLinks = ($iTimeNow - $iTimeStart) / 1000;
$sContent .= "\nTIME:\n" .
' ALL: ' . number_format($iTimeAll, 8) . " sec. (100%)\n" .
' CMS: ' . number_format($iTimeContent, 8) . ' sec. (' . number_format($iTimeContent / $iTimeAll * 100, 2) . "%)\n" .
' DUR: ' . number_format($iTimeLinks, 8) . ' sec. (' . number_format($iTimeLinks / $iTimeAll * 100, 2) . "%)\n";

$sContent .= "\nD-Data:\n" . durDebugVar($aDataToStore);
$sContent .= '-->';
}

$sContent = durOutputCompress($sContent);
if (defined('DUR_FIX_CONTLEN') && DUR_FIX_CONTLEN) {
header('Content-Length: ' . strlen($sContent));
}

return $sContent;
}

//ХУК ДЛЯ СКАНИРОВАНИЯ КСЕНЕЙ
/*if (strpos($_SERVER['HTTP_USER_AGENT'],'Xenu') === 0) {
$sContent = preg_replace('#src\s*=\s*[\'"]?[^\s]+[\'"]#','',$sContent);
$sContent = preg_replace('#<link[^>]*>#','',$sContent);
$robotsname = 'http://'.DUR_FIX_HTTP_HOST.'/robots.txt';
$sRobots = file_get_contents($robotsname);
$aRobots = explode("\n",$sRobots);
foreach($aRobots as $sRule) {
if (strpos($sRule,'Disallow: ') === 0) {
$sRepFrom = array('Disallow: ', '*','?');
$sRepTo = array('', '[^>]*','\?');
$sRule = str_replace($sRepFrom,$sRepTo,$sRule);
if (!strpos($sRule,'$')) $sRule.= '[^>]*';
$sContent = preg_replace('#href\s*=\s*[\'"]?\s*'.$sRule.'[\#\'"\s>]#siU','',$sContent);
$sContent = preg_replace('#href\s*=\s*[\'"]?\s*http://'.$_SERVER['HTTP_HOST'].$sRule.'[\#\'"\s>]#siU','',$sContent);
}
}
}*/

function durOtherReplacer ($sContent) {

// // закрываем от индексации внешние ссылки
// function outerlinks($matches) {
// $sEq = false; //есть ли совпадения
// $res = $matches[0];
//
// $arMassIndex = array(
// 'www.tkrus.ru',
// 'www.tidici.com',
// 'www.thermoking.com',
// );
//
// foreach($arMassIndex as $item) {
// if (preg_match('%'.quotemeta($item).'%siU',$matches[0])) {$sEq = true; break;}
// }
//
// if ($sEq){ // если совпадение нашлось
// //если отсутствует rel, то добавляем его
// if (!strpos($res, 'rel=')) {
// $res = str_replace('<a ','<a rel=nofollow ',$res);
// //$res = str_replace('<A', '<a rel="nofollow" ', $res);
// }
// }
//
// return $res;
// }
//
// //закрываем исходящие ссылки в ноиндекс и нофоллоу
// $sContent = preg_replace_callback('%<a[^>]*href=[\'"]?https?://.*</a>%siU','outerlinks',$sContent);
//
// // красивый аналог
// $sContent = preg_replace('#href="(http://(?!www\.kovea\.ru|kovea\.ru)[^"]*)"#siU','href="$1" rel="nofollow"',$sContent);

// // удаление битых ссылок
// $aDelLNK=array(
// //ссылки для удаления (img, script, a, link)
// '/test',
// );
//
// foreach($aDelLNK as $del)
// {
// $sContent = preg_replace('%<(a|script) [^>]*(href|src)\s*=\s*[\'"]?\s*[^\'"]*' . durRExpEscape ($del) . '[#\'"\s][^>]*>(.*)</(a|script)[^>]*>%siU', '$3', $sContent);
// $sContent = preg_replace('%<img [^>]*src\s*=\s*[\'"]?\s*[^\'"]*' . durRExpEscape ($del) . '[#\'"\s][^>]*>%siU', '', $sContent);
// $sContent = preg_replace('%<link [^>]*href\s*=\s*[\'"]?\s*[^\'"]*' . durRExpEscape ($del) . '[#\'"\s][^>]*>%siU', '', $sContent);
// }

// // замена внешних ссылок загружаемых ресурсов
// $aReplaceImageLink = array (
// //ссылки для замены
// 'http://www.google.ru/images/img.jpg' => '/images/img.jpg',
// );
//
// foreach ($aReplaceImageLink as $before => $after) {
// $sContent = preg_replace('%(<img [^>]*src\s*=\s*[\'"]?\s*[^\'"]*)' . durRExpEscape ($before) . '([#\'"\s][^>]*>)%siU', '$1'. $after. '$2', $sContent);
// }

return $sContent;
}

/* Подключение в начале файла

// ЧПУ ---
if (file_exists($_SERVER['DOCUMENT_ROOT'] . '/d-url-rewriter.php')) {
include_once($_SERVER['DOCUMENT_ROOT'] . '/d-url-rewriter.php');
durRun ();
}
// --- ЧПУ

/* Для поддоменов неплохо было прописывать
RewriteCond %{HTTP_HOST} ^www.(.{4,}.nickon.ru)$
RewriteRule ^(.*)$ http://%1/$1 [R=301,L]

RewriteCond %{HTTP_HOST} ^(.{4,}).nickon.ru$
RewriteRule ^robots\.txt$ robots-%1.txt [L]
*/

/* Подключение с единой точкой входа
RemoveHandler .html .htm
AddType application/x-httpd-php .php .htm .html .phtml
php_value auto_prepend_file "d-url-rewriter.php"
*/

 

Я надеюсь, после такой жести у PHP-программистов глаза не вытекли, но кровоточат однозначно. Интересно было бы узнать, есть ли тут уязвимости? Если вы отлично шарите в PHP, напишите в комментах, пожалуйста, что нашли, да и в целом про код свои комментарии интересны.

Меня лично заинтересовала эта строчка:

define('DUR_SKIP_URLS', '#^/_?(admin|manag|bitrix|indy|cms|phpshop|varvara.php|captcha|jscripts/|modules|includes|templates|wp-admin)#siU'); //Skip URLS

Судя по всему, Demis Group использует данное решение не только с Joomla, но и в других популярных CMS, таких как Bitrix.

Но страшно не это. Страшно то, что заместо того, чтобы поменять заголовки в материалах или в шаблонах, Demis Group пишет ультра-костыль, который автоматически находит все найденные заголовки и обрабатывает их через свои preg_replace с жуткими регэкпами.

Далее, Demis Group проявила профессионализм, написав ВРУЧНУЮ файл sitemap.xml. Это при том, что в админке уже существовал компонент, который генерирует sitemap.xml автоматически из существующих пунктов меню. Интересно, оптимизатор заглядывал в админку?

Немного успокоившись от увиденного, я начал делать адаптивную версию. Но и тут меня ждал сюрприз. Дело в том, что я использую LESS-препроцессор для генерации CSS. Потому, что удобно и быстро. Догадываетесь, о чем я? Интуиция и тут не подвела. Бэкаплю текущий template.css, затем генерирую новый через LESS, делаю DIFF и что я вижу?

«Оптимизатор» проявил чудеса усердия! Он вставил переносы между каждыми правилами, после закрывающихся фигурных скобок. Честно, мне даже стало немного его жалко.

2015-05-15 13-15-13 Clipboard vs  Applications MAMP htdocs mtk-met.ru templates mtk delete-css template.css_

Естественно «оптимизатор» не знал, что такое normalize.css, поэтому свои правила он вставлял и выше и ниже и в сам normalize, который был импортирован при компиляции. При этом не обошлось без ошибок (подчеркнуты красным). Удивительно, но все браузеры переварили без проблем. 2015-05-15 13-13-12 template.css - mtk-met.ru - [ Applications MAMP htdocs mtk-met.ru]

На просьбы поменять все это безобразие, Demis Group всего лишь переподключили свои скрипты и они как-то заработали. На резонное замечание о костылях, Demis ответили, что скрипты нужны и что они выполняют важную задачу генерации заголовков. Что же, с этим сложно спорить. Все мои претензии в итоге оказались монологом со стеной. Demis Group, насколько я понял, не выгодно делать оптимизацию хорошо.

Какие выводы можно сделать из всего этого? Для себя лично я вынес вот что:

1) Если вы ведете проект как разработчик, но не занимаетесь продвижением, то имеет смысл пристально наблюдать за тем, как ведется продвижение, чтобы не столкнуться с описанным выше.

2) Всю компиляцию я делаю в Grunt, там же, отныне, использую minify для сжатия CSS и JS-файлов. Это немного уменьшит шанс того, что идиот начнет править файлы (хотя, мне попадались и такие).

UPD: Спустя пару недель, после того, как я переделал все CSS файлы в сжатые, Demis Group не постеснялись и их поменять. :/ Еще и CSS файлы, которые компилируются удалили. Действильно, зачем они нужны, если есть минифицированный? Клинический случай.

3) Рейтинг SEO компаний — пустой треп. Чем больше клиентов, тем больше текучка, качество на нуле, ответственность тоже. Я об этом догадывался, но теперь на личном примере убедился.

2015-05-15 13-52-27 ПРОДВИЖЕНИЕ САЙТОВ

2015-05-15 13-49-03 Seo-компания Demis Group

Если вы видите, что компания на своем сайте навязчиво начинает трясти своими «дипломами», «рейтингами» и прочей ахинеей, то это повод серьезно задуматься.

Как работают «оптимизаторы» в «SEO-компании №1» или небольшой отзыв на Demis Group: 38 комментариев

  1. Причем регулярки кривые, при появлении какого-то параметра в адресной строке не работает их продвижение, мета-теги и описания слетают.
    А подключают свои файлы d-seo.php, d-url-rewriter.php в ядре Битрикса, т.е. после обновлений Битрикса их продвижение тоже слетает, т.к. файлы затираются.
    Продвижению этой компании клиент остался недоволен, например, позиции подняли, посещалка стала побольше, но вся посещалка с каких-то форумов и новостных сайтов, с которых тупо обмениваются ссылками на товар, описанием товара, а конкретных покупателей вообще не прибавилось, заплатили больше 100 000 руб. за это продвижение, за такую сумму фрилансеры магазин в топ по продажам выведут, а не тупо в топ поисковика по бесполезным ключевикам.

  2. То же самое с моим клиентом (я программист). Был просто в шоке от такого подхода.

  3. Добрый вечер ВСЕМ! ВСЕМ кто занимается поиском компании для продвижения своего сайта. Очень хочется поделиться своей неудачной попыткой , и уберечь всех ВАС! Компания Demis Group — проходите стороной ее, бегите от НИХ!!!!!! Я после 8 мес. сотрудничества с этой компанией (продвижение сайта) просто бегом бежала от них — т.к. результате не было, испортили сайт!!! И в итоге спустя год, до сих пор переделывается все за ними. ЭТО УЖАСССССССССС а не компания!!!!
    Рейтинг их — пустой треп. Чем больше клиентов, тем больше текучка, качество на нуле, ответственность тоже. Я в этом убедилась на личном примере . И хочу уберечь всех ВАС!!!!!
    Работать с ними нельзя!!!! ЛЮДИ SOS!!!!

  4. Тоже столкнулся с этой ахинеей, 2 часа пытался поменять заголовок на главной, пока не начал проверять, не подменяется ли он через js. Нашёл d-seo.php, посмотрел, покрутил пальцем у виска….

    1. Тоже столкнулся. Час пытался понять почему Joomla не выводит стандартные Title + Description

      Полез в глубь движка, вывел все напрямую из /libraries/joomla/document/html/renederer/head.php

      htmlspecialchars($documentDescription)

      В результате на этом уровне получил нормальный вывод, той информации что есть в Joomla

      После этого понял что что-то надстраивается и переписывает уже после.

      Нашел эти файлы и честно говоря был в замешательстве.

  5. Здравствуйте!
    Я представитель компании Demis Group.
    На Вашем сайте размещены ссылки на наш ресурс.
    Прошу Вас снять эти ссылки.
    Спасибо!
    Заранее благодарен за скорый ответ

  6. Всегда интересно, а как вы сами представляете себе процесс оптимизации сайта ? Вот есть сайт на 30 000 страниц, вы думаете, что СЕО компания сядет и для каждой страницы в админке пропишет ТАЙТЛ и Н1 ? Ну это ведь не логично совсем. Можно сделать заголовки по формату и чаще всего это делается в Экселе, после чего все это нужно залить, а этим скриптом пользуются именно для заливки. Я конечно не защищаю их, но оптимизировать процессы тоже ведь нужно.
    П.С. про ссылки пишут, думаю, что есть проблема с ними, можно не убирать, а просто закрыть в noindex.

    1. Сергей, давайте сейчас не будем об этом. 30 тысяч страниц или 100 тысяч. Вы всерьез полагаете, что это будет вручную заполняться, ладно, не через админку, но через Excel??? Как вы лично это представляете? Я подозреваю, что для таких объемов уже необходимо пользоваться самописным решением, но не таким, как у Demis. Про все минусы реализации криворукость я написал в посте.

      Но в целом пост не об этом, а об отношении к клиенту. Возможно клиент остался бы с Demis, даже не взирая на мои доводы, но когда его динамят целый месяц на простейшую просьбу поработать и исправить тексты, тут, извините, не каждый выдержит.

      Кстати, здесь чуть выше комментарий написал сотрудник Demis’а. Попросил удалить ссылку на их сайт. Вот переписка:

      — Здравствуйте. О каких ссылках речь? И почему я должен их снимать?
      — Ссылки, ведущие на сайт компании Demis Group. Нам важно снять данные ссылки или хотя бы закрыть данные ссылки от индексации, так как наш сайт находится под санкциями поисковой системой.
      — Как вы помогли моему клиенту, так и я вам помогаю. Так что можно не буду удалять? Спасибо.

      Это еще хватает наглости просить об этом, такие простые ребята из Демиса, слов нет…

    2. Никто и не говорит об оптимизации каждой страницы, речь о том, что оптимизировать надо сайт без ущерба разработки, я после оптимизации такого сайта просто отказался с ним работать.
      Если оптимизировать сайт, то так, чтобы его можно было потом дорабатывать, а не отправлять в музей.

  7. За время продвижения сайта у демиса, никаких положительных тенденций не наблюдалось. Та же самая стратегия продвижения с непонятными файлами в корне. Бежали от них, аж волосы назад!!! Зато цены дешевые на продвижение. На каждый вопрос есть шаблонный ответ: «Ну у Вас неплохие факторы юзабилити и большое количество посетителей. Может Вам нужно добавить реквизиты в контакты, как это реализовано у конкурентов? или фотографии оригинальные или цены поменять или …»

  8. Таже история!
    Так что делать? Удалять эти файлы..или лучше обратится к специалисту?

        1. Если все заголовки, описания и пр. мета не важна для вас теперь, то снести файлы.

          Если описанное выше нужно, то посмотреть где в файлах они все это прописали, сохранить куда-нибудь и все сделать через админку Joomla, прописывать к соответствующим пунктам меню.

    1. Никогда не давайте оптимизаторам доступы! Все делайте через программиста и все правки согласовывайте с ним. Программист плохого не пожелает) Все современные движки имеют модули или шаблоны метаданных где можно за 5 минут прописать правила для всех страниц сайта, неважно какое количество. Однажду ко мне обратилась подруга которую продвигала крупная сео компания, за 4 месяца результата не было. Я решил проверить заголовки — ничего настроено не было, а когда проверил внешние ссылки — оказалось ни одной ! брали 4 месяца по 25 тыс тупо в карман. Текучка им позволяет так относится к клиентам.

  9. Мы сотрудничали с Demis Group, о чем очень сожалеем. На многие вопросы — ответы одни и те же. Кроме юзабилити, ничего больше ответить не могли. Долго отвечают на звонки письма. Период сотрудничества был просто невыносимым. Никакой работы не ощущалось и не делалось.

  10. Здравствуйте, так же есть негативный опыт работы с Demis Group, файлы в корне сайта просто убили проект редиректами и ещё бог знает чем. Не компания, а настоящий лохотрон. Последствия от их работы иду шлейфом уже год.
    Алексей, спасибо что подняли тему с этими ужасными файлами d-seo.php
    d-url-rewriter.php
    Если Вам не трудно, объясните, как перенести в .htaccess функцию редиректа из файла d-url-rewriter.php
    Вот собственно сам фрагмент:
    //Сквозные редиректы
    $aR301SkipCheck = array (
    ‘/index.php’=>’/’,
    ‘/shop/’=>’/’,

  11. По мимо все описанной чернухи (varvara.php — просто уморила), они еще и всему сайту назначили статус 410-Gone away.
    Видимо хотели одной страничке назначить, но, от не знания шаблонов тупо всему сайту в основном файле шаблона.

      1. tovarisch.su — вроде бы все подчистил, стутс нормальный вернул. Теперь ждать по новой, когда Яндекс все сново переиндексирует- СЕО оно такое

      1. Да потому что разработчик, который знает хоть что-нибудь кроме джумлы, никогда в жизни на этом корявом говне ничего делать не будет.

        1. И как ваше откровение относится ко всему выше написанному? Сказать то что хотели?

  12. Всем привет !
    Ребята «костыль им в попку», что блин ДЕМИС плагин не может написать ….
    ДИЧь…

    Собственно мое мнение:
    я тоже пользуюсь идеей для своих целей и ресурсов (и она стара как мир сео), но не в таком (ужасно неконтролируемом варианте) …
    поясню …
    через urlrewrite можно тупо трафик в отказы гнать(с других клиентов и их сайтов), и где там продвижение ????

    Я сам не контора, работаю на себя и хрен поделюсь с кем своими разработками :D

    У меня работает так:

    есть ресурс (сбора позиций через yaxml), там же есть возможность хранить и проверять оптимизацию сайта (ов), пояснять лень, условно я написал свой инструмент и плагины (joomla в том числе, заняло 20 мин).

    Каждый день сервис опрашивает места по списку и пока ждет по таймауту, бьет страницу на наличие текста и прочих прелестей, если нету, пушит через плагин в cms (все изменения заносятся корректно).

    P.S. Не доверяйте свои ресурсы криворуким!!!

    P.P.S. поправь фавиконку

  13. Спасибо за развернутый пост. Я еще поначалу расстраивалась, что туда не попала на работу, потом проанализировав, поняла, что мое тестовое задание подложили кому-то «своему», а мне только, что не подходите и встречаться(собеседование проводить) с вами не хотят

  14. 1. CMS Joomla сам по себе кривой и все меньше и меньше людей его используют.
    2. Мало того, те модули которые есть, в том числе по размещению метатегов работают криво. Например вместо размещения метатегов для конкретной страницы, размещаются метатеги и для страниц текущей подкатегории. Подобное у меня было на самописках, на старом Drupal.
    3. Подобные SEO-модули (о ужОсс!!!) используют и другие интернет-агентства как федеральные, так и местные. Ну не позволяют некоторые CMS работать с SEO полноценно.
    Надо разбираться в каждом конкретном случае, а не поливать г»вном. Хотя справедливости ради, из-за этого модуля бывает нарушается функциональность сайта.

    Вы попробуйте запустить модуль Битрикса в Ворде или наоборот. Почему Вы считаете, что можно так просто сделать универсальный модуль, где будет работать нормально для всех CMS.

    4. Дай бог, что подрядчик не разместил новый код без помечаний в середине CSS файла. Не обязан подрядчик разбираться в LESS и кто вам мешал перенести новый блок на CSS в LESS преобразовав предварительно ?

    1. 1. Это ваше личное мнение неподтвержденное статистикой. Joomla до сих пор на втором месте по использованию после WordPress.
      2. Вижу что вы не разобрались в вопросе иерархии меню / материалов / общих настроек и голословно заявляете что работает криво.
      3. Позволяют. Другое дело что проще персонал обучить работать с одним инструментом, нежели учить возможности всех CMS.
      4. Никто не мешал. Проблема не в том что заказчик не умеет, а в том что он ломает стили и не предупреждает об этом.

  15. Коллеги, а не может ли быть такого, что эти файлы выполняют некую особую функцию? Например, если клиент уходит от Демиса, то они обнуляют ему всё, что сделали за время своей работы и у клиента остаётся сайт в том же виде, в каком он был и до Демиса?
    Эту версию я слышал уже от нескольких толковых сеошников. А мой сайт после ухода от Демиса как-то резко просел без видимых внешних причин (они, конечно, сняли несколько внешних ссылок, но просадка была резкая и значительная, вряд ли от снятия пары ссылок).

  16. Аффтар порет херню!
    Варвара никогда не могла редактировать файлы на хостинге. Однако в паре с админером штука страшная.
    По поводу urlrewritter — это единственный вариант внести тонну правок на сайт относительно быстро. Когда конвеер, то другого варианта нет.

Добавить комментарий для Alexey Отменить ответ

Ваш адрес email не будет опубликован. Обязательные поля помечены *

Этот сайт использует Akismet для борьбы со спамом. Узнайте, как обрабатываются ваши данные комментариев.