Чистка базы allsubmitter от мертвых ссылок
Пошаговое руководство как вычистить вашу базу allsubmitter’a от мертвых каталогов. Под мертвым я понимаю такой каталог, у которого даже нет главной страницы.
- сохранить свой блек лист в файл, чтоб не попортить
- экспортировать твою базу в txt
- полученный список скормить http://mosk.pijj.ru/get_urls.php (многие базы содержат всякий текстовой мусор)
- полученный список прогнать через http://mosk.pijj.ru/get_domains.php (получишь только доменный имена)
- сохранить в txt файл и импортировать в сабмиттер в отдельную категорию сняв все галочки в окошке импорта
- выделить все в этой категории и жмякнуть ссылочку “определить параметры сайта” количество потоков >40 (при 100 засирает два мегабита на так) и оставив только галочку “ответ сервера”
- ждем окончание работы
- сортируем результат по колонке “ответ сервера”
- все что отличается от 200 удаляем в блек лист
- чистим и удаляем эту нашу тестовую категорию (больше не понадобится) и
- жмякаем по ссылке “чистка каталогов” и из нашей базы удаляется все что есть в блек листе (т.е. наши не отвечающие сайты)
- восстанавливаем блек лист
Скачать скрипты get_domains.php, get_urls.php
P.S. пофиксил мелкий баг
| 
опубликовано: Jun 10, 06:47 PM