По результатам проверки в окно браузера будет загружен отчет, один из вариантов которого представлен на рис. 2.42. Исправьте ошибки в файле robots.txt, загрузите его на сервер и вновь проверьте при помощи службы Robots.txt Validator. В конце концов, получаемый вами отчет должен состоять всего из двух фраз:
Рис. 2.42. Отчет службы Robots.txt Validator
Анализатор Keyword Density Analyzer
Служба
В поле URL (including the http://) (URL-адрес, включая http://) введите адрес исследуемого документа. Раздел Include the following (Включить следующее) состоит из трех флажков, которые позволяют вести анализ, используя дополнительно, кроме текста, тэги:
• заголовка TITLE – флажок Include Page Title;
• ключевых слов NAME="keywords" – флажок Include Meta tag Keywords;
• описания NAME="description" – флажок Include Meta tag Description. В разделе Word Length (Длина слова) укажите параметр Ignore words of … characters in length or less (Игнорировать слова, состоящие из … и менее символов).
Раздел Word Filters (Фильтры слов) дает возможность воспользоваться следующими настройками:
• отметить опцию Use our default stop word list (Использовать наш список стоп-слов);
• ввести в самом нижнем поле формы перечень слов (разделенных пробелами или расположенных каждое на отдельной строке), которые, в зависимости от положения переключателя, будут или исключены из рассмотрения (Ignore the following word list – Игнорировать следующий список слов), или, наоборот, будут анализироваться только эти слова (Include only the following word list – Включить список только следующих слов).
Отметьте, что рассматриваемым сервисом, как и сервисом SpiderView Density Analyzer, обрабатывается только одна страница – независимо от того, указана ли ссылка на файл, каталог или весь сайт, – та, которая будет загружена сервером по умолчанию.
Ссылка в правом нижнем углу формы [reset] (Сброс) предназначена для очистки полей формы.
Чтобы сформировать отчет, щелкните по кнопке Analyze It (Провести анализ). После обработки в браузер будет загружен отчет, состоящий из нескольких частей. Его первая часть показана на рис. 2.44. В нее включены три таблицы со списками:
Вильям Л Саймон , Вильям Саймон , Наталья Владимировна Макеева , Нора Робертс , Юрий Викторович Щербатых
Зарубежная компьютерная, околокомпьютерная литература / ОС и Сети, интернет / Короткие любовные романы / Психология / Прочая справочная литература / Образование и наука / Книги по IT / Словари и Энциклопедии