Задача файла robots.txt очень проста - запретить для роботов поисковиков сканировать ваш сайт, или некоторые его части. Работает это следующим образом, перед тем как сканировать тот или иной сайт, роботы ищут именно этот файл, в котором есть указания, как именно владелец сайта указал прерогативы сканирования содержания сайта, или сайта целиком.
Добавлено :
2010-09-23 16:50
Автор :
rznasa
Просмотры :
307
Основой (канонический) домен, является тот который будет индексироваться поисковыми системами. То есть ссылки на ваш сайт могут быть двух типов с префиксом www и без него. Основной же домен будет тот, который вы выбрали для отображения в результатах поиска.
Добавлено :
2010-09-23 03:04
Автор :
rznasa
Просмотры :
342
XML файл Sitemap (или просто Sitemap) являет собой список всех страниц сайта. Зачем же нужен этот файл? С помощью его поисковые машины сканируют сайт без каких либо сложностей не упуская при этом ни одной страницы. В сервисах для вебмастеров как в Google так и в Yandex есть инструмент который позволяет добавить ваш Sitemap. Это гарантирует что поисковый бот не упустит страниц на вашем сайте , которые были упущены в процессе простого сканирования.
Добавлено :
2010-09-22 19:56
Автор :
rznasa
Просмотры :
232
Сегодня, а именно 22.09.2010 произошел очередной АП ТИЦ. Наш интернет-проект можно поздравить с первым небольшим достижением: у нас теперь ТИЦ10, как говориться, мелочь, но приятно!
Добавлено :
2010-09-22 05:32
Автор :
excalibur
Просмотры :
247
Поисковые боты Googlebot способны, без каких либо трудностей, сканировать большинство типов файлов. Ниже представлен перечень наиболее распространенных из них
Добавлено :
2010-09-21 22:42
Автор :
rznasa
Просмотры :
557
В большинстве случаях поисковая оптимизация заключается в некоторых небольших изменениях в содержимому веб-сайта, а иногда и в его структуре (о возможностях Ваших CMS перемещать блоки/модули страницы Вы сами лучше знаете, а о волшебстве CSS поговорим как-то в другой раз). Говоря о “большинстве случаях” и “небольших изменениях” имел ввиду, что по умолчанию сайт разрабатывался командой профессионалов, после чего и вправду нужно немножко подправить - и с внутренней оптимизацией все в порядке.
Добавлено :
2010-09-18 05:41
Автор :
rznasa
Просмотры :
432