Etxt биржа копирайтинга

12/04/2014

Естественно для того, чтобы зарабатывать в сети нужно работать. Не надо питать иллюзий касательно того, что лёгкий заработок в интернете — это написание статей. Это просто самый доступный способ заработать в интернете. Заработать в сети легко получится только с наработанным опытом. Читать запись полностью »

Robots txt пример

Сам файл подлежит ручном доработке! Его стандартный вариант содержит директории со слешем в конце строки:


Disallow: / includes /
Disallow: / misc /
Disallow: / modules /

Иногда в индекс поисковиков попадают такие ссылки … / includes … / misc … / modules (без «/»), поэтому нужно забрать все слеши в конце названия каждой директории. В самом низу прописываем «host» с доменом без http:// и указываем «sitemap».

Примечание: User-agent * — это обращение к важнейшим ботов (YandexBot, Googlebot), которые заходят на эту страницу.