Запретить роботов на некоторое время

Я буду размещать сайт wordpress на живом сервере. Но пока это будет в тестовой фазе. Как я могу сказать роботам не индексировать сайт до тех пор?


wordpress indexing robot
person esafwan    schedule 03.10.2010    source источник

Ответы (4)


arrow_upward
2
arrow_downward

Вставьте файл robots.txt «запретить все» (с относительно коротким заголовком expires) и отредактируйте его. когда вы будете готовы к индексации.

person Quentin    schedule 03.10.2010

arrow_upward
2
arrow_downward

Используйте robots.txt, чтобы запретить, а затем разрешить, когда ваш сайт будет запущен.

person Dave McClelland    schedule 03.10.2010

arrow_upward
1
arrow_downward

Если вы используете WordPress 3.x, вы можете перейти на страницу администрирования в меню Settings, затем нажать Privacy. Там есть возможность заблокировать роботов.

person Kevin Lacquement    schedule 03.10.2010

arrow_upward
1
arrow_downward

Также отключите RSS-канал, так как Google использует RSS для индексации. Используйте WordPress › Absolute Privacy « Плагины WordPress или используйте в functions.php:

function fb_disable_feed() {
    wp_die( __() );
}

add_action('do_feed', 'fb_disable_feed', 1);
add_action('do_feed_rdf', 'fb_disable_feed', 1);
add_action('do_feed_rss', 'fb_disable_feed', 1);
add_action('do_feed_rss2', 'fb_disable_feed', 1);
add_action('do_feed_atom', 'fb_disable_feed', 1);
person markratledge    schedule 03.10.2010