Концентрировать на robots.txt специфически для Wordpress

¢m „ ¬â ‚ Iââ идя поговорить о создании robots.txt специально для вашего хозяйничают собственной личностью, котор блога wordpress, помочь crawlers двигателя поиска к самому лучшему индексу ваше место и помочь с с оптимизированием двигателя поиска. Должно к недавнему содержимому дублированию управляет в индексе google, вы хотите убеждаться что ¢re „ ¬â ‚ youââ представляя одну версию ваших столбов/страниц, и также что ¢t „ ¬â ‚ isnââ crawler пробуя к классификационным страницам для этого действительно на всех. Страницы любят trackbacks, admin, включают, и ваши rss подают.

Он кажется от читать много блоги и оприходований которые не каждое соглашается о страницах категории. ¢ve „ ¬â ‚ Iââ услышало что некоторые говорит что они хотят их категорию вызывают индексировано - и что помощь они. Я думаю что это кажется к быть в зависимости от местом, и как вы маркировали вещи. Иногда на некоторые из моих мест я иду за борт на маркировать, поэтому я кончаюсь вверх с тонной страниц категории. И также, много времен i маркирует вещи в много различных категорий. Имеющ столб имейте ¢s „ ¬â ‚ itââ имейте страницу, перечислена на титульном лист, и кажется, что будет ¢t „ ¬â ‚ wouldnââ 5 страниц категории очень хорошим планом для хорошего seo и очевидной установки для содержимого дублирования (в моих глазах). Настолько как раз быть безопасен, я фильтрую вне мои страницы категории слишком в моем robots.txt.

Во-первых, я читаю сверх или Lorelle на Wordpress (соединении в sidebar) тот теперь google имеет включение sitemap, и вы можете добавить эту линию к вашему

архив robots.txt:
Потребител-агент: *
Sitemap: http://www.jtpratt.com/sitemap.xml

и вы не более длиной должны представить ваше sitemap (crawler знает чего сделать с им). Так это новый вход для меня. Я также читаю что вы можете сказать crawler изображения google куда к (и не) пойдите в ваше место, поэтому я добавил это:

# Googlebot-Изображение средство изображения для google
Потребител-агент: Googlebot-Изображение
# позвольте всему
Позвольте: /*

Я также увидел который может сделать эти же для crawler adsense, который не имеет ничего сделать с индицированием, но если вы используете adsense, то оно было бы франтовск для того чтобы иметь это также:

# это средство объявления для google
Потребител-агент: Mediapartners-Google*
# позвольте всему
Позвольте: /*

Так эти все новые входы для меня. Теперь ежедневные подсказки блога (соединение в sidebar) имеют быструю, вниз и пакостный столб на архиве robots.txt для wordpress. ¢s „ ¬â ‚ Itââ довольно просто:

Потребител-агент: *
Disallow: /wp-
Disallow: /feed/
Disallow: /trackback/

Я вроде люблю то, но он ¢t „ ¬â ‚ doesnââ кажется, что покрывает все. Техник ¢s „ ¬â ‚ Filiââ имеет статью на seo wordpress для wordpress слишком, и я люблю его идеи. Так я закончился вверх с что-нибудь подобное:

# Disallow все директории и архивы внутри
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/

# Disallow все архивы кончаясь с этими выдвижениями
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$

# Disallow питания, категории и trackbacks столба parsing индивидуальные.
Disallow: /trackback/
Disallow: /feed/
Disallow: /category/

Для правого или неправильного, я имею один раздел для:

Потребител-агент: Googlebot

и другой раздел для:

Потребител-агент: ia_archiver
Потребител-агент: Самокат

Потребител-агент: Atomz
Потребител-агент: Быстро-WebCrawler
Потребител-агент: ArchitextSpider
Потребител-агент: Googlebot
Потребител-агент: Slurp.so/1.0
Потребител-агент: Slurp/2.0j
Потребител-агент: Slurp/2.0-KiteHourly
Потребител-агент: Slurp/2.0-OwlWeekly
Потребител-агент: Slurp/3.0-AU

Потребител-агент: UltraSeek
Потребител-агент: MantraAgent
Потребител-агент: Lycos_Spider_ (T-Rex)
Потребител-агент: MSNBOT/0.1
Потребител-агент: Gulliver
Потребител-агент: Scrubby/
Потребител-агент: ZyBorg

Если вы имеете любые комментарии, то улучшения, или предложения - пожалуйста прокомментируйте теперь!

Родствено:

• Передовые практики для создания новый блог Wordpress в 60 минутах или

8-ое июня 2007 | Вывешено в seo wordpress, wordpress | Отсутствие комментариев