Het concentreren op robots.txt zich specifiek voor Wordpress

Iâ⠂ die ¬â „ ¢m over vestiging robots.txt vooral voor uw ontvangen zelf spreken wordpress blog, de kruippakjes van de onderzoeksmotor gaat helpen om uw plaats het best te indexeren en met met de optimalisering van de onderzoeksmotor helpen. wegens de recente regels van de inhoudsverdubbeling in de googleindex, wilt u ervoor zorgen dat youâ⠂ ¬â die „ ¢re vereist één versie van uw posten/pagina's voorlegt, en ook dat het kruippakje isnâ⠂ die ¬â „ ¢t pagina's probeert te indexeren het werkelijk aan bij allen. De pagina's zoals trackbacks, admin, omvat, en uw rss voeden.

Het schijnt van het lezen van vele blogs en het posten dat niet iedereen over categoriepagina's akkoord gaat. Iâ⠂ ¬â „ ¢ve hoorde sommigen dat zij willen hun geïndexeerde categoriepagina's zeggen - en dat hulp hen. Ik denk het om van de plaats schijnt af te hangen, en hoe u dingen hebt geëtiketteerdg. Soms op sommige van mijn plaatsen ga ik overboord bij het etiketteren, zo beëindig ik omhoog met een ton categoriepagina's. En ook, vaak I markeringsdingen in vele verschillende categorieën. Hebbend een post hebben itâ⠂ ¬â „ ¢s de eigen pagina, op de voorpagina wordt vermeld, en 5 categoriepagina's wouldnâ⠂ ¬â „ ¢t schijnen een zeer goed plan voor goede seo en een duidelijke opstelling voor inhoudsverdubbeling (in mijn ogen) te zijn. Zo enkel om veilig te zijn, filtreer ik uit mijn categoriepagina's ook in mijn robots.txt.

Eerst, las ik of Lorelle op Wordpress door (verbinding in sidebar) die google sitemap nu opneming heeft, en u deze lijn aan uw kunt toevoegen

robots.txt dossier:
Gebruiker-agent: *
Sitemap: http://www.jtpratt.com/sitemap.xml

en u moet niet meer uw sitemap (het kruippakje zal wat om met het weten te doen) voorleggen. Zo is dit een nieuwe ingang voor me. Ik las ook dat u het kruippakje van het googlebeeld kunt vertellen waar te (en niet) gaat in uw plaats, zodat voegde ik dit toe:

# Is het googlebot-Beeld het beeld bot voor google
Gebruiker-agent: Googlebot-beeld
# Sta alles toe
Sta toe: /*

Ik zag ook die het zelfde voor het adsensekruippakje kan doen, dat niets heeft met het indexeren te doen, maar als u adsense gebruikt zou het slim zijn om dit eveneens te hebben:

# Is dit de advertentie bot voor google
Gebruiker-agent: Mediapartners-Google*
# Sta alles toe
Sta toe: /*

Zo zijn dit allen nieuwe ingangen voor me. Nu blog heeft de uiteinden (verbinding in sidebar) dagelijks snel, onderaan en een vuile post op een robots.txt dossier voor wordpress. Vrij eenvoudige Itâ⠂ ¬â „ ¢s:

Gebruiker-agent: *
Verbied: /wp-
Verbied: /feed/
Verbied: /trackback/

I soort gelijkaardig dat, maar het doesnâ⠂ ¬â „ ¢t schijnt om alles te behandelen. Technologie ¬â „ ¢s van Filiâ⠂ heeft een artikel ook op wordpressseo voor wordpress, en ik houd van zijn ideeën. Zo beëindigde ik omhoog met iets in die aard:

# Verbied binnen alle folders en dossiers
Verbied: /cgi-bin/
Verbied: /wp-admin/
Verbied: /wp-includes/

# Verbied alle dossiers beëindigend met deze uitbreidingen
Verbied: /*.php$
Verbied: /*.js$
Verbied: /*.inc$
Verbied: /*.css$

# Verbied het ontleden individueel postvoer, categorieën en trackbacks.
Verbied: /trackback/
Verbied: /feed/
Verbied: /category/

Voor juist of verkeerd, heb ik één sectie voor:

Gebruiker-agent: Googlebot

en een andere sectie voor:

Gebruiker-agent: ia_archiver
Gebruiker-agent: Autoped

Gebruiker-agent: Atomz
Gebruiker-agent: Snel-WebCrawler
Gebruiker-agent: ArchitextSpider
Gebruiker-agent: Googlebot
Gebruiker-agent: Slurp.so/1.0
Gebruiker-agent: Slurp/2.0j
Gebruiker-agent: Slurp/2.0-KiteHourly
Gebruiker-agent: Slurp/2.0-OwlWeekly
Gebruiker-agent: Slurp/3.0-Au

Gebruiker-agent: UltraSeek
Gebruiker-agent: MantraAgent
Gebruiker-agent: Lycos_Spider_ (t-Rex)
Gebruiker-agent: MSNBOT/0.1
Gebruiker-agent: Gulliver
Gebruiker-agent: Scrubby/
Gebruiker-agent: ZyBorg

Als u om het even welke commentaren hebt, verbeteringen, of suggesties - gelieve te becommentariëren nu!

Verwant:

• Beste praktijken voor Vestiging een Nieuwe Wordpress blog in 60 Minuten of minder

8 juni, 2007 | Gepost in wordpressseo, wordpress | Geen Commentaren