[Shai]

מישהו אמר לי לשים איזה קוד בrobots.txt
הנה הקובץ:
http://www.webtutorials.co.il/robots.txt

כל מה שעם /tag לא יוצא מגוגל ושמתי שם את הDisallow הזה של /tag..
מה לעשות?

לגוגל לחץ כאן

[Shai]

בבקשה תעזרו, זה דחוף.

[אדיר]

תשים את זה למעלה, מתחת ל- User-agent: *.

[Shai]

שמתי, מקווה שיעבוד.
נראה בסריקה הבאה.

[Shai]

לא עזר, האתר נסרק בגוגל ועדיין יש /tag....,
כל ה"קידום" שהיה, הלך...
ירדתי בכל הביטויים באיזה 10 מקומות, אפילו שלא הייתי במקום "אי אי אי"..

זה בכלל טוב הrobots.txt ששמתי?

User-agent: *
Disallow: /tag
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

# Google AdSense
User-agent: Mediapartners-Google*
Disallow:
Allow: /*

# Internet Archiver Wayback Machine
User-agent: ia_archiver
Disallow: /

# digg mirror
User-agent: duggmirror
Disallow: /