שינויים קיצוניים ב-robots.txt עלולים לגרום לתופעות משונות בסריקת האתר בגוגל. אסור להגדיר לזמן קצר את robots.txt בכדי שיסרוק רק דפים באתר שפחות נסרקים. ההמלצה היא להכניס טקסט וקישורים בעמוד הבית של דפים אלו ובכך לאותת לגוגל לסרוק את דפים אלו. הכנסת קישורים לעמוד הבית, שהוא בדרך העמוד הכי חזק באתר ורוב הגולשים מגיעים לאתר דרך דף זה. פעולה זו תעזור לכם לקדם עמודים שפחות נסרקים בגוגל.
מט קאטס מנהל את ערוץ GoogleWebmasterHelp של גוגל ומעלה כל שבוע סרטון שעונה על שאלות הגולשים בענייני גוגל וקידום אתרים. מומלץ מאוד לעקוב אחר ערוץ זה בכדי לקבל עידכונים על ההתפתחויות הטכנולוגיות בגוגל הקשורות לקידום אתרים.
