פרוטוקול אי הכללת רובוטים – הבדלי גרסאות

תוכן שנמחק תוכן שנוסף
Matanyabot (שיחה | תרומות)
מ בוט: מתקן הפניות
מ שוחזר מעריכות של Matanyabot (שיחה) לעריכה האחרונה של Luckas-bot
שורה 1:
{{שם שגוי|title=robots.txt}}
'''פרוטוקול robots.txt''' הוא מוסכמה המאפשרת למנהל [[אתר אינטרנט]] ([[מנהל אתר אינטרנט|Webmaster]]) להגדיר כיצד יסרק האתר על ידי [[מנוע חיפוש|מנועי חיפוש]] ו[[בוט|בוטים]] אחרים המצייתים לפרוטוקול. הגדרה זו מתבצעת באמצעות קובץ בשם '''robots.txt''' ומכיל תחביר מיוחד ונמצא בספריית השורש (root) של האתר. פרוטוקול זה משמש בעיקר להסתרה של חלקים מסוימים באתר ממנועי חיפוש.
 
על ידי שימוש בפרטוקול זה אפשר להורות למנועי חיפוש לסרוק דפים באתר או לא לאנדקס אותם.