# robots.txt (robots.txt)

> קובץ בשורש האתר שמנחה סורקים אילו חלקים לא לסרוק.. הקובץ מנהל סריקה, לא הסתרה: עמוד שחסום בו עדיין יכול להופיע בתוצאות אם מקושרים אליו. להסתרה אמיתית

העמוד המלא: https://oversight.co.il/glossary/robots

## ההסבר

הקובץ מנהל סריקה, לא הסתרה: עמוד שחסום בו עדיין יכול להופיע בתוצאות אם מקושרים אליו. להסתרה אמיתית משתמשים בהנחיה אחרת או בהרשאה.

זו גם אחת התקלות היקרות שיש: שורה אחת שנשארה מסביבת הפיתוח יכולה לחסום אתר שלם מהאינדקס.

## מונחים קשורים

- [SEO](https://oversight.co.il/glossary/seo.md): קידום אתרים אורגני: כל מה שגורם לאתר להופיע גבוה בתוצאות החיפוש בלי לשלם על מודעה.
- [Sitemap](https://oversight.co.il/glossary/sitemap.md): קובץ שמפרט למנועי החיפוש אילו עמודים קיימים באתר ומתי כל אחד מהם עודכן.

## פתרונות

- [שימור SEO במעבר אתר](https://oversight.co.il/solutions/seo-migration.md)