# מה זה קובץ רובוטים? | מה זה Robots.txt?

מה זה קובץ רובוטים (Robots.txt)? קובץ טקסט ב-yourdomain.com/robots.txt שמורה לבוטים אילו עמודים לסרוק ואילו לא. Allow/Disallow לפי נתיב.

## איך זה עובד בפועל

Robots.txt הוא ה-'שוטר בכניסה' לאתר. אתם אומרים לגוגל: 'כן לסריקת מוצרים ובלוג, לא לסריקת Admin ולFaceted Navigation'. בחנויות גדולות — Robots.txt חוסך Crawl Budget יקר ומפנה אותו לתוכן שחשוב לדרג.

## קשרים למדדים נוספים

- Crawl Budget — Robots.txt שומר על Crawl Budget
- Sitemap — Robots.txt מציין מיקום Sitemap
- Technical SEO — Robots.txt = כלי טכני בסיסי
- Index Coverage — Robots.txt משפיע על מה שנאנדקס

## טעות נפוצה

'Disallow = הדף לא יאונדקס'. שגוי. Disallow מונע סריקה, לא אינדוקס. דף שNot Allowed בRobots.txt עדיין יכול להאנדקס אם יש קישורים אליו מאתרים אחרים. לחסימת אינדוקס — noindex Meta Tag, לא Robots.txt.

## איך מתקנים

שגיאות ב-Robots.txt? (1) GSC → Robots Testing Tool — בדקו שהקובץ תקין, (2) בדקו שלא חסמתם בטעות דפים חשובים (קרה לכמה חנויות שחסמו את כל האתר), (3) Verify: /robots.txt ב-דפדפן — קריא ונכון? (4) Googlebot עשוי להתעלם מRobots.txt — noindex = אמין יותר לחסימה.

## דוגמה מהשטח

חנות אלקטרוניקה: Robots.txt חסם בטעות /product/ (אמורים לחסום רק /product/filter/). גוגל הפסיק לסרוק דפי מוצר. Organic Traffic ירד 60% בחודש. GSC → Index Coverage גילה הבעיה. תיקון + Re-crawl Request: שחזור 8 שבועות.

## מאיפה להתחיל

בדקו Robots.txt מיד אחרי Site Launch וכל פעם שמשנים URL Structure. הכלל: אל תחסמו מה שלא הכרחי. בחנויות גדולות: חסמו Faceted Navigation + Admin + Internal Search Results.

---

קטגוריה: SEO · מתוך [מילון ה-KPI של Jimmy OS](https://jimmy-os.co.il/glossary/kpi.md) · עמוד מקור: https://jimmy-os.co.il/glossary/kpi/robotstxt