متا ربات چیست؟

متا رباتMeta Robots/ˈmet.ə ˈroʊ.bɑːts/متا روباتس
۱ محتوا · آخرین به‌روزرسانی:

متا ربات یک تگ HTML است که به خزنده‌های موتورهای جستجو می‌گوید چگونه با یک صفحه خاص رفتار کنند - آیا آن را ایندکس کنند و آیا پیوندهای آن را دنبال کنند.

تعریف دقیق

این تگ در «» صفحه زندگی می‌کند و دستورالعمل‌هایی مانند «index»، «noindex»، «دنبال کردن»، و «nofollow» به‌علاوه موارد اضافی مانند «noarchive» یا «max-snippet» را دریافت می‌کند. برخلاف robots.txt، که خزیدن در کل سایت را کنترل می‌کند، ربات‌های متا در سطح صفحه کار می‌کنند و نمایه سازی را کنترل می‌کنند. همین دستورالعمل‌ها را می‌توان به عنوان یک هدر X-Robots-Tag HTTP برای فایل‌های غیرHTML مانند PDF ارسال کرد.

مثال

یک فروشگاه آنلاین ایرانی ممکن است "" را به صفحات نتایج جستجوی داخلی خود اضافه کند. Google هنوز پیوندها را روی آنها می‌خزد، اما صفحات نازک و تکراری از فهرست خارج می‌شوند.

چرا اهمیت دارد

ربات‌های متا ابزار اصلی شما برای دور نگه داشتن صفحات کم ارزش از نتایج جستجو، محافظت از کارایی خزیدن و جلوگیری از رتبه‌بندی محتوای تکراری یا خصوصی است.

محتواهای این برچسب ۱ محتوا

اخبار مرتبط

سوالات متداول

تفاوت بین ربات‌های متا و robots.txt چیست؟

Robots. txt خزنده‌ها را از واکشی URLs مسدود می‌کند، در حالی که تگ متا روبات‌ها کارهایی را که پس از واکشی یک صفحه انجام می‌دهند، مانند فهرست کردن آن یا دنبال کردن پیوندهای آن، کنترل می‌کند. نکته مهم، صفحه مسدود شده در robots.txt نمی‌تواند تگ noindex خود را به Google نشان دهد، بنابراین این دو نباید برای یک URL ترکیب شوند.

چه زمانی باید از noindex در یک صفحه استفاده کنم؟

برای صفحاتی که ارزش کمی‌در نتایج جستجو دارند، از noindex استفاده کنید: صفحات جستجوی داخلی، صفحات تشکر، آرشیوهای برچسب نازک، یا صفحات ورود به سیستم. این صفحه برای بازدیدکنندگان در دسترس باقی می‌ماند، اما پس از خزیدن مجدد برچسب، از فهرست Google حذف می‌شود.