بایگانی برچسب: فایل Robots.txt چیست

فایل Robots.txt چیست؟

توسط طراحی سایتدر 26 اکتبر 2020

فایل Robots.txt چیست؟ فایل Robots.txt چیست؟ یک Robots.txt درواقع یک فایل متنی ساده است که در مسیر اصلی فضای سایت شما، یا روت دایرکتوری (Root Directory) قرار می‌گیرد. در حقیقت وظیفه این فایل معرفی بخش‌های قابل دسترسی ، و بخش‌های محدود شده برای دسترسی ربات‌ها یا با تعریفی دقیق‌تر، خزندگان سطح وب (Web Crawlers)، که […]

    سبد خرید
    question