آرشیو آموزش - لرن مارکتینگ | آموزش بازاریابی و بازاریابی اینترنتی

%d9%86%d8%ad%d9%88%d9%87-%d8%a7%db%8c%d9%86%d8%af%da%a9%d8%b3-%d8%aa%d9%88%d8%b3%d8%b7-%d9%85%d9%88%d8%aa%d9%88%d8%b1-%d8%ac%d8%b3%d8%aa%d8%ac%d9%88

آموزش جامع فایل robots.txt و بهینه سازی فایل وردپرس robots.txt

 فایل robots.txt چیست؟

فایل robots.txt فایلی است که توسط وب مستران و مدیران سایت برای راهنمایی موتورهای جستجو نظیر گوگل و بینگ استفاده می‌شود. این سایت به گوگل و سایر موتورهای جستجو می‌گوید که چطور محتوای سایت را پیمایش و ذخیره کنند.

همچنین این فایل مشخص می‌کند که گوگل و سایر موتورهای جستجو می‌توانند یک صفحه را ذخیره کنند و یا خیر. به صورت کلی دو عمل برای موتورهای جستجو وجود دارد. Allow و disallow که به ترتیب مشخص کننده اجازه دادن و اجازه ندادن است. ادامه مطلب