آموزشی
فایل robots.txt چیست؟ آموزش ساخت فایل ربات سایت
فایل “robots.txt” یک فایل متنی است که صاحبان وبسایت میتوانند از آن برای آموزش خزندههای موتورهای جستجو در قسمتهایی از وبسایتشان استفاده کرده و فهرست شوند. با استفاده از فایل “robots.txt”، صاحبان وب سایت می توانند از فهرست کردن صفحاتی که نمی خواهند در نتایج جستجو درج شوند، مانند صفحات ادامه مطلب…