فایل robots.txt

افزایش سئو و بهینه سازی سایت با استفاده از فایل robots.txt

موتور جستجو قبل از آنکه وارد سایتی شود، ابتدا فایل robots.txt را از سرور درخواست می کند تا از تمام محدودیت های پیش روی خود در آن سایت آگاه شود. استفاده از فایل robots.txt در افزایش سئو و بهینه سازی سایت کاربرد فراوانی دارد با این فایل می توانید ربات یا crawler های موتور جستجو را کنترل کنید که به کدام شاخه یا فایل ها دسترسی داشته، یا نداشته باشند.

پروتکل robots تنها دو دستور دارد:
1. کدام اسپایدرها محدود شوند.
2. کدام مسیرها محدود شوند.

در ادامه به توضیح دستورات مورد استفاده در فایل robots.txt می پردازیم:

uset-agent

disallow-allow

آدرس فایل robots.txt : این فایل در ریشه ی سایت قرار می گیرد و نه در جای دیگری. مثال

http://www.seokhane.com/robots.txt



برای اطلاعات بیشتر در مورد فایل robots.txt سایت های زیر را مطالعه فرمایید:

http://user-agent.org
http://robotstxt.org/db.html



محتوای بیشتر در این بخش: « تگ Image ALT دستور user-agent »

دیدگاه‌ها   

0 #2 Seyyed Amir Tekyeh 1394-10-02 16:09
به نقل از morteza:
منظورتون از اینکه میگین کدام مسیرها محدود شوند رو متوجه نشدم
یعنی چی مسیری رو محدود کنیم .


با سلام و احترام فراوان

منظور از مسیر یک شاخه یا دایرکتوری میباشد. مثلا در CMS وردپرس نیازی نیست که ربات موتورجستجو برود و شاخه ی wp-admin را بررسی نماید ما در فایل robots.txt از پیمایش این شاخه توسط ربات را جلوگیری میکنیم.

موفق و سربلند باشید
نقل قول کردن
+1 #1 morteza 1394-10-02 13:48
منظورتون از اینکه میگین کدام مسیرها محدود شوند رو متوجه نشدم
یعنی چی مسیری رو محدود کنیم .
نقل قول کردن

نوشتن دیدگاه


تصویر امنیتی
تصویر امنیتی جدید

بازگشت به بالا

تماس با سئوخانه

تیم فنی سئوخانه افتخار دارد تا در زمینه های آموزش سئو و بهینه سازی سایت - طراحی سایت - ارائه هاست و میزبانی وب درخدمت شما سروران گرامی باشد.

مدیر تیم سئوخانه: سید امیر تکیه

تلفن تماس: 4277 76 44 21 98+

ایمیل: Info @ SeoKhane.Com

آدرس: تهران - دهکده المپیک - ضلع جنوب غربی میدان المپیک - خیابان ساحل - کوچه 51 - پلاک 39 - طبقه اول - شرکت ایده پرداز داده های ابری آریا

(قرار ملاقات با هماهنگی قبلی)

کدپستی: 1485844111

تگ آموزش سئو - سئو سایت

آموزش سئو - آموزش سئو و بهینه سازی سایت - سئو سایت - سئو - آموزش بهینه سازی - آموزش سئو سایت - آموزش رایگان سئو و بهینه سازی - آموزش سیو - آموزش SEO - سئو چیست - معرفی سایت به موتور جستجو - سئو سازی - سئوخانه - کلمات کلیدی در گوگل - اموزش سئو

ورود کاربران سئوخانه

عضویت در خبرنامه

میزبانی وب و هاستینگ توسط شرکت ابر سرور

Top of Page