خانه / وردپرس / آموزش وردپرس / بهینه سازی robots.txt و تاثیر آن بر سئو
sds

تاریخ انتشار: مرداد 8, 1394 تعداد بازدید: 635 بازدید تعداد دیدگاه ها: 0

بهینه سازی robots.txt و تاثیر آن بر سئو

بهینه سازی robots.txt و تاثیر آن بر سئوReviewed by فریش تم on Jul 30Rating: 5.0بهینه سازی robots.txt و تاثیر آن بر سئوبا آموزش وردپرس دیگری همراه شما هستم و در این آموزش قصد دارم در مورد فایل robots.txt صحبت کرده و تاثیرآن بر سئو را بررسی کنیم.

سلام و عرض ادب خدمت دوستان عزیز
با آموزش وردپرس دیگری همراه شما هستم و در این آموزش قصد دارم در مورد فایل robots.txt صحبت کرده و تاثیرآن بر سئو را بررسی کنیم.
دوستان عزیز و وب مستر های ارجمند همانطور که اطلاع دارند میدانند که سئو و مباحث آن در یک وب سایت چقد تاثیر گذار است و به گونه ای که میتواند یک وب سایت را از فرش به عرش برساند و یا برعکس.اما مباحث سئو بسیار گسترده بود و نمیتوان در یک یا دو مقاله آن را خلاصه کرد اما در سری آموزش های سئو فریش تم با هم به بررسی نکات و ترفند های سئو خواهیم پرداخت پس تا انتها همراه من باشید.

فایل robots.txt چیست؟

خب اول از همه باید دانست که این فایل چیست و چرا باید وجود داشته باشد.این فایل یک عامل تاثیر گذار در تمامی سئو سایت شماست به طوری که کار آن به این ترتیب است که با موتور های جست و جو ارتباط برقرار کرده و به صورت وکیل برای وب سایت شما به موتور های جست و جو قسمت هایی از سایت شما را که باید ایندکس شوند را نشان میدهد و به آن ها میفهماند که کجا ها باید مورد توجه قرار گیرند که این بسیار مهم و حیاتی است حال شما باید بتوانید آن را به خوبی بهینه سازی کنید تا آن هم بتواند به خوبی وظایف خود را انجام دهد.

دلایل وجود فایل robots.txt چیست؟

نبود این فایل در وب سایت شما دلیلی برا عدم ایندکس شدن سایت شما در موتور های جست و جو نیست ولی وجود آن بسیار میتواند در وب سایت شما مفید باشد و همچنین در معرفی نقشه سایت به گوگل نیز بسیار تاثیر گذار و مهم است و اکثر کارشناسان سئو وب سایت آن را تائید کرده و توصیه میکنند.

نحوه ساخت فایل robots.txt

روش ساخت این فایل از آن چیزی که فکر میکنید هم ساده تر است البته شما باید ابتدا در فایل ریشه سایت خود جست و جو کنید و در صورتی که وجود داشت که هیچ و اگر این فایل وجود نداشت اصلا نگران نباشید و باید یک فایل نوشتاری توسط نت پد درست کرده سپس آن را robot بنامید و آن را در ریشه سایت خود آپلود کنید به همین راحتی و سادگی این فایل ساخته شد.

ساختار فایل robots.txt چگونه است؟

ساختار این فایل بسیار ساده است و گام به گام پیش میرویم.در خط نخست عبارت User-Agent وجود دارد که این عبارت نام ربات شما بوده و با استفاده از آن میتوانید با ربات خود ارتباط برقرار کنید و دلیل استفاده از * در مقابل این نام برای این است که این نام به تمامی ربات ها الحاق شود و تمامی خط های بعدی برای مشخص کردن فایل های مجاز و غیر مجاز به ربات است که کدام را مجاز است به موتور های جست و جو برای ایندکس کردن معرفی کند و کدام را مجاز به انجام اینکار نیست.که شما خود میتوانید این موارد را نوشته و مشخص کنید و فایلی همانند زیر بسازید:

همانطور که میبینید فایل هایی را اجازه داده شده و فایل هایی را از اینکار منع کرده است که کاملا واضح است.پس شما باید این فایل را با فرمت بالا بسازید و آن را در ریشه سایت خود آپلود کنید.

نحوه بهینه سازی فایل robots.txt

برای بهینه سازی این فایل باید به نکات مهمی توجه کنید:

  • فایل readme را به هیچ وجه در ان قرار ندهید زیرا در صورت قرار دادن آن و به دلیل اینکه نسخه و اطلاعات قالب وردپرس شما در آن قرار گرفته است میتواند مشکلاتی برای امنیت وب سایت شما ایجاد کند زیرا در صورت قرار دادن این فایل موتور های جست و جو آن را ایندکس کرده و دسترسی دیگران به آن زیاد میشود و میتواند برای شما مشکل ساز باشد
  • از این فایل برای پنهان سازی نواقص و مشکلات سایت خود استفاده نکنید زیرا این کار بسیار اشتباهی بوده شما در اصل با اینکار سعی میکنید تا موتور های جست و جو را فریب دهید در صورتی که به هیچ وجه نمیتوانید اینکار را انجام دهید و همچنین باعث افت رتبه وب سایت خود میشوید
  • شاخه هایی همانند مدیریت و یا صفحه ثبت نام و … را نیازی به قرار دادن در این فایل نیست زیرا این شاخه ها کلا ایندکس شدنی نیستند و قرار دادن آن ها هم بیهوده بوده و فقط وقت شما را تلف میکند

حال نیمی از فایل robots.txt ساخته شد و در ادامه به بررسی نحوه قرار دادن نقشه سایت در این فایل میپردازیم

نحوه قرار دادن نقشه سایت در فایل robots.txt

برای اینکار ابتدا باید توجه کنید که اگر نقشه وب سایت خود را با افزونه WordPress SEO by Yoast (افزونه سئو وردپرس) ساخته اید که دیگری نیازی به اعمال تغییرات نیست و خود افزونه نقشه سایت را به این فایل اضافه میکند و اما اگر از طریقی دیگر آن را ساخته اید باید آدرس فایل XML را که به شما داده است همانند کد زیر در این فایل قرار دهید.

حال تمامی عملیات شما به پایان رسیده است و شما توانستید فایل robots.txt را ساخته و بهینه سازی نمائید که در پایان باید محتوایات شما همانند زیر باشد:

همانطور که میبینید دو فایل قابل دسترسی قرار گرفته و دو فایل نیز غیرقابل دسترسی هستند و در انتها نیز آدرس های نقشه سایت قرار گرفته است

امیدوارم این آموزش برای شما عزیزان مفید واقع شود
از همراهی شما سپاس گزارم

منبع: فریش تم

کانال تلگرام فریش تم
  • دیدگاه شما پس از تایید در سایت نمایش داده می شود.
  • از ارسال متن بصورت فینگلیش خودداری نموده و فارسی تایپ کنید.
  • دیدگاه و سوالات شما توسط کارشناسان ما بین 1 تا 12 ساعت پاسخ داده خواهد شد.
  • از ارسال دیگاه جهت پشتیبانی محصولات تجاری خود داری کنید و برای پشتیبانی از بخش پشتیبانی سایت اقدام کنید.

هنوز دیدگاهی ثبت نشده است.