سفارش تبلیغ
صبا ویژن

پوشه robots.txt چهطور فعالیت مینماید؟

 

پوشه robots.txt چه‌طور فعالیت می‌نماید؟

ربات‌ها پیوند‌ها را دنبال می‌نمایند. پس در‌صورتی‌که از یک وب سایت به وبسایت دیگری لینک و پیوند داده خواهد شد، ربات‌ها آن لینک و پیوند را دنبال کرده و به وبسایت دیگر راه و روش پیدا می‌نمایند. ولی قبل از اینکه تارنما نو را بخزند به فولدر robots.txt نگاه می‌نمایند. در‌حالتی که این پوشه وجود داشته باشد از داده ها آن تقلید می‌نمایند و در صورتیکه وجود نداشته باشد، تک تک آموزش سئو در مشهد  صفحه ها تارنما را میخزند.

آنالیز کردن وجود فولدر robots.txt برای یک تارنما

برای اینکه فولدر robots.txt یک وب سایت را مشاهده کنید کافی میباشد در انتهای ریشه دامین مهم تارنما یک اسلش گذارده و عبارت robots.txt را تایپ آموزش سئو مشهد  فرمایید. مانند نمونه ذیل:

Example.com/robots.txt

بنابراین، محتویات پوشه robots.txt آن وب سایت را مشاهده خواهید کرد.

درصورتی که تارنما دارنده پوشه robots.txt نباشد، با نوشتن نشانی ذکرشده در نشانی توشه، با خطای 404 مواجه خواهید شد.

 

تشکیل داد فولدر robots.txt

1- برای تشکیل داد فولدر robots.txt به ورقه مهم‌هاست خویش در سی پنل یا این که دایرکت ادمین بروید.

2- بعد بر روی file manager کلیک فرمائید.

3- وارد فولدر public_html گردید.

4- در‌این فایل یک فولدر نو ساخت‌و‌ساز فرمایید به اسم robots.txt.

5- بر روی فایلی که تولید کرده‌اید دو توشه کلیک فرمائید تا در کامپیوترتان ذخیره گردد. آن‌گاه آن را با نرم‌افزار notepad گشوده فرمایید و دستورها موردنیاز را در آن وارد کرده و تغییرات را ذخیره فرمائید.

6- پوشه را مجدداً درهاست خویش جایگزین پوشه قبل نمائید.

در آحاد فرآیند دقت داشته باشید که فولدر robots.txt نسبت به کوچکی و بزرگی حروف حساس میباشد. اسم خویش فولدر می بایست با حروف خرد نوشته گردد. در تایپ کردن امرها نیز به کوچکی یا این که بزرگی اسم پوشه‌ها دقت فرمایید.

 

با صرفه‌سازی فولدر robots.txt برای seo

از لحاظ seo چندین گزینه در ارتباط فولدر robots.txt وجود داراست که بایستی به آنان دقت خواهد شد:

- پوشه‌هایی که در فرمان disallow قرار می گیرند، در کل خزیده نمیشوند. به‌این مضمون‌ که حتی لینک و پیوند‌های باطن این فولدر‌ها نیز تبدیل به نوفالو میگردند. براین اساس در صورتیکه قصد دارید پیوند‌های درون برگه فالو باشند از طریق دیگری به مکان disallow به کار گیری نمائید.

- استعمال از امر disallow برای عدم اکران اطلاعاتی مانند داده ها محرمانه یوزرها بی‌منفعت میباشد؛ چراکه ممکن میباشد شما از صفحه ها دیگر وبسایت به‌این برگه لینک و پیوند داده باشید و در فیض خزنده‌ها یا این که ربات‌ها از روش آن پیوند‌ها به کاغذ نام برده رسیده و آن را ایندکس کنند.

- معمولاً داده ها فولدر robots.txt در موتورهای کاوش برای یک روز در کش ذخیره می‌گردد؛ لذا در شرایطی‌که محتوای این پوشه را تغییر تحول دادید و قصد دارید موتورهای کاوش زودتر از این تغییرات آگاه شوند، مورد نیاز میباشد فولدر را مجدداً در کنسول گوگل قرار دهید.

قرار دادن robots.txt در سرچ کنسول گوگل

بعداز اینکه فولدر robots.txt خویش را ساختید، بایستی آن را در کنسول گوگل نیز قرار دهید. بدین ترتیب ربات‌های گوگل خیلی سریع‌خیس به صفحه های allow یا این که disallow وب سایت شما دسترسی پیدا خواهند کرد و سایتتان را سریع‌خیس میخزند.

برای این مراد بایستی این لینک و پیوند را گشوده فرمائید.

در پیوند گشوده گردیده، وب سایت گزینه نظرتان را گزینش نمائید. در صورتیکه تا قبل از اینً در کنسول گوگل تصویب‌اسم نکرده باشید در اینجا می بایست روند تصویب‌اسم را ایفا دهید.

بعداز تعیین وب سایت موردنظر، وارد کاغذ‌ای می شوید که در صورتی‌که پیش از اینً فولدر robots.txt را آپلود کرده باشید، محتویات فولدر گذشته را علامت می دهد.

در غیر این شکل پوشه robots.txt را از نوار ذیل کاغذ آپلود کرده و دکمه submit را کلیک نمائید.

به همین آسانی، پوشه شما به گوگل معرفی می‌گردد و گوگل ربات‌هایش را طبق راهنمای شما به سمت سایتتان روانه خواهد کرد.

الگوریتم کبوتر گوگل چیست؟

شاید برای شما هم پیش آمده میباشد که درپی نزدیکترین دکان، مریض خانه، راءس تفریحی و ... باشید و به طبع می دانید که‌این نیاز بیشتر عموم جهان بوده میباشد از این رو موتور جستجوی گوگل بعد از پنگوئن، مرغ مگس خوار و پاندا، در سال 2014 تصمیم گرفت تا الگوریتم کبوتر را به قلعه حیوان ها خویش بیفزاید. سعی الگوریتم کبوتر گوگل در واقع بدین شکل میباشد که هنگامی مرورگرتان را گشوده فرمائید و عباراتی زیرا «رستوران‌های مجاورت اینجانب» یا این که «مریض خانه‌های مجاورت اینجانب» یا این که «مرکزها تفریحی مجاورت اینجانب» را کاوش نمایید، گوگل خودش نزدیکترین جای متبوع را شناسایی می‌نماید و به یار تمامی خصوصیات به شما ارائه خواهد بخشید! همان گونه که میدانید موتور جستجوی گوگل مبتنی بر محتوا فعالیت می‌نماید و امروزه جای (لوکیشن) نیز در کنار متن، صدا و تصویر تحت عنوان محتوا شناخته می‌گردد و الگوریتم کبوتر گوگل نیز از این محتوا برای شناسایی نزدیکترین جای به کارگیری می‌نماید.

 

شیوه کوشش الگوریتم کبوتر گوگل

سکو بندی سایت‌های متعدد در موتور جستجوی گوگل براساس معیارهای متعدد شکل می‌پذیرد و به همین برهان میباشد که هنگامی عبارتی را در گوگل کاوش میکنید بعضا از وب سایت‌ها را در حاصل اولیه گوگل فراتر از سایر تارنما‌ها مشاهده خواهید کرد. با این حالا تا پیش از روی فعالیت داخل شدن الگوریتم کبوتر، جای و مسافت شما از عبارت متبوع تحت عنوان یک میزان برای جایگاه‌بندی گوگل محسوب نمی‌گردیده است.

در واقع استعمال از الگوریتم کبوتر منجر گردیده است تا شما بعداز جستجوی عبارت متبوع خویش در گوگل برای یافتن مکانی خاص در یک شهر با پیشنهادهای مختلفی مواجه گردید! اکنون فکر میکنید که‌این پیشنهادها برای همگی شهرها یکسان خواهد بود؟! در جواب بدین پرسش بایستی اظهار کرد که مسلما نتیجه ها یافتن جای در گوگل برای شهرهای متفاوت گوناگون خواهد بود چون الگوریتم کبوتر با تطابق الگوریتم جستجوی شما و الگوریتم وبسایت‌های مرتبط، به اکران جای نزدیکتر به شما مبادرت خواهد کرد.