۶۳ – همه چی درباره robots.txt
2020-08-30
ارسال شده توسط پوریا آریافر
1.87k بازدید
سلام خدمت شما کاربران عزیز آکادمی میزفا
از سری فیلم آموزش سرچ کنسول در خدمت شما هستیم، در این دوره سعی کردیم از ۰ تا ۱۰۰ به همه مباحث ابزار سرچ کنسول بپردازیم و در قالب یک دوره جامع برای شما دوستان پیاده سازی کنیم.
موضوع ویدیو ۶۳ | همه چی درباره robots.txt |
مدت زمان ویدیو | ۰۱:۱۰:۵۴ دقیقه |
تصویر و همینطور ویدیو زیر رو مشاهده کنید:
سرفصل های این ویدیو
- فایل robots.txt چیست
- تاثیر این فایل در خزش رباتها
- نبود فایل robots.txt چه تاثیری دارد
- برخورد ربات های غیر استاندارد با فایل Robots.txt
- فرق فایل human با فایل robots
- خصوصیت مهم فایل txt
- تاثیر پروتکل در فایل robots.txt
- تعریف کیوردها در فایل robots.txt
- معرفی انواع رباتهای خزش گوگل
- اولویت بندی رباتها در گوگل
- معرفی ربات های بینگ و یاهو
- نکات مهم درباره اسم ربات ها در فایل robots.txt
- پیادهسازی ۷ سناریو کاربردی درباره مکان فایل robots.txt
- بود و نبود این فایل در زیردامنهها
- بود و نبود این فایل در پوشهها
- بود و نبود این فایل در ftp
- 15 مثال متنوع از انواع فایل های robots.txt و تشریح کامل آنها
- نحوه بستن دسترسی کل سایت
- نحوه باز گذاشتن دسترسی کل سایت
- نحوه بستن دسترسی یک پوشه خاص
- شرطی کردن دسترسی در فایل robots.txt
- نحوه بستن دسترسی یک فرمت خاص در یک دایرکتوری
- چند کد robots.txt برای سایت های وردپرس
- نحوه بستن دسترسی یک کاراکتر خاص
- فرق فایل robots.txt با متاتگ robots
- تعریف اصولی سایت مپ در فایل robots.txt
- نحوه استفاده از ابزار Robots.txt Tester در وب مستر تولز
- نحوه کش و آپدیت کش فایل robots.txt
- چند مثال پیشرفته درباره آدرس دهی در فایل robots.txt
- بررسی و آنالیز فایل robots.txt چند سایت مهم
این مطالب یکی از جلسات دوره جامع آموزش سرچ کنسول آکادمی میزفا هست، شما اگر دانشجوی دوره نیستید و در حال مشاهده این پیغام هستید باید ابتدا در در این دوره ثبتنام کنید.
امیدواریم این فیلم از دوره آموزشی سرچ کنسول گوگل برای شما مفید بوده باشه. اگر سوالی و یا مشکلی داشتید حتما در نظرات و تیکت آکادمی میزفا اشاره کنید.
برچسب ها:
فصل ۱۱ - ویدیوهای مفید برای سرچ کنسول
سلام استاد یه سوال داشتم در خود میزفا شما یه بار دسترسی blog/wp-admin رو بستید یه بار باز گذاشتید علت این چیه ؟
Disallow: /blog/wp-admin
Disallow: /wp-admin
Allow: /wp-admin/admin-ajax.php
Allow: /blog/wp-admin/admin-ajax.php
سوال بعدم اینه منظور از feed چیه ؟ یعنی یه پوشه هست ؟ کلا درباره این خط کد زیر یه توضیحی میدید ؟
Disallow: /portfolio/*/feed
(یعنی هر چی در فولدر protfolio هست و آخرش feed داره بسته بشه ؟ )
سلام
کو؟ کجا باز کردیم؟ اون یک فایل هست که باز کردیم و نه یک فولدر.
feed برای خوندن متن ها به صورت راحت توسط ربات ها هست. من نمیخواستم دیده بشه. وگرنه گوگل اصلا تو نتایج نمیاره.
اره یعنی هر چی داخل فولدر protfolio هست و اخرش feed هست بسته بشه.
من فکر کردم Disallow ارجع تر هست یعنی وقتی کل فولدر wp-admin بسته شده حالا بیای allow بدی به admin-ajax.php کار نمیکنه چون یک بار گفتیم کل فایل wp-admin بسته بشه. (که تصورم مثل اینکه اشتباه بود)