" robots.txt ویبولتین"

درباره robots.txt بیشتر بدانیم

درباره robots.txt بیشتر بدانیم

امروز در این پست شما رو با اهمیت یک فایل به نام robots.txt آشنا میکنم . robots.txt یک فایل متنی است که وجود این فایل در روت سایت شما برای موتور های جستجوگر از اهمیت بسیار بالایی برخوردار است . شاید خیلی از دوستان بپرسند منظور از روت کجاست ؟ موتور های جستجوگر از راه های متفاوتی وارد یک سایت میشوند منظور از راه های مختلف همان لینک های شما هستند . موتور های جستجوگر وقتی وارد یک صفحه از سایت شما میشوند مجوز ها و محدودیت هایی که شما برای آن ها تعیین کرده اید را بررسی میکنند (یعنی...