[sajjadmمشارکت کننده]

سلام

امروز خواستم نقشه سایت رو معرفی کنم وقتی ثبت شد ارور داد

در ضمن ما برای سایتمون فایل robots.txt درست نکردیم، ایا بودنش واجبه ؟

[سعید شعبانیسرپرست کل]

در حال حاظر سایت شما دارای یک فایل robots.txt با محتویات زیر است.

User-agent: *
Disallow: /wp-admin/

بهتر هست در آخر فایل robots.txt خط زیر را هم اضافه کنید و بعد اقدام به ثبت نقشه سایت در گوگل وبمستر تولز نمایید.

Sitemap: http://asiohost.ir/sitemap_index.xml

داشتن فایل robots.txt اجباری نیست ولی مفید هست و باعث میشه موتور های جستجوگر به راحتی بتونند سایت شما را Crawl یا همون خزش کنند.

[sajjadmمشارکت کننده]

ممنون بخاطر راهنماییت سعید جان،ارور قبلی حل شد

ولی یکی دیگه باز اومد

[سعید شعبانیسرپرست کل]

گفته که فایل robots.txt وجود داره ولی نمی تونه اون را دانلود کنه. دسترسی robots.txt را به 644 تغییر بدید ببینید درست میشه. یا کلا فایل robots.txt را حذف کنید.

[sajjadmمشارکت کننده]

ما اصلا فایل robots.txt نداریم در هاست

[سعید شعبانیسرپرست کل]

خوب پس چجوری آدرس تقشه سایت را بهش اضاف کردید؟

[sajjadmمشارکت کننده]

چیزی اضافه نکردم اصلا

الان در داخل خود گوگل وبمستر تولز دیدم خودش ساخته ولی در هاست چیزی نیست

[سعید شعبانیسرپرست کل]

گوگل که دسترسی به سایت شما نداره که بتونه فایلی را در هاست شما آپلود و تغییر بده. این فایل توسط افزونه Yoast WordPress SEO ایجاد شده. شما وارد مسیر سئو » tools و File editor بشید. در این بخش می تونید فایل Robots.txt را ویرایش و اون را ذخیره کنید.

[sajjadmمشارکت کننده]

همین طور که میبینید هیچ چیزی وجود ندارد

http://asiohost.ir/wp-content/uploads/2015/06/wp.png

[sajjadmمشارکت کننده]

دیدن که فایلی نیست ولی من الان یکی ساختم به این شکل

User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /comments/
Disallow: */comments/

Sitemap: http://asiohost.ir/sitemap.xml

[sajjadmمشارکت کننده]

http://asiohost.ir/robots.txt

[سعید شعبانیسرپرست کل]

خوب حالا اقدام به ثبت Sitemap در Google Webmaster Tools کنید ببینید باز هم ایراد می گیره

[sajjadmمشارکت کننده]

والا الان داره به لینک های صفحه اصلی وسایت مپ و همچنین به لینکای پستام اخطار میده

[سعید شعبانیسرپرست کل]

گفتته که برخی از لینک های داخل سایت مپ توسط robots.txt مسدود شدند. اگر می خواهید این لینک ها همچنان ایندکس نشوند می تونید اینها را از نقشه سایت حذف کنید تا این اخطار هم دیگه ظاهر نشه.

[اشرافیمشارکت کننده]

سلام
ممنون از جواب های خوبتون
میشه راهنمایی کنید من فایل robots.txt رو از کجا باید بیارم

[نویسنده]

نوشته ها