مشکل از گوگل احمق هست ( اینو گوگل بعدا میفهمه !!!)
این روش مسخره که جزوی از استاندارد SEO =search engine organization هست ( یا همون بهینه سازی برای موتورهای جستجوگر احمق (!) )
حالا چرا این موتورها این کار رو میکنند به خاطر احتمال صفحات مجازی( URL های داینامیک مجازی) است که آرشیو نمیکنند البته نه تمام آدرس های داینامیک رو spider ها هم منطق های خاص و پیچیده خودشون و دارند.
این کار رو میتوانید با چند خط کوچولو انجام بدید ! وhtaccess.سیو کنید و هر فولدی بندازید زیر فولدر ها و فایل ها رو شامل میشه
و اگر کل سایت هم میخواهید توی root بندازیدش اما آروم که شکستنیه :دی
PHP:
# ba in code esmeh index ro avaz konid yani index.php ya html misheh delkhaheton.php
DirectoryIndex esmeh delkhaheton.php
اینم واسه تبدیل html به php وبلعکس یعنی دیگه مهم نیست .چی باشه !
PHP:
Options +FollowSymlinks
RewriteEngine on
RewriteRule ^(.*).html$ $1.php [nc]
در کل دست به استاندارد ها نزنید که این گوگلی که من میشناسم بی سرو صدا مشکل رو حتم داره یا حل کرده یا میکنه !