‎‎پروتكل هاي نقشه سايتSitemaps Protocol -‎

‎نقشه هاي سايت‎(Sitemaps)‎ درارائه محتوي آن بكاربرنقش اساسي دارد .نقشه هاي ‎سايت بدو دسته ديداري مختص كاربر وفايلي مربوط به خدمات جستجوئي گوگل ميشود.

‎‎نقشه سايت ديداري

‎نقشه سايت ديداري مربوط به كاربر بوده ونحوي استفاده از محتوي را بكاربر نشان ميدهد .اين را ‎باصطلاح ساده تر منوي سيستم يا سايت هم ميگويند .شماهم درهمين صفحه منوي را در بالا مشاهده ‎ميكنيد .نحوي بكارگيري منوي فوق در لينك introduce ‎بحث شده است.

‎‎نقشه سايت گوگليSitemap for Google -‎

‎گوگل در ارائه محتوي سايت ها به كاربران نقش اساسي دارد .اين كار را با استفاده از نقشه سايت ‎گوگلي يا از صفحات داخلي نمايه سازي ميكند .نقشه سايت با ايجاد فايلهاي خاص براي استفاده ‎گوگل تنظيم ميگردد .گوگل بصورت خزنده در نقشه سايت يا محتوي گردش هاي زماني يا دوره اي كرده ‎واز محتواهاي مهم ايندكس مسيازد ودر هنگام جستجوي كاربر،آدرس هاومحتوي مختصر را در ‎فهرست جستجو ارائه ميدهد.

‎نقشه سايت در نحوي ايندكس سازي ودوره آن بسيار مهم ميباشد .اما انتظار اينكه كليه صفحات يا ‎محتوي در معرض ايندكس قرار گيرند، انتظار ايده آل است وممكن است امكان پذيرنشود.

‎‎نقشه سايت فرمت ايكس ام ال‎ Sitemaps XML format -‎ ‎

‎نقشه سايت بافرمتXML فايلي است كه نقشه سايت را بزبان XML توصيف ميكند .مطالب مطابق زير ‎ارائه ميگردد.

‎تعاريف تگXML
‎موجوديت در حال فرارEntity escaping-‎
‎استفاده از فايل هاي فهرست نقشه‎ (Sitemap index files) ‎
‎فرمت هاي ديگر نقشه سايت
‎مكان فايل نقشه سايت
‎اعتبارسنجي نقشه سايت
‎گسترش پروتكل نقشه سايت
‎اطلاع رساني به خزنده هاي موتورهاي جستجو

‎در اين سند فرمتXML نقشه سايت راتشريخ ميشود .فرمت پروتكل نقشه سايت از تگ هايXML ‎شكل ميگيرد و نوع مجموعه كراكتري فايلUTF-‎8 ميباشد.

‎‎نقشهXML سايت بايستي ‎:‎

‎‎با تگ‎ <urlset>‎ شروع وبا‎</urlset>‎ پايان مييابد.
‎فضاي نام‎(namespace)‎ مطابق پروتكل استاندارد در تگ ‎<urlset>‎ ‎مشخص شود.
‎‎براي هرآدرسURL يك ورودي تگ‎<url>‎ بعنوان والد اضافه ميشود.
‎در داخل هر تگ‎<url>‎ يك تگ ‎<loc>‎ فرزند وارد كنيد .محتوي اين تگ ‎آدرسURL صفحه مورد نظر منعكس ميشود .

‎همه تگ هاي ديگر كه در‎<url>‎ استفاده ميشوند اختياري هستند و ممكن است پشتيباني ‎ازاين برچسب هاي اختياري در موتور هاي جستجو متفاوت باشد .براي جزئيات بيشتر به مستندات هر ‎موتور جستجو مراجعه كنيد.

‎همچنين همه آدرس هايURL بايد از يك سايت مثل www.example.com يا store.examle.com ‎باشند.

‎‎نمونه نقشهXML سايت‎ sample xml Sitemap -‎‎

‎در مثال زير نقشهXML سايت دقيقا با يك آدرسURL واستفاده از همه تگ هاي اختياري است. ‎تگ هاي اختياري بصورت ايتاليك‎(italics)‎ هستند .

‎

<?xml version="1.0" encoding="UTF-8"?>

<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">

   <url>
     
      <loc>http://www.example.com/</loc>
      <i>     
      <lastmod>2005-01-01<lastmod>

      <changefreq>monthly</changefreq>

      <priority>0.8</piority>
      </i>
   </url>

</urlset>

‎‎همچنين مثال را با تعدادي آدرسURL بدنبال مشاهده نمائيد.

‎‎تعاريف تگ ايكس ام ال‎ XML tag definition -‎ ‎

‎‎شرح تگ هايXML مورد استفاده در فابل نقشه سايت مطابق جدول زير ميباشد .

‎
‎‎ويژگي	‎‎ضرورت	‎‎شرح
‎ <urlset>	‎required	‎‎فايل را كپسوله ميكند وبه استاندارد پروتكل فعلي ارجاع ميدهد .يعني مشخص ميكند فايل از پروتكل ‎استانداردXML Sitemap بايد پيروي كند .
‎ <url>	‎required	‎‎تگ والد براي هر آدرسURL موجوديت . مابقي تگها بعنوان فرزند اين معرفي ميشوند .
‎ <loc>	‎required	‎‎آدرسURL صفحه .بايستي با پروتكل مثلhttp شروع شود، ودزصورتيكه سرور وبتان به آن نياز دارد ‎با يك اسلش انتهائي پايان يابد طول آن بايد كمتراز‎2048‎ كراكتر باشد.
‎ <lastmod>	‎optional	‎‎تاريخ آخرين اصلاح صفحه .اين تاريخ بايد درفرمتW3C Datetime باشد .اين فرمت اجازه ميدهد تا ‎فرم زماني را حذف كنيد واز فرمتYYYY-‎MM-‎DD استفاده كنيد . توجه كنيد تاريخ مربوط به اصلاح ‎صفحه ميباشد، نه تاريخ ايجاد نقشه سايت
‎ <changefreq>	‎optional	‎‎تناوب امكان تغيير صفحه را مشخص ميكند .اين پارامتر اطلاعات كلي را در اختيارموتورهاي جستجو ‎قرار ميدهد، و ممكن است دقيقا با نحوي انجام آن مطابقت نداشته باشد .مقادير قابل قبول مطابق ‎زير ميباشند. always hourly daily weekly monthly yeraly never ‎مقدار‎‎"always‎"‎ بايد براي توصيف اسنادي استفاده گردد، كه هربار دسترسي به آنها ‎تغيير ميكنند .مقدار‎‎"never‎"‎ بايد براي توصيف اسناد آرشيوشده استفاده شود. ‎لطفا توجه فرمائيد كه مقدار اين تگ يك اشاره بوده ونه دستور .خزنده هاي موتورهاي جستجو ممكن ‎است اين اطلاعات را موقع تصميم گيري دز نظر داشته باشند، ويا ممكن است صفحاتي را كه بصورت ‎‎"hourly‎"‎‎علامت گذاري شده كمتر روي آن بخزند .خزنده ها ممكن صفحاتي را كه ‎‎"never‎"‎‎علامت گذاري شده دوره اي اقدادم نمايند تا تغييرات غيرمنتظره اي را كنترل ‎كنند.
‎ <priority>	‎optional	‎‎مقدار اين تگ اولويت نسبي صفحه را نسبت به صفحات سايت اعلام ميكند .مقدار آن بين ‎0.0 -‎ 1.0‎‎است .اين مقدار در صفحات سايت هاي ديگر اثر ندارد .فقط به موتورهاي ‎جستجو اجازه ميدهد بدانند، كدام صفحات براي خزنده ها مهمتراست .مقدار پيش فزض آن ‎0.5‎‎در نظر گرفته ميشود . ‎توجه كنيد كه اولويتي كه براي يك صفحه اختصاص داده ميشود ، احتمالا بر موقعيتURL شما در ‎صفحات نتايج جستجو تاثير نمي گذارد.موتورهاي جستجو ممكن است ازاين اطلاعات هنگام انتحاب URL‎ها درهمان سايت استفاده كنند .بنابراين ميتوانيد ازاين برچسب براي حضور مهمترين صفحات ‎شما در فهرست جستجو استفاده كنيد. ‎اختصاص دادن اولويت بالا به تمام صفحات سايت ،احتمالا به شما كمكي نميكند .از انجائيكه اولويت ‎درسايت شما نسبي است ، فقط در انتخاب در سايت خودتان تاثيردارد.

‎‎موجوديت هاي فرارEntity escaping -‎

‎فايل نقشه سايت بايد داراي مجموعه كراكتريUTF-‎8 باشد .اين مورد در هنگام ذخيره نمودن فايل ‎بايد اعمال شود.

‎مانند همه فايل هايXML ياHTML هر مقدار داده ازجملهURL صفحه از كدهاي فرار موجوديتي ‎مطابق جدول زير استفاده كنيد.

‎
‎‎نام كراكتر	‎‎علامت	‎‎كد مقداري‎(Escape code)‎
‎Ampersand	‎&	‎ &
‎Single Quote	‎'	‎ '
‎Double Quote	‎"	‎"
‎Grater Than	‎ >	‎>
‎Less Than	‎ <	‎<

‎علاوه براين ، همهURL ها بايد براي خوانائي توسط سرور وبURL-‎Escape شده باشند . معمولا ‎ابزار هاي توليدي نقشه سايت اين كدگذاري را رعايت مي كنند، اما اگر دستي آنرا ايجاد ميكنيد ‎در نوشتن محتوي ها دقت نمائيد .ولي با اين حال فايل نقشه هاي توليدي را كنترل نمائيد، كهURL ‎شما استانداردRFC-‎3986 براي URI ها استاندارد RFC-‎3987 و فايل XML استاندارد باشد .

‎در مثال زير نمونه اي ازURL است كه در آن كراكتر ü ‎غيرASCII بوده و ‎همچنين نويسه اي استفاده ميكند كه به موجوديت فرار‎(&)‎ نيازدارد.

‎

http://www.example.com/ümlat.php&q=name

‎در زير همانURL باكد گذاري‎)ISO-‎8859-‎1‎ براي ميزباني روي سروري كه ازآن ‎رمزگذاري استفاده ميكند‎(‎ است .

‎

http://www.example.com/%FCmla.php&q=name

‎در زير همانURL باكدگذاري‎)UTF-‎8‎ براي ميزباني سروري كه از همان كدگذاري ‎استفاده ميكند‎(‎ و URL فرار شده است .

‎

http://www.example.com/%C3%BCmlat.php&q=name

‎در زير همانURL است، اما موجوديت نيز فرار كرده است .درآن بجاي‎&‎ از اين ‎ &‎‎استفاده شده است .

‎

http://www.example.com/%C3%BCmlat&amp;q=name

‎‎نمونه نقشه سايت ايكس ام ال‎ Sample XML Sitemap -‎‎

‎مثال زير يك نقشه سايت را با فرمتXML نشان ميدهد .نقشه سايت داراي تعدادىURL است كه هر ‎كدام از مجموعه اي از پارامترهاي اختياري استفاده ميكنند.

‎

<?xml version="1.0" encoding="UTF-8"?>

<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">

   <url>

      <loc>http://www.example.com/</loc>

      <lastmod>2005-01-01<lastmod>

      <changefreq>monthly</changefreq>

      <priority>0.8</piority>

   </url>

   <url>

      <loc>http://www.example.com/catalog?item=12&desc=vacation_hawaii</loc>

      <changefreq>weekly</changefreq>

   </url>

   <url>

      <loc>http://www.example.com/catalog?item=73&desc=vacation_new_zealand</loc>

      <lastmod>2004-12-23<lastmod>

      <changefreq>weekly</changefreq>

   </url>

   <url>

      <loc>http://www.example.com/catalog?item=74&desc=vacation_newfoundland</loc>

      <lastmod>2004-12-23T18:00:15+00:00<lastmod>

      <priority>0.3</piority>

   </url>

   <url>

      <loc>http://www.example.com/catalog?item=83&desc=vacation_usa</loc>

      <lastmod>2004-11-23<lastmod>

   </url>

</urlset>

‎‎فهرست ايندكس نقشه‎ Sitemap index files -‎‎

‎ميتوان چندين نقشه سايت براي يك سايت ارائه داد .اما هر فايل نقشه اي كه ارائه ميشود نبايد ‎بيشتر از‎50,000‎ آدرسURL باشد .وهمچنين نبايد بيشتر از پنجاه مگابايت يا ‎52,428,800 ‎‎بايت باشد .در صورت تمايل ميتوان نقشه سايت را باgzip ،فشرده نمود ‎تا پهناي باند مورد نيازكاهش يابد. ولي در هر حال محدوديت فوق بايد رعايت شود .اگر ميخواهيد ‎بيش از‎50,000‎ آدرسURL را فهرست كنيد، بايد چندين فايل نقشه سايت ايجاد كنيد.

‎اگر براي سايتي چندين نقشه ارائه ميشود، آدرس هر نقشه بايد در فهرست فايل نقشه قرار گيرد. ‎فايلهاي فهرست ممكن است بيش از‎50000‎ آدرس نقشه سايت را فهرست نكنند .همچنين ‎ميتوان چند فايل فهرست ايجاد كرد. فرمتXML فايل فهرست بسيار شبيه فرمتXML نقشه سايت است.

‎‎فايل فهرست نقشه سايت بايستي‎:

‎‎بايد با تگ‎ <sitemapindex>‎ شروع وبا‎</sitemapindex>‎ پايان يابد.
‎‎براي هر آدرسURL نقشه سايت يك تگ والد‎XML <sitemap>‎ اضافه ميشود .
‎‎تگ فرزند‎<loc>‎ براي معرفي آدرس URL والد بايد معرفي شود .
‎‎تگ اختياري‎<lastmod>‎ هم ميتواند اضافه گردد .

‎

‎توجه ـ يك فايل فهرست نقشه سايت فقط ميتواند نقشه هاي سايتي را مشخص كند كه درهمان سايت ‎مربوط به فهرست، يافت ميشوند .همانند نقشه سايت ، فايل فهرست نقشه سايت بايد با كدUTF-‎8 باشد

‎‎نمونه فهرست نقشه سايتXML

‎‎در مثال زير فهرست نقشه سايت را با دو نقشه سايت كه در آن فهرست شده نشان ميدهد.

‎

<?xml version="1.0" encoding="UTF-8"?>

<sitemapindex xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">

   <sitemap>

      <loc>http://www.example.com/sitemap1.xml.gz</loc>

      <lastmod>2004-10-01T18:23:17+00:00<lastmod>

   </sitemap>

   <sitemap>

      <loc>http://www.example.com/sitemap2.xml.gz</loc>

      <lastmod>2005-01-01<lastmod>

   </sitemap>

</sitemapindex>

‎

‎توجه ـ آدرس هاي اينترنتي نقشه سايت، مانند تمام مقدار موجود در فايلهايXML شما بايد داراي ‎موجوديت فرار‎(entity escaped)‎ باشند .

‎‎‎برچسب هايXML نقشه فهرست سايت

‎
‎‎ويژگي	‎‎ضرورت	‎‎شرح
‎<sitemapindex>	‎required	‎‎اطلاعات مربوط به تمام فايل هاي نقشه سايت موجود در آن معرفي ميشود.
‎<sitemap>	‎rtequired	‎‎اطلاعات مربوط به فايل نقشه اي از سايت در آن معرفي ميشود.
‎<loc>	‎required‎	‎‎آدرسURL فايل نقشه درآن معرفي ميشود .
‎<lastmod>	‎optional	‎‎زماني را كه فايل نقشه تغيير كرده مشخص ميكند .اين با هيچكدام از زمانهاي صفحات مندرج در ‎فايل نقشه مطابقت ندارد .مقدار آن درفرمتW3C Datetime بايد اعلام شود . ‎فايل نقشه ميباشد، نه تاريخ ايجاد نقشه سايت ‎با ارائه آخرين مهر اصلاح، خزنده هاي موتور جستجو را قادر ميسازد كه تنها زير مجموعه اي از ‎نقشه هاي سايت را در فهرست بازيابي كنند، يعني يك خزنده فقط ميتواند نقشه هاي سايتي را كه از ‎تاريخ معيني اصلاح شده اند بازيابي كند .اين مكانيسم واكشي تدريجي سايت امكان كشف سريع را ‎فراهم ميكند.

‎‎فرمت هاي ديگر نقشه سايت

‎پروتكل نقشه سايت ، شما را قادر ميسازد تا جرئياتي را در مورد صفحات خود به موتورهاي جستجو ‎ارائه دهيد، واستفاده از آن در ارائه مطالب سايت پيشنهاد ميگردد .زيرا ميتوانيداطلاعات بيشتري ‎در مورد صفحات سايت فرارتر ازURL ها ارائه دهيد .با اين حال علاوه برپروتكل XML از فيدهاي RSS‎و فايل هاي متني پشتيباني ميشود كه اطلاعات محدود تري را ارائه ميدهند .

‎Syndication feed

‎ميتوان يك فيد‎(Real Simple Syndication)‎ RSS يا Atom 0.3 ‎يا‎1.0‎ را ارائه داد .بطور كلي در صورتي از اين قالب استفاده ميشود كه سايت قبلا ‎يك فيدSyndication داشته باشد .بايد توجه كرد دراين روش ممكن است موتورهاي جستجو اجازه يابند ‎همهURL هاي سايت را بدانند .البته هرچند مطابق روال معمول با خزيدن درآنها، طولاني تر دسترسي ‎پيدا ميكنند .التبه مطمئن شويد كه فيد هايRSS ،در بالا ترين سطح دايركتوري قرار داشنه باشند ‎تا هنگام خزيدن فهرست هاي مربوطه در خود آن ويا سطوح پائين تر پيدا نمايند.

‎اين نوع سايت مپ هاي بيشتر براي متون فعال روزانه ويامشابه آنها كاربرد دارد .ممكن براى آنها ‎سايت مپ هاي دوره روزانه يا هفتگي و يا اولويت هاي ديگري تنظيم گردد، كه آنها فقط همانURl ‎مرتبط را مطابق پروتكل فهرست ميكنند .البته سايت مپ ديداري اين موارد هم براي نمايه محتوي ‎بسيار بااهميت است.

‎‎نقشه سايت فايل متنيText file -‎

‎‎در ايجاد فايل متني براي نقشه سايت بايد قوانين زير دنبال شود.

‎فايل متني بايد در هرخط داراي يك آدرسURL باشد URL .ها نميتوانند حاوي خطوط جديد تعبيه شده ‎باشند.
‎‎آدرسURL بايد بطور كامل ازجمله با http باشد .
‎هر فايل متني ميتواند حداكثرشامل‎50,000‎ يوآرال باشد . آن همچنين نبايد بيشتر از ‎پنجاه مگابايت‎(52,428,800 byte)‎ باشد .
‎‎اگر سايت بيش از‎ URL 50,000‎ باشد ميتوان آنرا در چند فايل معرفي كرد.
‎‎فايل بايد مطابق مجموعه كراكتريUTF-‎8 ذخيره شده باشد .
‎فايل متني نبايد داراي هيج اطلاعات ديگري بجز ليستURL باشد. آن نبايد داراي اطلاعات پاورقي و ‎هدر باشد.
‎‎درصورت تمايل ميتوانيد فايل متني را باgzip فشرده نمائيد تا پهناي باند كاهش يابد .
‎‎فايل فوق ميتواند با هرنام دلخواه نام گذاري شود.
‎‎در فايل بايد آدرسURL مطابق استاندارRFC-‎3986 وURI استانداردRFC-‎3987 باشند .
‎بايد فايل متني در بالاترين سطحي كه ميخواهيد موتورهاي جستجو بخزند قرار دهيد .اگر درroot ‎قرار داشته باشد تمام سايت مورد نظر است .توجه كنيد آدرسURL هاي سطح بالاتر در فهرست فايل ‎قرار نگيرند كه بي نتيجه است .اگرتعداد آنها زياد باشد ممكن است در ثبت فايل خطا ايجاد شود.

‎

http://www.example.com/catalog?item=1


http://www.example.com/catalog?item=11

‎‎محل فايل نقشه سايت‎ sitemap file location -‎‎

‎مكان يك فايل نقشه سايت مجموعهURL هائي كه ميتوان در فايل گنجانده شوند، مشخص ميكند . ‎يك فايل نقشه سايت واقع در http://example.com/catalog/sitemap.xml ‎ميتواند هر آدرس اينترنتي كه با http://www.example.com/catalog/ ‎شامل شود .اما نمي تواندشامل هر نشاني اينترنتي كه با ‎http://www.example.com/images/‎‎شروع شود باشد.

‎اگر مجوز تغيير http://www.example.com/path/sitemap.xml ‎راداشته باشيد، فرض براين است كه همچنين ارائه اطلاعات برايURL هائي با پيشوند http://www.example.com/path/ ‎را خواهيد داشت.

‎نمونه هائي از نشاني هاي وبي معتبر با پيشوند‎http://www.example.com/path/ ‎ ‎در زير منظور شده است.

‎

http://example.com/catalog/show?item=23

http://example.com/catalog/show?item=233&user=3453

‎نشانه هاي اينترنتي كه در http://www.example.com/catalog/sitemap.xml ‎نا معتبرند در زير آمده است.

‎


http://example.com/image/show?item=23

http://example.com/image/show?item=233&user=3453

https://example.com/catalog/page1.php

‎توجه كنيد كه اين بدين معني است كه همهURL هاي فهرست شده در نقشه سايت بايداز پروتكل يكساني ‎باشند، كه دراين مثالhttp است، ودر همان ميزباني‎(host)‎ قراربگيرند كه نقشه سايت ‎قراردارد .بعنوان مثال، اگر نقشه سايت در ‎ http://www.example.com/sitemap/ ‎‎قرار داشته باشد، نميتواند URL‎هائي از‎ http://subdomain.example.com ‎ راشامل شود.

URL‎هائيكه نامعتبر ميباشند، در بررسي بيشتر حذف ميشوند .اكيدا توصيه ميشود كه نقشه سايت خود ‎را در فهرست اصلي‎(root)‎ سايت خود قرار دهيد .براي مثال اگر وب سرور در eample.com ‎باشد، بايد نقشه سايت درhttp:/www.example.com/ قرار گيرد .

‎در مواردي خاص ممكن است نياز به نقشه هاي متفاوت سايت براي مسير هاي مختلفي داشته باشيد. ‎براي مثال اگر مجوز هاي امنيتي سازمان، دسترسي درنوشتن در دايركتورهاي مختلف را دسته بندي ‎كند.

‎اگر نقشه سايتي را بااستفاده ازمسيري با شماره پورت ارسال‎(submit)‎ مي نمائيد ،بايد ‎آن شماره پورت را به عنوان بخشي از مسير در هرURL فهرست شده فايل نقشه سايت قرار دهيد . ‎براي مثال اگر نقشه سايت شما در http://www.example.com:100/sitemap.xml ‎قرار داشته باشد، هر URL‎فهرست شده در نقشه سايت بايد با‎http://www.examplcom:100‎ ‎شروع شود.

‎‎نقشه هاي سايت وارسالهاي متقابل

‎Sitemaps & Cross Submits

‎براي ارسال‎(submit)‎ نقشه سايت براي چندين ميزبان از يك هاست، بايد مالكيت ميزبانها ‎(hosts)‎‎راكهURL براي آنها در نقشه سايت ارسال ميشود، اثبات ‎(‎"prowe‎")‎‎نمائيد .براي مثال فرض كنيد ميخواهيد نقشه سايت را براي سه هاست ارسال ‎كنيد.

‎

www.host1.com with Sitemap file sitemap-host1.xml

www.host2.com with Sitemap file sitemap-host2.xml

www.host3.com with Sitemap file sitemap-host3.xml

‎بصورت پيش فرض، اين منجر به خطاي ارسال متقاطع‎(‎"cross submission‎")‎ ميشود . ‎چون ميخواهيد نشاني هاي اينترنتيwww.host1.com را ازطريق نقشه سايتي كه در www..sitemaphost.com‎ميزباني شده ويابراي دو ميزبان ديگر ارسال‎(submit ) ‎نمائيد . ‎يكي از راههاي جلوگيري از اين خطا اينستكه ثابت كنيد كه مالكيتwww.host1.com را داريد، يعني ‎اختيار اصلاح فايلهاي آن .ميتوانيد اين كاررا با تغيير فايلrobats.txt در www.host1.com ‎انجام دهيد تا به نقشه سايت درwww.sitemaphost.com اشاره كند .

‎در اين مثال فايلrobots.txt در‎http://www.host1.com/ ‎ قرار گرفته ‎است.خطي از فايل حاوي " sitemap:http://www.sitemaphost.com/sitmap-host1.xml " ‎است . دراين خط بااشاره به www.sitemaphost.com ‎بطورضمني ثابت كرده ايد كه مالكwww.host1.com هستيد .به عبارت ديگر، هركسي كه فايل robots.txt‎را در www.host1.com كنترل ميكند، به نقشه سايت در http:/www.sitemaphost.com/sitemap-host1.xml ‎اعتماد ميكند تاحاويURL هائي براي www.host1.com باشد .همين روند را ميتوان براي دوميزبان ‎ديگر تكرار كرد.

‎‎اكنون ميتوان نقشه هاي سايت را درwww.sitemaphost.com ارسال كنيد .

‎هنگاميكهrobots.txt يك ميزبان خاص، مثل http://www..host1.com/robots.text ‎به نقشه سايت يا فهرست نقشه سايت در ميزبان ديگر اشاره ميكند، انتظار ميرود كه براي هريك از ‎نقشه هاي سايت هدف ، مانند http://www.sitemaphost.com/sitemap-host1.xml ‎همهURL متعلق ميزباني باشد كه به آن اشاره ميكند .اين بدين دليل است كه مطابق بحث قبلي ‎انتظار مي رود كه نقشه سايت فقط از يك ميزبان دارايURL باشد .

‎‎اعتبارسنجي نقشه يايت‎Validating Sitemap -‎‎

‎طرحواره هايXML زير عناصر وويژگي هايي را كه ميتوانند در فايل نقشه سايت مورد استفاده قرار ‎گيرند، راتعريف ميكنند .ميتوان اين طرح ها را از لينك هاي زير دانلود كرد:

‎‎1‎ـ براي سايت مپ ها

http://www.sitemaps.org/schemas/sitemap/0.9/siteap.xsd

‎‎2‎ـ براي فايل ايندكس سايت مپ

http://www.sitemaps.org/schemas/sitemap/0.9/siteindex.xsd‎‎

‎تعدادي ابزار در دسترس وجود دارد كه به شما كمك ميكند تا بتوانيد ساختار هاي نقشه سايت خود را ‎براساس آنها اعتبار سنجي كنيد .ميتوانيد فهرستي از ابزارهاي مرتبط باXML را در هريك از ‎مكانهاي زير پيدا نمائيد.

http://www.w3.org/XML/Schema#Tools

http://www.xml.com/pub/a/2000/12/13/schematools.html

‎براي تائيد اعتبار نقشه سايت يا فايل فهرست نقشه سايت با ابزار انتخابي ، فايلXML نقشه سايت ‎شما به سربرگ هاي اضافي يا تگ هايXML مطابق زير نيازمند ميباشد .

‎‎1‎ـ برايSitemap

‎

<?xml version='1.0' encoding='UTF-8'?>

<urlset xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"

         xsi:schemaLocation="http://www.sitemaps.org/schemas/sitemap/0.9 http://www.sitemaps.org/schemas/sitemap/0.9/sitemap.xsd"

         xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">

   <url>

      ...

   </url>

</urlset>

‎‎2‎ـ براي فايل فهرست ايندكس سايت‎(Sitemap index file)‎

‎

<?xml version='1.0' encoding='UTF-8'?>

<sitemapindex xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"

         xsi:schemaLocation="http://www.sitemaps.org/schemas/sitemap/0.9 http://www.sitemaps.org/schemas/sitemap/0.9/siteindex.xsd"

         xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">

   <sitemap>

      ...

   </sitemap>

</sitemapindex>

‎

‎‎گسترش پروتكل نقشه سايت

‎Extending the Sitemaps protool

‎شما ميتوانيد پروتكل نقشه سايت را با استفاده از فضاي نام‎(namespace)‎ گسترش ‎دهيد .به سادگي اين فضاي نام را در ريشه‎(root)‎ مشخص كنيد .مثلا :

‎

<?xml version='1.0' encoding='UTF-8'?>

<urlset xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"

         xsi:schemaLocation="http://www.sitemaps.org/schemas/sitemap/0.9 http://www.sitemaps.org/schemas/sitemap/0.9/sitemap.xsd"

         xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"

         xmlns:example="http://www.example.com/schemas/example_schema"> 

   <url>
      
         ...
      
      ...

   </url>
</urlset>

‎‎اطلاع رساني به خزنده هاي موتورهاي جستجو

‎Informating serch engine crawlers‎

‎هنگاميكه فايل نقشه سايت را ايجاد كرديد وآنرا روي وب سرور خود قرار داديد، بايد بموتورهاي ‎جستجو كه ازاين پروتكل پشيباني ميكنند، مكان آنرا مشخص كنيد .مورد را ميتوانيد بصورت زير ‎انجام دهيد:

‎ارسال آن از طريق رابط ارسال موتور جستجو ‎(serch engine's submission interface)‎‎
‎‎تعين مكان درفايلrobots.txt سايت
‎‎ارسال درخواستHTTP

‎سپس موتورهاي جستجو ميتوانند نقشه سايت شمارا بازيابي كرده وURL هارا در اختيار خزنده هاي ‎خود قرار دهند.

‎‎ارسال نقشه سايت ارطريق رابط موتور جستجو

‎ارسال نمودن مستقيم نقشه سايت به موتور جستجو، باعث ميشود كه بتوان اطلاعاتي در مورد وضعيت ‎نقشه سايت وخطاهاي موجود درآن اطلاعاتي به دست آورد . براي اطلاعات بيشتر دراين زمينه به ‎مستندات موتور جستجو مراجعه نمائيد . اينجانب براي اقدام براي سايت خود ‎ (www.mazaheronline.com)‎‎از لينك زير استفاده كرده ام

‎https://search.google.com/search-console/amp

‎‎مشخص كرد مكان نقشه سايت درrobots.txt

‎با استفاده از فايلrobots.txt ميتوانيد مكان نقشه سايت را مشخص نمائيد .براي انجام اين كار ‎مطابق نمونه زير شاملURL كامل نقشه سايت را تنظيم ودر فايلrobots.txt بنويسيد وآنرا ‎در ريشه سايت‎(root)‎ قراردهيد . بااين عمل شناسائيURL ها را براي خزنده موتورهاي ‎جستجو آسانتر ميكنيد.

Sitemap: http://www.example.com/sitemap.xml

‎اين خط دستورالعمل مندرج در فايلrobots.txt مستقل از محل آن در فايل است .و محل آن در فايل ‎هيج اثري در دستورندارد .اگر يك فايل فهرست نقشه سايت‎(index sitemap file)‎ ‎داريد ميتوانيد آدرس آنرا را درrobots.txt وارد كنيد، نيازي نيست تك تك آنر را فهرست كنيد .

‎‎براي هر فايلrobots.txt ميتوانيد بيش از يك فايل نقشه سايت رامشخص كنيد مطابق نمونه زير :

‎

Sitemap: http://www.example.com/sitemap-host1.xml

Sitemap: http://www.example.com/sitemap-host2.xml

‎

‎توجه ـ مطالبي كه در موردping و درخواست HTTP مطابق مطالب برداشتي ارائه ميگردد، اينجانب ‎نتوانستم دراجرا نتيجه بگيرم .درموردping اقدام نمودم آنرا منسوخ شده اعلام ميكنند .يعني ‎نقشه اصلاحي سايت براي ارسال مجدد با روشهاي زير نتوانستم اعمال نمايم .ولي راهكارهاي ‎ديگري براي انجام آن ارائه خواهم كرد كه موفقيت آميز ميباشد.

‎‎ارسال نقشه سايت از طريق درخواستHTTP

‎براي ارسال نقشه سايت خود بااستفاده از يك درخواست‎)‎ HTTP بجاي ‎<serchengine-‎URL>‎‎باURL ارائه شده توسط موتور جستجو ‎ (‎‎در خواست خود را بهURL زير ارسال كنيد:

‎<searchengine_URL>/ping?sitemap=sitemap_url

‎بعنوان مثال ، اگر نقشه سايت شما در‎www.example.com/sitemap.gz ‎واقع شده باشدURL مربوطه بصورت زيرميباشد :

‎<serchengine_URL>/ping?sitemap=http://www.example.com/sitemap.gs

‎‎فرم رمزگذاري آن مطابق زير است

‎

<searchengine_URL>/ping?sitemap=http%3A%2F%2Fwww.yoursite.com%2Fsitemap.gz

‎ميتوانيد درخواستHTTP را با استفاده از ‎wget,curl‎ يا مكانيزم ديگري ‎كه انتخاب مكنيد، صادركنيد .يك درخواست موفق ، كدپاسخHTTP 200 را برميگرداند .اگر پاسخ ‎ديگري دريافت كرديد، بايد درخواست خودرا دوباره رسال كنيد.كه پاسخHTTP 200 فقطا نشان ‎ميدهد كه موتور جستجو نقشه سايت شمارا دريافت كرده است، نه اينكه خود نقشه سايت و ياURL ها ي ‎موجود معتبر بوده اند .يك راه آسان براي انجام اينكار ، راه اندازي يك كار خودكار براي توليد ‎وارسال نقشه سايت بطور منظم است.

‎

‎توجه ـ اگريك فايل فهرست نقشه سايت ارائه ميكنيد، فقط بايد يك درخواستHTTP كه شامل مكان ‎فايل فهرست است صادر نمائيد .لازم نيست براي هر نقشه سايت كه در فهرست وجود دارد، صادر گردد.

‎‎بدون احتساب محتويExcluding content -‎

‎

‎ياد آوري ـ مطالب مندرج در اين صفحه با استفاده از سايتSitemap.org برداشت وتدوين گرديده ‎است.