វារយក

ឧបករណ៍ត្រួតពិនិត្យ Robots.txt និង Sitemap

បិទភ្ជាប់ដូមេន ដើម្បីពិនិត្យ robots.txt និងវារយក sitemap ដែលបានភ្ជាប់ (ប្រភេទ root/blog/blacklist/forum)។ បង្ហាញ URL ដែលត្រូវបានទប់ស្កាត់ sitemap កំព្រា និងធាតុដែលមានទម្រង់មិនត្រឹមត្រូវ។ ដំណើរការនៅផ្នែកអតិថិជនតែប៉ុណ្ណោះ—អាចត្រូវបានកំណត់ដោយ CORS។

ត្រួតពិនិត្យ

អ្វីដែលយើងពិនិត្យ

  • ភាពអាចប្រើបានរបស់ robots.txt និងច្បាប់ Disallow/Allow។
  • ការរកឃើញ sitemap (robots.txt + ផ្លូវទូទៅ ដូចជា /sitemap.xml, /blog/sitemap.xml)។
  • ចំនួន URL ក្នុងមួយ sitemap និងធាតុដែលមានទម្រង់មិនត្រឹមត្រូវ។
  • សម្គាល់ URL ដែលត្រូវបានទប់ស្កាត់ ប៉ុន្តែក៏បង្ហាញនៅក្នុង sitemap ផងដែរ។