इस टूल के बारे में
सभी क्रॉलर की अनुमति दें और उन्हें अपने sitemap पर इंगित करें।
उपयोग के लिए तैयार robots.txt — सामग्री देखें, कॉपी करें, या सही फ़ाइल नाम के साथ डाउनलोड करें। मुफ़्त और 100% ब्राउज़र में।
robots.txt
सभी क्रॉलर की अनुमति दें और उन्हें अपने sitemap पर इंगित करें।
User-agent: * Allow: / Sitemap: https://example.com/sitemap.xml