Robots.txt रिपोर्ट

यह एक्स (पूर्व में ट्विटर) बॉट रिपोर्ट करता है जब प्रासंगिक कंपनियां robots.txt फ़ाइलों को अपडेट करती हैं।वर्तमान में ट्रैक की गई कंपनियों की सूची के लिए, पिन किए गए पोस्ट (जोड़े जाने वाले अनुरोधों के लिए डीएम) की जांच करें।एक परिवर्तन का पता चलने पर robots.txt diff को पोस्ट में अपलोड किया जाता है।