लगभग प्रत्येक वेबमास्टर अपनी साइट के पृष्ठों को इस प्रकार अनुकूलित करने का प्रयास करता है कि अधिक से अधिक अनुक्रमित तत्व प्राप्त हो सकें। लेकिन कुछ मामलों में, इसके विपरीत, आपको कुछ पृष्ठों को छिपाने की आवश्यकता होती है, उदाहरण के लिए, पंजीकरण डेटा दर्ज करने के लिए एक फॉर्म, पासवर्ड पुनर्प्राप्त करना आदि।
यह आवश्यक है
Robots.txt फ़ाइल का संपादन।
अनुदेश
चरण 1
कई अनुभागों या किसी विशिष्ट संपूर्ण साइट के अनुक्रमण को बंद करने का सबसे आसान तरीका है robots.txt फ़ाइल में उपयुक्त प्रविष्टियां करना। उनका उपयोग सर्च इंजन के लिए एक गाइड के रूप में किया जाता है। साइट के पृष्ठों में प्रवेश करते समय, खोज रोबोट इस फ़ाइल को संदर्भित करता है, यदि यह नहीं है, तो यह पूरी साइट को अनुक्रमित करता है, अन्यथा यह इस फ़ाइल में निर्दिष्ट अनुशंसाओं का पालन करता है।
चरण दो
यदि आपने अपनी साइट स्वयं बनाई है, और आपके पास ऐसा कोई एप्लिकेशन नहीं है, जो निषेधों को इंगित करने वाले टेक्स्ट दस्तावेज़ के रूप में है, तो इसे स्वयं बनाना आसान है। एक नया टेक्स्ट दस्तावेज़ खोलें, उदाहरण के लिए, नोटपैड प्रोग्राम का उपयोग करके। दस्तावेज़ के मुख्य भाग में निम्नलिखित पंक्तियाँ रखें: उपयोगकर्ता-एजेंट: * अस्वीकृत करें: /file.htmlअस्वीकार करें: / निर्देशिका /
चरण 3
अब आइए जानें कि आपने टास्क के रूप में सर्च इंजन से क्या पूछा। उपयोगकर्ता-एजेंट के विपरीत "*" चिह्न का अर्थ है कि यह निर्देश बिल्कुल सभी फ़ाइल सिस्टम द्वारा निष्पादित किया जाना चाहिए। उदाहरण के लिए, यदि आप "*" के बजाय "यांडेक्स" लिखते हैं, तो यह अपील केवल यांडेक्स खोज इंजन के रोबोट द्वारा ही पढ़ी जाएगी। अस्वीकृत कथन किसी विशिष्ट अनुभाग (निर्देशिका) या फ़ाइल (.html फ़ाइल) के अनुक्रमण को प्रतिबंधित करते हैं।
चरण 4
robots.txt फाइल को कंपाइल करने के बाद, आप सीधे साइट पेज पर टेक्स्ट पर जा सकते हैं। जैसा कि आप जानते हैं, खोज इंजन आपके पृष्ठों पर 3 से अधिक बाहरी सक्रिय लिंक रखना पसंद नहीं करते हैं। क्या होगा अगर आपको नकसीर चाहिए लेकिन 5 या अधिक लिंक पोस्ट करें। इन मामलों में, आप एक विशेषता या एक टैग का उपयोग कर सकते हैं।
चरण 5
Google खोज इंजन द्वारा अनुक्रमण से लिंक को बंद करने के लिए, आपको लिंक को निम्न रूप में लाना होगा: एंकर लिंक। विशेषता का मुख्य भाग लिंक के किसी भी भाग में डाला जाना चाहिए, इसे एक स्थान से अलग करना नहीं भूलना चाहिए, अर्थात। विशेषता को "a" और "href" के बीच या लिंक और उसके एंकर के बीच रखा जा सकता है।
चरण 6
यांडेक्स सर्च इंजन द्वारा इंडेक्सिंग से लिंक को बंद करने के लिए, आपको लिंक को निम्नलिखित फॉर्म में लाना होगा: एंकर लिंक। टैग को शुरुआत में और लिंक के अंत में रखा गया है। यह मत भूलो कि यह टैग युग्मित है: दूसरा भाग, पहले के विपरीत, "/" चिह्न के साथ आता है।
