close

How to fix robot.txt in Hindi | Indexed, though blocked by robots.txt fix

How to fix robot.txt in Hindi :- अगर आप किसी भी तरह की वेबसाइट चला रहे है या फिर आप किसी शॉपिंग वेबसाइट चला रहे है तो आपको robots.txt के बारे में तो मालूम होगा अगर आपको robots.txt के बारे में और अधिक जनकारी चाहिए जैसे की आप कैसे अपने वेबसाइट में robots.txt जेनेरेट कर सकते है या फिर अगर आपको अपने robot txt को अपडेट करना है तो आप कैसे कर सकते है

यह सभी तरह की जानकारी आप आसानी से इस पोस्ट में जान सकते है आज हम आपको robots.txt की वजह से होने वाले सभी तरह के प्रॉब्लम को सॉल्व करेंगे आईये जानते है की robots.txt क्या है

robots.txt क्या है?

आपको बता दे की अगर आपके पास ब्लॉग वेबसाइट या फिर शॉपिंग वेबसाइट है तो आपको बता दे की आप किसी भी तरह का कंटेंट अपनी वेबसाइट पर डालते है

तो वह इंडेक्स होता है वह robots.txt के जरिये ही गूगल पर आपका कंटेंट पब्लिक होता है अगर आपके ब्लॉग या फिर वेबसाइट पर ट्रैफिक नहीं आ रहा है तो आप अपने कंटेंट गूगल पर find करे

क्युकी कई बार ऐसा होता है की आपका ब्लॉग गूगल पर इंडेक्स ही नहीं होता है जैसे आप ने आज एक प्रोडक्ट ऐड किया और सर्च कंसोल के जरिये आप इंडेक्स करवाते है पर फिर भी आपका प्रोडक्ट गूगल पर इंडेक्स नहीं होता है तो आप को अपने robots.txt को सही तरह से चेक करना होगा

robots.txt के जरिये हम गूगल के bot को यह बताते है की गूगल को कौन सी इनफार्मेशन इंडेक्स करना है और कोण का पोस्ट इंडेक्स नहीं करना है

जिसके चलते आपके वेबसाइट पर लोड काम पड़ता है जिससे आपकी वेबसाइट और ब्लॉग पर लोड टाइम काम होता है जिससे आपकी वेबसाइट कुछ सेकंड में ही ओपन हो जाती है

अगर आपको robots.txt का स्ट्रक्टर देखना है तो आपको बता दे की आप अपनी वेबसाइट के पीछे robots.txt लिख कर एंटर करना है आपका robots.txt आपको शो हो जाएगा

आपको बता दे की जब आप अपनी वेबसाइट का sitemap को जेनेरेट करते है तो आप गूगल को यह बताते है की आप sitemap आ कर हमारी वेबसाइट के लेटेस्ट पेज को इंडेक्स करे

वही दूसरी और robots.txt का काम यह है की आपकी कौन सा पोस्ट को इंडेक्स करना है और किस फोल्डर को allow करना है और किस फाइल को disallow करना है

robots.txt को कैसे generate करे? how to generate robots.txt

अगर आप wordpress इस्तेमाल करते है तो यह करना आपके लिए बहुत ही ज्यादा आसान है क्युकी wordpress बहुत तरह के टूल आपको मदद कर सकते है

अगर आप wordpress इस्तेमाल कर रहे है तो आप सबसे पहले yoast SEO TOOL को डाउनलोड करके एक्टिव कर ले आपको बता दे की yoast एक तरह का SEO मास्टर है

आप अपनी वेबसाइट से किस तरह से आप on page SEO करते है पर yoast एक तरह का डिजिटल SEO मास्टर है यह आपको बताता है की आपको SEO के लिए किन तरह के स्टेप फॉलो करना है आपको wordpress में yoast SEO एक्टिव करने के लिए आपको plugin में जाना है और फिर ऐड plugin पर क्लिक करे और सर्च करे YOAST SEO और फिर डाउनलोड कर ले

फिर आप इसकी सही तरह से सेटिंग करने के बाद आप TOOL में जाये फिर आप एडिटर files पर क्लिक करे और generate पर क्लिक करे आपकी robots.txt फाइल्स Yoast SEO के जरिये generate हो जाएगी

Robots.txt files आपके लिए बहुत फायेदेमंद साबित हो सकते हैं यदि :

  • आप चाहते हैं की search engines आपके website में स्तिथ duplicate pages को ignore करे
  • अगर आप चाहते हैं की आपके internal search results pages को ये index न करे तब
  • अगर आप चाहते हैं की search engines आपके निर्देशित कुछ pages को index न करें तब
  • अगर आप चाहते हैं की आपके कुछ files जैसे की कुछ images, PDFs इत्यादि को ये Index न करें तब
  • अगर आप चाहते हैं search engines को ये बताना की आपकी sitemap कहाँ स्तिथ है

अगर आपको और अधिक जानकारी चाहिए तो वेबसाइट विजिट करे और आपकी वेबसाइट के पीछे आप Robots.txt लिख कर देख सकते है आप किसी भी वेबसाइट के पीछे रोबोट Robots.txt लिख कर देख सकते है की उस वेबसाइट के मालिक ने किस किस allow और disallow किया है

क्या होगा अगर हम robots.txt file का इस्तेमाल न करें

आपको बता दे की बहुत से ब्लॉगर और वेबसाइट ओनर ऐसे है जो की robots.txt file को generate नहीं करते है इससे गूगल और सभी तरह के सर्च इंजन को यह मालूम होता है की आपकी सभी तरह के कंटेंट इंडेक्स और सभी तरह की सर्च इंजन आपकी वेबसाइट की सभी पोस्ट के साथ साथ जो आप इंडेक्स नहीं करना कहते है तो वह भी इंडेक्स हो जाता है

जैसे की आपकी ड्राफ्ट फाइल्स और unpublish कंटेंट ब्लॉग को भी इंडेक्स कर देता है इसलिए सर्च इंजन को यह सभी तरह के इंडेक्स करने में बहुत ज्यादा समय लगता है जिससे आपके लेटेस्ट पोस्ट बहुत लेट इंडेक्स होते है

अगर आप robots.txt file को सही तरह से generate करते है तो ताकि वेबसाइट में लोड नहीं पड़ता और आपके वेबसाइट पर रोजना जो पोस्ट पब्लिश होता है वह जल्दी इंडेक्स हो जाता है इस लिए robots.txt file सभी की वेबसाइट के लिए बहुत जरुरी है

Leave a Comment

नाखुनो की देखभाल के लिए बेस्ट है शहद मिलावटी दूध तो नहीं पी रहे आप ऐसे जाने ? आँखों की रोशनी बढ़ाए घरेलु उपाय कब्ज दूर करेंगे ये 7 उपाय ये फूड्स खाय आँखों की रोशनी बढ़ाए