The Digital Guides

 दोस्तों इस पोस्ट में हम एक नये टॉपिक में बात करेँगे Robot.txt file के बारे में की ये क्या होते हैं, और ये क्यों जरुरी है किसी भी website के लिये राइट। Robots.txt file क्या है और ये कैसे काम करता है।  तो चलिये स्टार्ट करते हैं की  Robot.txt file  होती क्या हैं, suppose करो आपने कोई website बनाई है और उस website में आपके बड़े सारे Page और Post हैं. अब इसमें से कुछ Page ऐसे हो सकते हैं जिन्हे आप  search engine  पे नहीं दिखाना चाहते हो राइट। आप ये नहीं चाहते हो की Google इन pages को index करे या crawl करे, आपकी website पे और भी ऐसे बहोत सारे pages हो सकते हैं, जैसे  Thank you page  या कोई और pages हैं जो की आप नहीं चाहते की Google इन्हें index करे और search engine में दिखाये राइट। अब google को आप कैसे बताओगे की इन pages को search engine में मत दिखाना तो इसके लिये आप use कर सकते हो  Robots.txt file  राइट। Robots.txt File  Robots.txt file कैसे काम करता है? Robots.txt file  को हम और भी नामो से जानते हैं जैसे  Google boat  , या  Robots ,  Spider   राइट। Suppos