HomeBlogger Help

How to add Custom Robots.txt File in Blogger (Blogspot) | Blogger me Custom Robots.txt File kese lgaye

Like Tweet Pin it Share Share Email

What is Robots.txt and How to add Custom Robots.txt File in Blogger (Blogspot) ?

“How to add Custom Robots.txt File in Blogger” Robots.txt is a file which tells the search engine crawlers what page to crawl and what not to. Simply, you can absolved your blog demo pages, label pages, archive pages and other which you don’t consider as important. Search engine crawlers always scan the robots.txt file before crawling any blog.

(Robots.txt एक फ़ाइल है जो खोज इंजन को क्रॉलर बताती है कि कौन सा पृष्ठ क्रॉल करना है और क्या नहीं। बस, आप अपने ब्लॉग डेमो पेज, लेबल पेज, संग्रह पेज और अन्य को अनुपस्थित कर सकते हैं जिन्हें आप महत्वपूर्ण नहीं मानते हैं। किसी भी ब्लॉग को क्रॉल करने से पहले खोज इंजन क्रॉलर हमेशा robots.txt फ़ाइल को स्कैन करते हैं।)

How to add Custom Robots.txt File in Blogger

When a robot search engine crawler is visiting a page or website, robots.txt is the first thing it looks for is the robots.txt file. As a Blogger user you now have the option to control what the search engine crawlers should follow and index from your website or blog.

“How to add Custom Robots.txt File in Blogger” Follow this Simple Steps:

[1] Go to your blogger dashboard > Settings > Search Preferences > Crawling and Indexing. (अपने ब्लॉगर डैशबोर्ड> सेटिंग्स> Search Preference> क्रॉलिंग और इंडेक्सिंग पर जाएं)
[2] Click ‘Custom robots.txt‘ > click ‘yes‘. (‘कस्टम robots.txt’ > ‘हां’ पर क्लिक करें)
[3] Paste you custom robots.txt. (An example is given below) (कस्टम robots.txt पेस्ट करें)

User-agent: Mediapartners-Google


User-agent: *

Disallow: /search

Allow: /

Sitemap: http://example.blogspot.com/feeds/posts/default?orderby=UPDATED

How to add Custom Robots.txt File in Blogger

Note: – Remember to change the highlighted url (example.blogspot.com) with your blog address.

[4] Click ‘Save changes’ to save the custom robots.txt. (कस्टम robots.txt को save  करने के लिए ‘Save changes’ पर क्लिक करें)

Read here : How to Add Meta Description in Blogger? Blogger me Meta Description kese lagaye?

Read here : Custom Robots Header Tags Settings in Blogger (Blogspot) | Blogger me Custom Robots Header Tags settings kese kre

error: Content is protected !!