Robots.txt জেনারেটর

By default all robots are

Crawl delay

 

Sitemap URL. Leave blank for none.

Robots are allowed to crawl your site:

 

Restricted directories or files. Relative to root, with trailing slash for dirs.

Your Robots.txt

একটি ওয়েবসাইটে robots.txt ফাইলটি ওয়েবমাস্টার নির্দিষ্ট ফাইল বা ডিরেক্টরিগুলিকে উপেক্ষা করে যখন সুরক্ষা ইঞ্জিন মাকড়সা একটি সাইটকে ক্রলিং করে।

Robrots.txt জেনারেটর আপনাকে Robost.txt ফাইলটি সহজে পেতে সহায়তা করে, আমরা আপনাকে সার্চ ইঞ্জিনটি নির্বাচন করি এবং বিলম্বের সময়কে চুপ করে থাকি, সাইটম্যাপ URL টি লিখুন এবং আপনার কোডটি পেতে আপনার কোডটি পেতে। নীচের মত কোড:

<প্রাক্তন>

ব্যবহারিক দূত: *

নিষিদ্ধ: /

ব্যবহারকারী-এজেন্ট: আইএ_মার্কিভার

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: Slurp

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: Aport

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: তিওমা

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: Baiduspider

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: টুইলেলার

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: রোবোজিলা

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: গিগাবাইট

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: গুগলবট

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: গুগলবোট-ইমেজ

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: গুগলবট-মোবাইল

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: mail.ru

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: MSNBOT

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: পিএসবিট

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: Naverbot

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: তবুও

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: নিউট্র

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: স্ট্যাক্রাম্বলার

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: scrubby

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: Asterias

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: ইয়াহু-স্লুফ

নিষিদ্ধ:

ব্যবহারকারী-এজেন্ট: Yandex

নিষিদ্ধ:

Robots.txt জেনারেটর
সুপারিশ ক্যালকুলেটর Candela ক্যালকুলেটর lumens লক্স ক্যালকুলেটর থেকে লক্স দেনাদার দিন ক্যালকুলেটর ক্রেডিট কার্ড সর্বনিম্ন পরিশোধের ক্যালকুলেটর মোট সম্পদ টার্নওভার ক্যালকুলেটর ঋণ হ্রাস ক্যালকুলেটর আয় অনুপাত ক্যালকুলেটর ঋণ প্রতি ক্লিক প্রতি ক্যালকুলেটর ক্লিক করুন ঋণ সুদ ক্যালকুলেটর ক্রেডিট কার্ড সুদের ক্যালকুলেটর ইমেল মার্কেটিং ROI ক্যালকুলেটর মোট মুনাফা মার্জিন ক্যালকুলেটর নেট মুনাফা মার্জিন ক্যালকুলেটর বার্ষিক পেমেন্ট ক্যালকুলেটর রিটার্ন মুনাফা হার (ROR) ক্যালকুলেটর হার