🤖 Robots.txt Generator
সার্চ ইঞ্জিন বটদের জন্য robots.txt ফাইল জেনারেট করুন
Robots.txt কী? এটি একটি টেক্সট ফাইল যা সার্চ ইঞ্জিন ক্রলারদের নির্দেশ দেয় আপনার সাইটের কোন অংশ ক্রল করা যাবে আর কোনটা যাবে না।
ফাইলটি আপনার সাইটের রুট ডিরেক্টরিতে রাখতে হয় (যেমন: https://example.com/robots.txt)।
🗺️ সাইটম্যাপ URL
🔍 ইউজার এজেন্ট (বট) সিলেক্ট করুন
🚫 অনুমতি / নিষেধ (Allow / Disallow)
বর্তমান রুলস:
এখনো কোনো রুল যোগ করা হয়নি
⚡ কমন ডিরেক্টরি:
⚙️ অতিরিক্ত সেটিংস
📦 রেডিমেড প্রিসেট
WordPress
স্ট্যান্ডার্ড WP robots.txt
Allow All
সবকিছু ক্রল করার অনুমতি
Disallow All
সবকিছু ব্লক
SEO Friendly
SEO-বান্ধব সেটিংস
E-Commerce
ই-কমার্স সাইটের জন্য
Block AI Bots
AI ট্রেনিং বট ব্লক
📄
Robots.txt আউটপুট এখানে দেখাবে
প্রথমে বিল্ডার ট্যাব থেকে robots.txt জেনারেট করুন