SEO
Pro
Blog
Khuyến mãi
Liên hệ
Robots.txt Generator
Tạo file robots.txt để hướng dẫn các bot tìm kiếm và các công cụ AI cách thu thập dữ liệu web.
Googlebot
Cho phép
Chặn
Bingbot
Cho phép
Chặn
AI Bots (GPT, Gemini...)
Chặn (Khuyên dùng)
Cho phép
Crawl Delay (Giây)
Sitemap URL (Tùy chọn)
Thư mục/Trang muốn chặn (Mỗi dòng một đường dẫn)
Tạo file Robots.txt