Robots.txt Generator

Robots.txt Generator

默认 - 所有机器人都是:	允许 拒绝
爬行延迟:	默认 - 无延迟 5 Seconds 10 Seconds 20 Seconds 60 seconds 120 Seconds
网站地图: （如果没有则留空）
搜索机器人:	Google	与默认值相同 允许 拒绝
	Google Image	与默认值相同 允许 拒绝
	Google Mobile	与默认值相同 允许 拒绝
	MSN Search	与默认值相同 允许 拒绝
	Yahoo	与默认值相同 允许 拒绝
	Yahoo MM	与默认值相同 允许 拒绝
	Yahoo Blogs	与默认值相同 允许 拒绝
	Ask/Teoma	与默认值相同 允许 拒绝
	GigaBlast	与默认值相同 允许 拒绝
	DMOZ Checker	与默认值相同 允许 拒绝
	Nutch	与默认值相同 允许 拒绝
	Alexa/Wayback	与默认值相同 允许 拒绝
	Baidu	与默认值相同 允许 拒绝
	Naver	与默认值相同 允许 拒绝
	MSN PicSearch	与默认值相同 允许 拒绝
受限目录:	该路径相对于 root 并且必须包含尾部斜杠 "/"

现在，在根目录中创建“robots.txt”文件。复制以上文本并粘贴到文本文件中。

关于 Robots.txt Generator

Welcome to use Robots.txt Generator tool!

OYSEO.COM provide 150+ free SEO tools to improve your website performance. If you need SEO service, please visit https://zjdu.com. If you need social media account management to add followers or likes, please visit https://buysmm.com.