在线 robots.txt 文件生成工具

这款在线 robots.txt 生成器提供多种常见的设置选项供站长选择使用，可根据具体需要生成符合 robots 协议的 robots 文件，是一款非常实用的 SEO 工具

默认 - 所有机器人是:
检索间隔:
Sitemap: (留空为无)

普通搜索机器人:	Google	googlebot
	Baidu	baiduspider
	so	360Spider
	Sogou	Sogou Spider
	Bing	msnbot
	sm	YisouSpider
	toutiao	Bytespider
	Yahoo	yahoo-slurp
	Ask/Teoma	teoma
	Cuil	twiceler
	GigaBlast	gigabot
	Scrub The Web	scrubby
	DMOZ Checker	robozilla
	Nutch	nutch
	Alexa/Wayback	ia_archiver
	Naver	naverbot, yeti

特殊搜索机器人:	Google Image	googlebot-image
	Google Mobile	googlebot-mobile
	Yahoo MM	yahoo-mmcrawler
	MSN PicSearch	psbot
	SingingFish	asterias
	Yahoo Blogs	yahoo-blogs/v3.9

限制目录:	路径是相对的，但每个路径之前都要包含："/"

现在，你创建一个空白的文本文件，命名为：“robots.txt”，然后把上面的内容，复制并粘贴到“robots.txt”中去。把“robots.txt”放在你网站的根目录，并确保他能让访问者（如搜索引擎）访问到。

客服热线
400-928-1377
企业QQ9:00-18:00
值班QQ18:00-22:00

微信客服

Copyright©2018-2025 版权归属浙江花田网络有限公司逗号站长站 www.douhao.com
本站已获得《中华人民共和国增值电信业务经营许可证》：浙B2-20200940 浙ICP备18032409号-1

浙公网安备 33059102000262号

客服
热线

400-928-1377

微信
客服