Nginx/robots.txt:修订历史

来自OSSmedia

差异选择:选中要对比的版本的单选按钮,按Enter键或下方的按钮。
说明:(当前)=与最后版本之间的差异,(之前)=与上一版本之间的差异,=小编辑。

2024年3月26日 (星期二)

  • 当前之前 09:402024年3月26日 (二) 09:40Brucekomike 讨论 贡献 258字节 +258 创建页面,内容为“本页面介绍如何使用 Nginx 返回 robots.txt 的相关配置 ==== 阻止所有爬虫 ==== <syntaxhighlight lang="text"> location = /robots.txt { add_header Content-Type text/plain; return 200 "User-agent: *\nDisallow: /\n"; } </syntaxhighlight>” 标签可视化编辑