假设:robots.txt 隐藏了一个页面。现实:它只是要求爬虫不要抓取该 URL。没有 noindex 标签的情况下,Google 和 Bing 仍然可以将其收录。正是这一处漏洞,导致共享的 Claude 对话最终出现在公开搜索结果中。

查看原文
post-image
此页面可能包含第三方内容,仅供参考(非陈述/保证),不应被视为 Gate 认可其观点表述,也不得被视为财务或专业建议。详见声明
  • 赞赏
  • 评论
  • 转发
  • 分享
评论
请输入评论内容
请输入评论内容
暂无评论