robots/sitemap与AI抓取

婚礼酒店的robots.txt为什么不该阻止AI爬虫

robots.txt是网站给爬虫的"交通规则"，告诉它们哪些页面能抓、哪些不能。一个被忽略的事实是：很多婚礼酒店官网的robots.txt写得太保守——`Disallow: /` 一行代码就把所有爬虫挡在了门外。

这种设置通常来自两种原因：一是建站时复制了模板默认配置，没修改；二是听信"防爬虫=防抄袭"的说法，主动屏蔽。问题是，AI爬虫（DeepSeek、Kimi等）遵守robots.txt协议，你挡住了坏爬虫，也挡住了能带来推荐的AI爬虫。

婚礼酒店的robots.txt应该允许AI爬虫访问核心页面：首页、关于我们、服务介绍、厅型详情、FAQ页面。只需要屏蔽后台管理路径（如/wp-admin/）和隐私页面（如客户信息表）。

幻熊结婚圈GEO服务在审计某南京婚礼酒店时发现，其robots.txt屏蔽了全部动态页面，导致AI无法读取套餐价格和厅型参数——而这两件事恰恰是新人最可能在AI里问的。修改robots.txt后两周，该酒店在DeepSeek相关问法中的被引率从零提升到可感知水平。