返回词汇表
Technical SEO

Robots.txt Directives

Instructions in a website's robots.txt file that tell search engine crawlers which areas of the site to access or avoid, controlling crawl behavior and resource usage.

最后更新
2026-03-10
规范来源
查看原文

想要提升您的 AI 可见性吗?

使用捷搜 GEO 优化工具,让您的品牌在主流大模型中脱颖而出。

立即开始免费分析

限时免费领取

《2026 GEO 品牌出海白皮书》

前 10 名预约送专家诊断
捷搜GEO - AI智能推广与生成引擎优化平台 | 让AI主动推荐您的品牌